Près d'une décennie Il y a, Google a montré une fonctionnalité intitulée Now on Tap in Android Marshmallow – Tap et maintient le bouton d'accueil et Google fera surface d'informations contextuelles utiles liées à ce qui se trouve à l'écran. Parler d'un film avec un ami sur le texte? Maintenant, sur le robinet, vous pouvez vous procurer des détails sur le titre sans avoir à quitter l'application de messagerie. Vous regardez un restaurant à Yelp? Le téléphone pourrait faire surface de recommandations optimables avec juste un robinet.

J'étais fraîchement sorti de l'université, et ces améliorations semblaient excitantes et magiques – sa capacité à comprendre ce qui était à l'écran et à prédire les actions que vous voudrez peut-être prendre en train de se sentir orientées. C'était l'une de mes fonctionnalités Android préférées. Il s'est lentement transformé en Google Assistant, ce qui était génial à part entière, mais pas tout à fait la même.

Aujourd'hui, lors de la conférence des développeurs d'E / S de Google à Mountain View, en Californie, les nouvelles fonctionnalités Google vantent dans son système d'exploitation Android se sentent comme le maintenant à l'ancien – vous permettant de provoquer des informations contextuelles autour de vous pour faire un peu votre téléphone Plus facile. Sauf que cette fois, ces fonctionnalités sont alimentées par une décennie de progrès dans les modèles de grande langue.

“Je pense que ce qui est excitant, c'est que nous avons maintenant la technologie pour construire des assistants vraiment excitants”, me dit Dave Burke, vice-président de l'ingénierie sur Android, me dit plutôt qu'un appel vidéo Google Meet. «Nous devons être en mesure d'avoir un système informatique qui comprend ce qu'il voit et je ne pense pas que nous ayons eu la technologie à l'époque pour bien le faire. Maintenant nous le faisons.

J'ai eu la chance de parler avec Burke et Sameer Samat, président de l'écosystème Android chez Google, de ce qui est nouveau dans le monde d'Android, le nouveau Gemini d'assistant d'IA de l'entreprise, et ce que tout cela contient pour l'avenir du système d'exploitation. Samat a qualifié ces mises de vue comme une «opportunité unique pour réinventer ce que le téléphone peut faire et repenser tout Android».

Cercle pour rechercher… vos devoirs

Il commence par Circle to Search, qui est la nouvelle façon de Google d'approcher la recherche sur mobile. Tout comme l'expérience de maintenant sur le robinet, Circle to Search – que la société a fait ses débuts il y a quelques mois – est plus interactive que de simplement taper dans une boîte de recherche. (Vous encerclez littéralement ce que vous voulez rechercher à l'écran.) Burke dit: «C'est une façon très viscérale, amusante et moderne de rechercher… elle est également plus jeune parce que c'est tellement amusant à utiliser.»

Samat affirme que Google a reçu des commentaires positifs de la part des consommateurs, mais le cercle à la dernière fonctionnalité de la recherche est spécifiquement provenant de étudiant retour. Le cercle à la recherche peut désormais être utilisé sur la physique et les problèmes mathématiques lorsqu'un utilisateur les fait tourner – Google crachera les instructions étape par étape sur la fin des problèmes sans que l'utilisateur ne quitte l'application Syllabus.

Samat a clairement indiqué que Gemini ne fournissait pas seulement des réponses mais montrait aux étudiants comment résoudre les problèmes. Plus tard cette année, Circle to Search sera en mesure de résoudre des problèmes plus complexes comme les diagrammes et les graphiques. Tout cela est alimenté par les modèles LearnLM de Google, qui sont affinés pour l'éducation.

Gemini devient plus contextuel sur Android

Gemini est l'assistant AI de Google qui est à bien des égards pour éclipser Google Assistant. Vraiment – lorsque vous lancez Google Assistant sur la plupart des téléphones Android ces jours-ci, il y a une option pour le remplacer par des Gémeaux à la place. Alors naturellement, j'ai demandé à Burke et Samat si cela signifiait que l'assistant se dirigeait vers le Google Graveyard.

«La façon de le regarder est que les Gémeaux sont une expérience d'adoption au téléphone», explique Samat. «Je pense que, évidemment, au fil du temps, Gemini devient plus avancé et évolue. Nous n'avons rien à annoncer aujourd'hui, mais il y a un choix pour les consommateurs s'ils veulent opter pour ce nouvel assistant propulsé par l'IA. Ils peuvent l'essayer et nous voyons que les gens font cela et nous obtenons beaucoup de bons commentaires. »