En Septembre 2022, Google a présenté en avant-première une nouvelle fonctionnalité AR Translate pour Lens qui tire parti de la technologie derrière Magic Eraser (gomme magique) du Pixel. Avant cela, Google Translate a remplacé sa caméra de traduction intégrée par Google Lens.
Outre la recherche visuelle qui propose divers cas d’utilisation d’identification d’achats, d’objets et de points de repère, Google Lens est efficace pour récupérer du texte pour le copier-coller dans le monde réel.
Cette fonctionnalité « Texte » va de pair avec le filtre « Traduire » qui peut superposer votre traduction sur le texte étranger de la scène pour mieux préserver le contexte. Cela peut également fonctionner hors connexion si vous téléchargez le module linguistique à l’avance.
Les applications mobiles Google Traduction offrent depuis longtemps un outil d’appareil photo qui a été remanié pour la dernière fois en 2019 avec détection automatique et prise en charge de plus de langues. La refonte plus large de l’application Android Material You a modernisé l’interface utilisateur l’année dernière.
Compte tenu du chevauchement entre les outils de l’appareil photo, Google remplace maintenant la capacité native de traduction par le filtre de Google Lens. Appuyez sur l’appareil photo dans les deux applications mobiles Translate (Traduction) pour ouvrir simplement une interface utilisateur d’objectif.
Sur Android, cela lance la fonctionnalité au niveau du système, tandis que l’application iOS a maintenant une instance de Lens intégrée. Lorsque vous lancez à partir de Google Translate (Google Traduction), vous n’avez accès qu’au filtre « Traduire » et ne pouvez pas passer à d’autres fonctionnalités de Lens.
En haut, vous pouvez changer manuellement de langue, activer clash et « Afficher le texte original », tandis que vous pouvez importer des images / captures d’écran existantes sur votre appareil à partir du coin inférieur gauche.
Ce changement est déjà largement déployé dans Google Traduction pour Android et iOS.
Cette consolidation est logique et précède AR Translate, qui présente des « avancées majeures en matière d’IA ».
L’approche actuelle superpose le texte converti au-dessus de l’image à l’aide de « blocs de couleur » pour masquer ce qui est remplacé.
À l’avenir, Google Lens échangera carrément le texte original en tirant parti de la technologie Magic Eraser du Pixel, qui peut facilement supprimer les distractions dans les images. De plus, le texte traduit correspondra au style d’origine.
Disponible plus tard cette année, AR Translate fonctionne en 100 millisecondes sur les captures d’écran et en direct dans l’appareil photo Google Lens.
Source : 9to5google
