Meta dépose un brevet pour des lunettes de reconnaissance faciale IA qui identifient les personnes autour de vous et enregistrent automatiquement

Imaginez organiser un dîner sans vous arrêter pour sortir votre téléphone. Plus tard, vos lunettes vous présentent une collection de photos et de clips vidéo montrant votre partenaire de l'autre côté de la table et vos amis en train de rire ensemble. C'est l'idée derrière le système que Meta a breveté pour ses lunettes Meta.

Le dépôt de brevet décrit des lunettes équipées d'une caméra qui utilisent la reconnaissance faciale, l'analyse des expressions et des informations sur vos relations pour identifier les personnes autour de vous et décider des moments que vous souhaitez conserver.

Les verres pourraient même demander : « J'ai généré quelques moments forts du dîner de ce soir. Voudriez-vous les voir ? »

À une époque où Meta est continuellement sous le feu des critiques à cause de ses « lunettes perverses », le brevet semble pratique pour certains, mais constitue également un cauchemar potentiel en matière de vie privée.

Comment les lunettes de Meta pourraient choisir ce qu'elles voulaient capturer

Le brevet, publié jeudi et rapporté pour la première fois par 404 Media, décrit un système qui recherche des « points d'intérêt » dans le champ de vision de l'utilisateur.

Lors d'un dîner, la reconnaissance faciale pourrait identifier la femme du porteur et la placer au centre de la monture. Les autres invités pourraient être tronqués ou flous en arrière-plan.

Le système pourrait alors analyser les expressions faciales. Si deux personnes se mettent à rire, par exemple, les lunettes pourraient reconnaître cette réaction et repositionner la caméra pour se concentrer sur elles.

Qui fait le montage final peut dépendre de la relation du porteur avec chaque personne. Selon le rapport, les informations du graphique social d'un utilisateur pourraient aider le système à déterminer quels amis ou membres de la famille sont susceptibles d'être plus intéressants pour lui que les autres personnes présentes dans la pièce.

Le brevet mentionne également des données oculaires. Regarder une personne ou un objet en particulier pourrait aider les lunettes à déterminer où faire la mise au point, tandis que la stabilisation et le recadrage automatique pourraient améliorer la photo ou la vidéo obtenue.

Le porteur peut toujours avoir besoin de donner une commande avant de prendre une photo ou d'enregistrer un clip dans certains des exemples décrits. Le système plus vaste, cependant, se chargerait d'une grande partie de la prise de décision : identifier les personnes, interpréter ce qu'elles font et trier les résultats dans une collection personnalisée.

Les lunettes pourraient se souvenir de qui vous avez rencontré

Le brevet de Meta va au-delà de la création d'une bobine de surbrillance. Il décrit la connexion des moments nouvellement capturés avec une collection de « souvenirs épisodiques » associés au porteur.

Un exemple demande : « Ai-je déjà rencontré le gars en T-shirt rouge ? »

Le système pourrait rechercher d'anciens messages, commentaires, photos et vidéos avant de récupérer une photo de groupe montrant que le porteur l'avait déjà rencontré lors d'une conférence.

Cela pourrait aider quelqu'un à se souvenir d'un nom ou à trouver une photo qu'il aurait autrement du mal à localiser. Cela transformerait également des rencontres occasionnelles du monde réel en enregistrements consultables.

Meta a déjà exploré la reconnaissance faciale pour ses lunettes

Bien entendu, posséder le brevet ne garantit pas que Meta publiera tout cela. Les entreprises font régulièrement breveter des idées qui ne deviennent jamais des produits de consommation. La reconnaissance faciale des lunettes de Meta est cependant plus qu’une préoccupation hypothétique.

En juin, Wired a trouvé du code inédit pour une fonctionnalité appelée NameTag dans l'application compagnon Meta AI. S'il est activé, NameTag pourrait transformer les visages capturés par les lunettes en signatures biométriques et les comparer aux empreintes faciales stockées sur le téléphone du porteur.

Meta a supprimé le code de reconnaissance faciale après que Wired ait publié son enquête. La société a déclaré que cette fonctionnalité n'était pas disponible pour les consommateurs.

Le brevet récemment publié offre un aperçu beaucoup plus détaillé de la manière dont la reconnaissance faciale pourrait fonctionner aux côtés du cadrage automatique, de l'analyse des expressions et des outils de mémoire personnalisés.

Qu’arrive-t-il à tous les autres personnes présentes dans la pièce ?

Les lunettes Ray-Ban Meta utilisent actuellement une lumière de capture blanche pour indiquer quand le porteur prend une photo ou enregistre une vidéo. Cet indicateur est assez facile à comprendre lorsque quelqu'un appuie délibérément sur un bouton ou demande aux lunettes de démarrer l'enregistrement.

Même si ces calculs sont effectués avant l'enregistrement d'une photo ou d'une vidéo, les personnes qui se trouvent devant la caméra sont toujours évaluées. Ils ne savent peut-être pas que les lunettes les ont reconnus, les ont connectés au porteur ou ont décidé que leur réaction est suffisamment intéressante pour être capturée. Un système qui analyse les personnes avant de décider quoi enregistrer pourrait rendre cette distinction plus difficile à expliquer.

Ces préoccupations font déjà l’objet d’un examen juridique. Le 12 août, le groupe allemand de défense des droits numériques HateAid a déposé une plainte pénale contre Meta et plusieurs sociétés vendant ses lunettes en Allemagne.

Conclusion

Les lunettes intelligentes actuelles de Meta sont devenues populaires car elles ressemblent à des Ray-Ban classiques et permettent d'écouter facilement de la musique, de poser une question rapide à Meta AI ou de faire des achats sans utiliser de téléphone.

Ce brevet imagine donner aux lunettes beaucoup plus de contrôle sur la caméra. Mais le porteur peut apprécier que ces souvenirs soient capturés pour lui. Leurs invités peuvent raisonnablement se demander quand ils ont accepté d’en faire partie.

• J'ai mis ChatGPT sur mes lunettes Ray-Ban Meta – et cela a complètement changé la façon dont je les utilisais
• Claude met désormais un filigrane sur chaque réponse : voici ce que cela signifie si vous utilisez l'IA pour écrire
• J'ai connecté Claude à mes applications quotidiennes — voici les 5 qui l'ont réellement rendu utile