Une nouvelle génération d'assistants IA

Une nouvelle génération d’assistants IA

Les exécutants de guidage de tâche perceptuellement activés (PTG) ont formé leurs prototypes sur diverses recettes comme un proxy pour accomplir une tâche inconnue. Les futures démonstrations du PTG se concentreront sur les procédures médicales, le maintien en puissance de l’équipement militaire et les scénarios de copilotage d’aéronefs. Crédit : Tom Shortridge/DARPA

Dans cette vidéo, le directeur du programme DARPA, le Dr Bruce Draper, décrit la technologie qui, selon lui, pourrait inaugurer la prochaine révolution du « bricolage ».

Le programme Perceptually-enabled Task Guidance (PTG) vise à développer des assistants virtuels de « guidage de tâche » qui peuvent fonctionner avec différentes plates-formes de capteurs pour aider le personnel militaire à effectuer des tâches physiques complexes et à élargir ses compétences. Contrairement aux assistants IA d’aujourd’hui, la technologie PTG serait capable de voir ce que l’utilisateur voit et entend ce qu’il entend en s’intégrant à un microphone, une caméra frontale et des écrans comme les casques de réalité augmentée (AR), pour fournir des instructions précises.

Les interprètes de PTG ont récemment démontré les premiers succès de leurs prototypes en utilisant la tâche de cuisiner des recettes comme proxy pour des tâches inconnues et plus complexes, telles que les procédures médicales sur le champ de bataille, le maintien en puissance de l’équipement militaire et le copilotage d’avions.

« Aujourd’hui, le secteur commercial recherche de nouvelles façons utiles de présenter les données à l’utilisateur, mais cela ne va pas assez loin », a déclaré Draper. « Le changeur de jeu avec PTG serait d’avoir des interfaces d’IA axées sur la perception qui peuvent donner un sens au monde réel, réagir à tout ce que fait l’utilisateur et fournir des conseils. Je suis vraiment impressionné par la rapidité avec laquelle les équipes performantes progressent vers les objectifs.  »