Igor Mordatch est travailler pour construire des machines qui peuvent mener une conversation. C'est quelque chose sur lequel tant de gens travaillent. Dans la Silicon Valley, chatbot est maintenant un mot à la mode authentique. Mais Mordatch est différent. Ce n'est pas un linguiste. Il ne traite pas des techniques d'IA qui utilisent généralement le langage. C'est un robotiste qui a commencé sa carrière en tant qu'animateur. Il a passé du temps à Pixar et a travaillé sur Toy Story 3, entre deux séjours universitaires à Stanford et à l’Université de Washington, où il a appris aux robots à se déplacer comme des humains. «J'ai toujours été intéressé par la création de mouvements», dit-il. Maintenant, toute cette expertise est réunie de manière inattendue.
Né en Ukraine et élevé à Toronto, le 31, âgé de 14 ans, est maintenant chercheur invité à OpenAI, le laboratoire d'intelligence artificielle créé par le fondateur de Tesla, Elon Musk et le président du combinateur Y, Sam Altman. Mordatch explore ici une nouvelle voie vers des machines capables non seulement de converser avec des humains, mais également entre elles. Il construit des mondes virtuels où les bots logiciels apprennent à créer leur propre langage par nécessité.
Comme détaillé dans un document de recherche publié par OpenAI cette semaine, Mordatch et ses collaborateurs ont créé un monde dans lequel les robots sont chargés d'accomplir certaines tâches, comme se déplacer eux-mêmes vers un point de repère particulier. Le monde est simple, il n’ya qu’un grand carré blanc, de deux dimensions, et les robots ont des formes colorées: un cercle vert, rouge ou bleu. Mais le but de cet univers est plus complexe. Le monde permet aux robots de créer leur propre langue comme un moyen de collaborer, en s’entraidant pour accomplir ces tâches.
Tout cela passe par ce qu'on appelle apprentissage par renforcement, la même technique fondamentale qui sous-tendait AlphaGo, la machine du laboratoire Google DeepMind AI qui a déchiffré l'ancien jeu de Go. Fondamentalement, les robots naviguent dans leur monde après des essais et des erreurs extrêmes, en gardant une trace précise de ce qui fonctionne et de ce qui ne fonctionne pas, à la recherche d'une récompense, comme arriver à un repère. Si une action en particulier les aide à obtenir cette récompense, ils doivent continuer à le faire. De la même manière, ils apprennent à construire leur propre langage. En se disant où aller, on les aide tous à obtenir des places plus rapidement.
Comme le dit Mordatch: «Nous pouvons réduire le succès du dialogue à: avez-vous fini par vous rendre au vert ou non?»
Pour construire leur langage, les robots assignent des caractères abstraits aléatoires à des concepts simples qu'ils apprennent en naviguant dans leur monde virtuel. Ils attribuent des caractères les uns aux autres, à des emplacements ou à des objets du monde virtuel, et à des actions telles que «Accéder à» ou «Regarder». Mordatch et ses collègues espèrent que, lorsque ces langages de bots deviennent plus complexes, des techniques connexes peuvent ensuite les traduire. dans des langues comme l'anglais. C'est un logiciel lointain, du moins en pratique, mais un autre chercheur OpenAI travaille déjà sur ce type de «bot traducteur».
En fin de compte, ces méthodes peuvent donner aux machines une meilleure compréhension du langage, leur montrer en fait pourquoi le langage existe - et cela fournit un tremplin à une conversation réelle, une interface informatique à laquelle les informaticiens rêvaient depuis longtemps mais ne l’avaient jamais réellement exploitée.
wpDiscuz