Retrouvez le magazine de l'intelligence artificielle
Actualité L'apprentissage par renforcement au centre de l'IA d'Apple

Pour approfondir le sujet

  • Plus d'actualités sur
  • Apple

Le bureau de l’industrie et de la sécurité U.S. envisage la régulation de l’exportation de l’intelligence artificielle

Le BIS (Bureau de l'industrie et de la sécurité) des Etats-Unis a publié une proposition de classification des technologies émergentes sensibles afin d'en contrôler...

Elon Musk appelle à une vraie régulation de l’intelligence artificielle

Elon Musk, CEO de Tesla et de SpaceX, avait exprimé sa préoccupation quant à l'intelligence artificielle dès 2015. La semaine dernière, à l'occasion d'une...

La Méthode scientifique invite Yann LeCun pour son émission “Y a-t-il un cerveau dans la machine ?”

"Y a-t-il un cerveau dans la machine ?" C'est la question que s'est posée La Méthode scientifique dans son émission du 30 août dernier. La...

Retour sur NEURONIC, le projet de Réseau Neuronal Binaire à base d’architecture hybride de mémoires intégrant des fonctions de calcul (CMOS/RRAM) pour la fusion...

Le projet NEURONIC, coordonné par Jacques-Olivier Klein du Centre de Nanosciences et de Nanotechnologies de l'Université Paris Sud, ambitionne la fabrication d'un accélérateur matériel...

L’apprentissage par renforcement au centre de l’IA d’Apple

Ruslan Salakhutdinov, directeur de recherche sur l’intelligence artificielle chez Apple arrivé en octobre dernier, a parlé d’une partie des recherches en cours au sein de la firme, dans le domaine de l’intelligence artificielle, à l’occasion de la conférence EmTech’Digital organisée par la revue technologique au MIT les 27 et 28 mars 2017. Il semblerait qu’Apple se concentre désormais sur l’apprentissage par renforcement (reinforcement learning) pour le développement d’intelligences artificielles via un entraînement intensif sur le jeu vidéo Doom.

L’apprentissage par renforcement intéresse de nombreuses firmes, dont bien évidemment Google. La méthode se réfère à « une classe de problèmes d’apprentissage automatique, dont le but est d’apprendre, à partir d’expériences, ce qu’il convient de faire en différentes situations, de façon à optimiser une récompense quantitative au cours du temps » comme expliqué sur Wikipédia. Selon Ruslan Salakhutdinov, ce type d’apprentissage pourrait permettre à une intelligence artificielle de se souvenir. Apple mène donc différents travaux à cet effet, notamment à partir du jeu vidéo Doom réputé pour la complexité de ses labyrinthes.

L’intérêt de la firme pour ce jeu en particulier vient du fait que « ces systèmes spécialisés dans Doom n’arrivent pas à se souvenir correctement des dispositions des labyrinthes, bloquant ainsi toute planification et construction de stratégies ». L’idée est donc de programmer une intelligence artificielle pouvant se souvenir de l’emplacement des tours dans le jeu pour parvenir en vie au bout des labyrinthes. Au cours de la partie, le programme va différencier les couleurs des torches (rouge ou verte) et les faire correspondre à celles des tours, pouvant ainsi se déplacer dans les labyrinthes. « Ce qui est particulièrement remarquable, c’est qu’il se souvienne de la couleur de la torche à chaque passage d’une tour », explique le directeur de recherche sur l’IA d’Apple.

Cependant, l’apprentissage par renforcement signifie bien évidemment « beaucoup de temps d’entraînement et nécessite des énormes capacités de puissance de calcul. Ce qui rend difficile une industrialisation à grande échelle ». A côté de cette méthode, Apple s’intéresse donc à d’autres formes d’apprentissage, plus rapides, qui lui permettrait de rattraper quelque peu son retard concernant l’intelligence artificielle en comparaison aux autres géants que sont Google et Microsoft.

Vous pouvez retrouver la vidéo de l’intervention de Ruslan Salakhutdinov au cours de la conférence EmTech’Digital ci-dessous :

Johanna Diaz

Partager l'article

Gestion de la relation client : C3.ai, Microsoft et Adobe lancent C3 AI CRM, alimentée par Microsoft Dynamics 365

C3.ai, Microsoft et Adobe ont annoncé ce 27 octobre le lancement de C3 AI CRM, alimentée par Microsoft Dynamics 365. Il s'agit de leur...

L’ANR dévoile les 9 projets sélectionnés dans le cadre de l’appel franco-germano-japonais

La France, l'Allemagne et le Japon ont lancé en 2019 l'appel à projets IA ANR-DFG-JST visant à renforcer leurs collaborations de recherche dans le domaine...

L’Appel à projets bilatéral franco-allemand en intelligence artificielle est ouvert jusqu’au 21 décembre 2020

L'appel à projets bilatéral franco-allemand en intelligence artificielle a été ouvert le 22 octobre dernier et sera clôt le 21 décembre 2020. Deux instruments...

Le Parlement européen ouvre la voie à une première série de règles sur l’intelligence artificielle

Le Parlement européenne a adopté une première série de propositions visant à l'établissement d'une réglementation sur l'intelligence artificielle (IA) dans l'Union européenne (UE). Les objectifs...