Intelligence artificielle Facebook AI propose la bibliothèque Python AugLy pour évaluer et améliorer les...

Pour approfondir le sujet

Sur le même thème :

Facebook AI dévoile BlenderBot 2.0, un chatbot qui adapte sa mémoire sur le long terme

Facebook AI Research (FAIR), le laboratoire de recherche sur l'intelligence artificielle de Facebook, a travaillé sur BlenderBot 2.0, un chatbot qui combine mémoire à...

ABBYY enrichit sa bibliothèque de développement open source dédiée au machine learning

ABBYY, une multinationale spécialisée dans la conception de logiciels et dans "l'intelligence digitale", étend les capacités de sa bibliothèque de développement open source NeoML....

Grâce au ML, des chercheurs ont découvert qu’un fort taux de glycémie favorise les formes graves du Covid

L'École Polytechnique fédérale de Lausanne (EPFL) est à l'origine, dans le cadre du Blue Brain Project, d'une initiative qui vise à combattre le Covid-19....

Des chercheurs coréens exploitent le deep learning pour améliorer la microscopie électronique à balayage

Une équipe de recherche composée d'experts de l'Université technologique de Pohang (POSTECH) et de l'institut coréen des sciences des matériaux (KIMS) ont développé une...

Facebook AI propose la bibliothèque Python AugLy pour évaluer et améliorer les modèles ML

Facebook AI annonce la mise en accès libre d’AugLy, une bibliothèque Python au service des chercheurs en intelligence artificielle. Après la mise à jour du Dynaboard avec Dynabench pour fournir une évaluation de modèles de traitement du langage naturel, c’est au tour des algorithmes de machine learning d’être testés. Cette bibliothèque permettra d’utiliser les augmentations de données pour évaluer et améliorer en conséquence les modèles de machine learning.

AugLy, une bibliothèque Python open source

Les ensembles de données et modèles exploités deviennent de plus en plus multimodaux et il est utile, selon Facebook, de pouvoir transformer toutes les données d’un projet sous une bibliothèque et une API unifiées. C’est dans cette optique qu’ils ont déployé AugLy, une bibliothèque d’augmentation de données open source combinant plusieurs supports : audio, image, vidéo et texte.

La bibliothèque propose plus d’une centaine d’augmentations de données axées sur des actions que les internautes peuvent réaliser autour de leurs photos et leurs vidéos sur les réseaux sociaux comme la superposition de texte, l’ajout d’émotion ou l’édition de captures d’écrans. Cet ensemble d’augmentation est directement informé par les types de transformations de données que Facebook a pu voir sur ses plateformes. La firme indique donc que leur bibliothèque pourrait être utile pour des chercheurs travaillant sur des modèles ou des données liées aux médias sociaux.

Une libraire composée de quatre sous-bibliothèques

Les chercheurs de Facebook ont conçu AugLy de manière à ce qu’elle dispose de quatre sous-bibliothèques, correspondant chacune à une modalité distincte (audio, image, vidéo et texte). Chacune des bibliothèques possède la même interface : elle fournit des transformations dans des formats basés sur des fonctions et des classes dont il possible de connaitre l’intensité grâce aux paramètres connus. La bibliothèque Python peut générer des métadonnées utiles pour aider les chercheurs à comprendre comment leurs données ont été transformées.

Par exemple, l’une des améliorations proposées par AugLy permet de prendre une image ou une vidéo et de la superposer sur une interface de réseau social pour donner l’impression que le fichier a été capturé par un utilisateur puis repartagé. Facebook précise que cette augmentation est utile pour Facebook puisque leurs utilisateurs partagent leur contenu de cette façon et que l’entreprise souhaite que ses systèmes puissent être en mesure d’identifier tout contenu malgré qu’il puisse y avoir des éléments d’interface gênant sa visualisation.

Facebook souhaite faire progresser le machine learning multimodal

Dans ses propos, la société de Mark Zuckerberg précise tout l’intérêt des transformations de données :

“Les augmentations de données sont vitales pour assurer la robustesse des modèles d’IA. Si nous pouvons apprendre à nos modèles à être robustes aux perturbations des attributs sans importance des données, les modèles apprendront à se concentrer sur les attributs importants des données pour un cas d’utilisation particulier.”

Facebook évoque plusieurs applications pour sa bibliothèque comme la possibilité d’améliorer les modèles d’IA grâce aux bases de données d’AugLy pour améliorer la détection de contenus illégaux ou enfreignant les droits d’auteurs comme une musique ou une vidéo avec l’outil SimSearchNet, entrainé à l’aide de la bibliothèque de données et conçu à l’aide d’un réseau de neurones convolutifs.

La bibliothèque prend en charge les augmentations d’images telles que leur recadrage, leur remplissage, la superposition de texte pour créer des mêmes internet, la capture d’écran, ou, comme on l’a vu précédemment, pour le partage d’une photo.


1ère Marketplace de l'IA et de la transformation numérique vous recommande :
 
Zacharie Tazrout

Partager l'article

Rendez-vous du 17 au 19 novembre 2021 pour la 4ème édition du Soph.I.A. Summit

Cette année, le Soph.I.A. Summit se tiendra du 17 au 19 novembre 2021. Organisé par Université Côte d’Azur, la Communauté d’Agglomération de Sophia Antipolis et...

France Num publie le 1er Baromètre sur la transformation numérique des TPE/PME réalisé par le CREDOC

France Num, initiative pilotée par la Direction Générale des entreprises (DGE) a remis à Alain Griset, ministre délégué chargé des petites et moyennes entreprises,...

Retour sur l’adoption de la première stratégie de l’OTAN en matière d’Intelligence Artificielle

Les 30 pays de l'OTAN ont pour objectif de garantir la liberté et la sécurité aux membres de leur alliance. Créé en 1949, l'OTAN...

Changement climatique : Mila permet de vivre l’expérience de catastrophes naturelles pour sensibiliser l’opinion

Ces dernières années, les catastrophes naturelles semblent s'amplifier et se succéder à un rythme exponentiel. Que ce soient les incendies dévastateurs comme en Californie,...