Agrandir / Le 22 mai, Benj Edwards (à gauche) a animé un panel mettant en vedette Paige Bailey (au centre), Haiyan Zhang (à droite) pour la session Ars Frontiers 2023 intitulée « The Lightning Onset of AI — What Soudainement Changé ?
Ars Technica
Lundi, Ars Technica a organisé notre conférence virtuelle Ars Frontiers. Dans notre cinquième panel, nous avons couvert “L’apparition éclair de l’IA – Qu’est-ce qui a soudainement changé ?” Le panel comprenait une conversation avec Paige Bailey, chef de produit principal pour les modèles génératifs chez Google DeepMind, et Haiyan Zhang, directeur général de Gaming AI chez Xbox, animée par le journaliste d’Ars Technica, Benj Edwards.
Le panel était initialement diffusé en direct et vous pouvez désormais regarder un enregistrement de l’intégralité de l’événement sur YouTube. L’introduction de la partie “Lightning AI” commence à 2:26:05 dans l’émission.
Enregistrement en direct d’Ars Frontiers 2023.
“IA” étant un terme nébuleux, signifiant différentes choses dans différents contextes, nous avons commencé la discussion en examinant la définition de l’IA et ce qu’elle signifie pour les panélistes. Bailey a déclaré: “J’aime penser à l’IA comme aidant à dériver des modèles à partir de données et à les utiliser pour prédire des informations … ce n’est rien de plus que simplement dériver des informations à partir de données et les utiliser pour faire des prédictions et produire des informations encore plus utiles.”
Zhang a accepté, mais du point de vue du jeu vidéo, elle considère également l’IA comme une force créative en évolution. Pour elle, l’IA ne consiste pas seulement à analyser, rechercher des modèles et classer des données ; il développe également des capacités en langage créatif, en génération d’images et en codage. Zhang pense que ce pouvoir de transformation de l’IA peut élever et inspirer l’inventivité humaine, en particulier dans les jeux vidéo, qu’elle considère comme “l’expression ultime de la créativité humaine”.
Ensuite, nous avons plongé dans la question principale du panel : qu’est-ce qui a changé et qui a conduit à cette nouvelle ère de l’IA ? Est-ce tout simplement un battage médiatique, peut-être basé sur la grande visibilité de ChatGPT, ou y a-t-il eu des percées technologiques majeures qui nous ont apporté cette nouvelle vague ?
Publicité
Agrandir / Paige Bailey de Google lors de son panel Ars Frontiers 2023 sur l’IA.
Ars Technica
Zhang a souligné les développements des techniques d’IA et les vastes quantités de données désormais disponibles pour la formation : “Nous avons constaté des percées dans l’architecture des modèles pour les modèles de transformateurs, ainsi que dans les modèles d’auto-encodeurs récursifs, ainsi que la disponibilité de grands ensembles de données. pour ensuite former ces modèles et coupler cela avec troisièmement, la disponibilité de matériel tel que les GPU, les MPU pour pouvoir vraiment prendre les modèles pour prendre les données et pouvoir les former à de nouvelles capacités de calcul.”
Bailey a fait écho à ces sentiments, ajoutant une mention notable des contributions open source, “Nous avons également cette communauté dynamique de bricoleurs open source qui sont des modèles open source, des modèles comme LLaMA, les affinant avec un réglage d’instructions de très haute qualité et des ensembles de données RLHF .”
Lorsqu’on lui a demandé de préciser l’importance des collaborations open source pour accélérer les progrès de l’IA, Bailey a mentionné l’utilisation généralisée de modèles de formation open source tels que PyTorch, Jax et TensorFlow. Elle a également affirmé l’importance de partager les meilleures pratiques, déclarant : “Je pense certainement que cette communauté d’apprentissage automatique n’existe que parce que les gens partagent leurs idées, leurs idées et leur code.”
Interrogé sur les plans de Google pour les modèles open source, Bailey a souligné les ressources existantes de Google Research sur GitHub et a souligné leur partenariat avec Hugging Face, une communauté d’IA en ligne. “Je ne veux rien dévoiler de ce qui pourrait arriver”, a-t-elle déclaré.
IA générative sur consoles de jeux, risques IA
Agrandir / Haiyan Zhang de Microsoft lors de son panel Ars Frontiers 2023 sur l’IA.
Ars Technica
Dans le cadre d’une conversation sur les progrès du matériel d’IA, nous avons demandé à Zhang combien de temps il faudrait avant que des modèles d’IA génératifs puissent s’exécuter localement sur des consoles. Elle a dit qu’elle était enthousiasmée par cette perspective et a noté qu’une configuration à double client cloud pourrait venir en premier : “Je pense que ce sera une combinaison de travail sur l’IA pour inférer dans le cloud et de travail en collaboration avec l’inférence locale pour nous. pour donner vie aux meilleures expériences de joueur.”
Publicité
Bailey a souligné les progrès de la réduction du modèle de langage LLaMA de Meta pour qu’il s’exécute sur des appareils mobiles, laissant entendre qu’une voie similaire pourrait également ouvrir la possibilité d’exécuter des modèles d’IA sur des consoles de jeux : “J’aimerais avoir un grand langage hyper-personnalisé modèle fonctionnant sur un appareil mobile, ou fonctionnant sur ma propre console de jeu, cela peut peut-être faire un boss qui est particulièrement difficile à battre pour moi, mais qui pourrait être plus facile à battre pour quelqu’un d’autre.”
Pour continuer, nous avons demandé si un modèle d’IA générative s’exécutait localement sur un smartphone, cela éliminerait-il Google de l’équation ? “Je pense qu’il y a probablement de la place pour une variété d’options”, a déclaré Bailey. “Je pense qu’il devrait y avoir des options disponibles pour que toutes ces choses coexistent de manière significative.”
En discutant des risques sociaux des systèmes d’IA, tels que la désinformation et les deepfakes, les deux panélistes ont déclaré que leurs entreprises respectives s’étaient engagées à utiliser l’IA de manière responsable et éthique. “Chez Google, nous nous soucions très profondément de nous assurer que les modèles que nous produisons sont responsables et se comportent de la manière la plus éthique possible. Et nous intégrons en fait notre équipe d’IA responsable dès le jour zéro, chaque fois que nous formons des modèles à partir de la conservation de nos données, en veillant à ce que le bon mélange de pré-formation est créé », a expliqué Bailey.
Malgré son enthousiasme antérieur pour les modèles d’IA open source et exécutés localement, Baily a mentionné que les modèles d’IA basés sur des API qui ne s’exécutent que dans le cloud pourraient être globalement plus sûrs : “Je pense qu’il existe un risque important que les modèles soient utilisés à mauvais escient entre les mains de des personnes qui ne comprennent pas nécessairement ou ne sont pas conscientes du risque. Et c’est aussi en partie la raison pour laquelle il est parfois utile de préférer les API aux modèles open source.
Comme Bailey, Zhang a également discuté de l’approche d’entreprise de Microsoft en matière d’IA responsable, mais elle a également fait remarquer les défis éthiques spécifiques au jeu, comme s’assurer que les fonctionnalités d’IA sont inclusives et accessibles.
