« Le progrès est devant nous, à condition de dépasser sa propagande » Paul Virilio
Avec et non par : depuis mars 2022, les journalistes de Qant utilisent l’IA générative pour illustrer les tendances de la tech.
L’ÉVÉNEMENT
L’IA, ses esclaves et vous
Derrière l’apparente simplicité de l’IA se cachent de nombreuses petites mains, les “annotateurs” chargés d’expliquer aux grands modèles de langage la réalité. Un travail de titan. Ou de fourmi.
"Des travailleurs au service du robot" (Midjourney)
Qui n’a jamais prouvé qu’il était humain en identifiant des ponts ou des motos sur une image ? En réalité, ce service de captcha ne prouve rien du tout : Google, via son service Recaptcha, rémunère le site Web pour l’activité de ses visiteurs, qui annotent gratuitement l’image qui leur est soumise afin de bénéficier du service de l’éditeur. Les annotations servent ensuite à l’entraînement des grands modèles de langage de Google. Ses concurrents peuvent faire appel à des sociétés comme Hcaptcha, Scale AI ou Surge AI, qui emploient des centaines de milliers de travailleurs précaires de par le monde pour un travail laborieux de tri et d'étiquetage des données, un processus essentiel pour les embeddings et la création de datasets d’entraînement (lire Expert ci-dessous).
Ce travail est marqué l'opacité de la chaîne d'approvisionnement de données, avec les entreprises exigeant une confidentialité stricte, et la division extrême du travail, ce qui fait que peu de gens comprennent pleinement la nature du travail qu'ils effectuent. The Verge vient de publier un remarquable reportage, qui raconte comment les annotateurs doivent respecter des règles d'étiquetage précises et parfois absurdes, conçues pour permettre à une machine d'interpréter de manière cohérente des entités telles que les vêtements, les objets et même les reflets de ces objets.
De Nairobi à Singapour, les annotateurs se comptent par centaines de milliers. Plusieurs plates-formes ont émergé pour structurer ces travailleurs précaires de la “gig economy”, dont le Mechanical Turk d’Amazon et le réseau blockchain Human Protocol, soutenu par Hcaptcha. Basé sur Ethereum, il récompense les utilisateurs qui alimentent les datasets de l'intelligence artificielle grâce à une série d'applications décentralisées et open source.
Données synthétiques, données humaines
Selon une étude de l'École polytechnique de Lausanne (EPFL), entre le tiers et la moitié des travailleurs sur Amazon Mechanical Turk (MTurk) utilisent l'intelligence artificielle pour accomplir des tâches initialement réservées aux humains. Le reportage de The Verge va dans le même sens: ChatGPT permet aux annotateurs de remédier à la monotonie d’un travail très peu payé. Or, les données synthétiques peuvent dégrader l’entraînement des LLM, ce qui explique l’engouement des créateurs de modèles pour les archives de la presse (lire Qant du 19 juin). Une autre étude universitaire prévoit même une crise imminente de l'entraînement des IA sur des données générées par des IA.
Quoi qu’il en soit, la montée en puissance des modèles va de pair avec celle des annotateurs. Le mois dernier, note The Verge, Scale a commencé à publier des offres d'emploi pour des annotateurs avec une expertise en coaching, en ressources humaines, en finance, en économie, en data science, en programmation, en chimie, en biologie, en comptabilité, en fiscalité, en nutrition, en physique, en voyages, en éducation (de la maternelle à la terminale), en journalisme sportif… La liste est aussi longue que celle des professions qui seront transformées par l’IA. Certains annotateurs doivent même disposer d’une habilitation du Pentagone, pour entraîner les IA militaires. Les rémunérations peuvent 45 dollars de l'heure pour le droit ou 25 dollars de l'heure pour la poésie.
Pour en savoir plus :
L’ESSENTIEL : Google, Apple, Ripple
RÉALITÉ AUGMENTÉE
Un tireur dans le salon
Le passage de la réalité virtuelle à la réalité augmentée grâce au “pass-through” pourrait tout changer pour les jeux de tir en vision subjective. La preuve par Espire.
Le jeu VR Espire 2, déjà disponible depuis 2022, prévoit une mise à jour de réalité mixte qui transformera l’environnement physique du joueur en un champ de bataille de science-fiction. Le développeur Digital Lode et l'éditeur Tripwire Interactive LLC rendront disponible ce mode AR dans l’année, pour accompagner la sortie des casques Quest Pro et Quest 3, dont les caméras fournissent des images en couleur de l’environnement du joueur (“pass-through”). La mise à jour sera également compatible avec le casque Quest 2, mais ses images pass-through en noir et blanc seront certainement moins convaincantes. Les nouvelles missions s'adaptent à l'environnement de l'utilisateur, allant de petites zones à plusieurs pièces.
La qualité de la vidéo pass-through est l’un des principaux chevaux de bataille du casque d’Apple, Vision Pro. Celui-ci a été présenté sans faire référence à des jeux ni des exercices de gymnastique, les deux usages pour lesquels cette fonctionnalité prend tout son sens. Nous reviendrons cependant sur le programme de développement d’Apple en la matière lundi 26 prochain.
Pour en savoir plus : Mixed News
IA GÉNÉRATIVE
Diplomatie de l’IA : A l’issue de la visite du premier ministre Narendra Modi à Washington, les États-Unis et l'Inde prévoient d'annoncer une série de collaborations en matière de défense et de technologie, dont des accords sur le renforcement de la chaîne d'approvisionnement en semi-conducteurs et le développement de l'intelligence artificielle.
Pour en savoir plus : CNBCMethod Studios et Marvel répliquent : La série "Secret Invasion" de Marvel, diffusée sur Disney+, a suscité de nombreuses critiques sur les réseaux sociaux après que la réalisation de son générique d'ouverture par une intelligence artificielle a été révélée. Les studios répondent que leurs graphistes et animateurs onr simplement utilisé de nouveaux outils, sans que leurs emplois ne soient menacés. N’est pas Bild qui veut.
Pour en savoir plus : The GuardianLe kobold se transforme en licorne : déjà soutenue par Breaktrhough Energy Ventures, un véhicule créé par Bill Gates avec le soutien de Jeff Bezos et Jack Ma, Kobold Metals vient de lever 195 millions de dollars sur sune valorisation de 1,15 milliard auprès du gratin de Palo Alto : A16Z, Bond de Mary Meeker… Cette jeune entreprise minière, qui bénéficie de l’engouement pour l’IA aussi bien que pour les véhicules électriques, exploitera des réserves de cuivre en Zambie.
Pour en savoir plus : Crunch Base
ROBOTS
Bolt emploiera des robots-livreurs de Starship Technologies : La société de covoiturage estonienne Bolt s'associe à la firme de robotique Starship Technologies pour proposer des livraisons de nourriture à domicile effectuées par des robots autonomes. Le service débute à Tallinn, en Estonie, avec des plans d'expansion future dans d'autres pays où Bolt et Starship opèrent, en rivalité avec Uber.
Pour en savoir plus: CNBC
BLOCKCHAINS
La Banque Européenne d’Investissement étrenne Sobond: La BEI vient d’émettre une obligation verte de 2 milliards de couronnes suédoises, Climate Awareness Bond, sur la “blockchain verte” Sobond du Crédit Agricole CIB et l banque suédoise SEB (lire Qant du ***). Sobond incite les opérateurs de nœuds à améliorer leur empreinte environnementale.
Pour en savoir plus: Coin TelegraphLa peine du fondateur de Terra Do Kwon prolongée : Do Kwon, cofondateur du projet Terraform, a été condamné à quatre mois de prison supplémentaires au Monténégro pour possession d'un faux passeport, une peine qui comprend le temps déjà passé en détention, ce qui pourrait réduire son temps réel en prison à environ un mois.
Pour en savoir plus: Bloomberg
QUANTUM
Le quantique pour percer les mystères des trous noirs : Des chercheurs chinois ont utilisé l'informatique quantique pour simuler les trous noirs et tester la théorie de Stephen Hawking sur le rayonnement, ouvrant la voie à de futures découvertes sur les mystères des trous noirs.
Pour en savoir plus: Wionews
EXPERT : A16Z
Vers une nouvelle architecture applicative
Les grands modèles de langage (Large Language Models, LLM) pré-entraînés (GPT) apportent le changement d’architecture logicielle le plus important depuis Internet. Mais leur utilisation reste délicate, compte tenu de leur originalité et leur différence avec les ressources informatiques traditionnelles. Le VC californien Andreessen Horowitz (a16z) a analysé les développements en cours dans son écosystème pour en synthétiser une architecture de référence. Voici une version vulgarisée du “in-context learning”.
Le workflow de la pile applicative des LLM (source : A16Z)
Les LLM peuvent être utilisés de trois façons par une entreprise. On peut, comme Bloomberg, choisir un modèle open source (ici, Bloom) pour entraîner son propre modèle de fondation. On peut, comme Microsoft Bing ou Morgan Stanley, préférer un fine-tuning (“ajustement”) de GPT-4, de loin le LLM le plus avancé aujourd'hui, avec Palm 2 de Google. Ou encore, on peut choisir l'apprentissage en contexte (in-context learning).
...

