Mystères et idées reçues sur l'informatique

Comme toutes les autres règles d’internet, la règle 93 représente une certaine vérité. Certains prétendent qu’elle est inévitable, d’autres qu’elle n’existe que parce qu’on y croit. Quoi qu’il en soit, ceux qui la connaissent savent pourquoi elle est là… et les autres finiront peut-être par comprendre.

L'apparition et la rapide maturation de nouvelles technologies dans le vaste domaine de l'IA entraînent une mutation de plus en plus massive de nos modes de travail. Certains métiers se voient menacés dans leur existence même, d'autres évoluent drastiquement. On peut donc se poser la question suivante : quel sera le monde du travail de demain, et comment nos nouveaux outils s'y intégreront ?

Les modèles d'IA génératifs et plus particulièrement les grands modèles de langue (LLM) ont fait énormément parler d'eux récemment. Ils sont déjà devenus pour beaucoup un outil du quotidien. Pourtant, la façon dont ses outils sont conçus et fonctionnent reste un mystère pour la plupart des utilisateurs.
Comprendre comment ils fonctionnent est crucial pour pouvoir être critique envers ce qu'ils produisent, et avec quels moyens ils y parviennent. De plus, les LLMs peuvent inclure des biais, et demandent beaucoup de ressources pour être entraînés et utilisés.
Dans cette présentation, on va se poser plusieurs questions : comment fait-on apprendre un LLM, et comment génère-t-il du texte ? Quelles sont ses limites et son coût ?