Pendant longtemps, Evan Kervella a pensé que les LLM étaient essentiellement des perroquets statistiques sophistiqués.

Ils prédisaient le prochain token. Très impressionnant, certes. Mais pas vraiment de l'intelligence.

Il pense aujourd'hui que cette analyse était fausse.

Les progrès récents en raisonnement, mathématiques et génération de connaissances nouvelles montrent quelque chose de beaucoup plus profond.

Peut-être que les Transformers ne seront pas l'architecture finale. Probablement même.
Mais une chose devient difficile à nier : quelque chose qui ressemble sérieusement à de l'intelligence émerge de ces systèmes.

Et ça va beaucoup plus loin que prévu.

Episode disponible sur :
📺 YouTube