Mythe et réalité des LLMs

Les avis divergents sur l’efficacité des LLMs résultent de contextes et projets très variés dont on ignore les détails.

L’absence de quantification et de transparence sur les projets, les niveaux d’expertise et le travail additionnel rend la comparaison impossible.

Les systèmes LLM sont non déterministes, leur performance peut varier même sur la même tâche à quelques instants d’intervalle.

Le buzz et le discours de certains leaders d’opinion alimentent les attentes irréalistes et la pensée magique autour des LLMs.

Dans la pratique, les outils LLM fonctionnent en moyenne 50% du temps, ni magie ni ingénierie pure, mais des machines statistiques non prévisibles.