Andrej Karpathy rejoint Anthropic au sein de l'équipe pre-training

Andrej Karpathy rejoint Anthropic pour diriger une équipe de pre-training et utiliser le modèle Claude afin d'accélérer la recherche sur les futurs LLM.

Andrej Karpathy rejoint Anthropic. Figure reconnue du domaine, il a compté parmi les cofondateurs d'OpenAI, puis dirigé l'IA chez Tesla, où il a piloté l'Autopilot et la vision par ordinateur, avant un nouveau passage chez OpenAI. Il est aussi connu pour ses cours en ligne.

D'après son annonce et les médias spécialisés, il intègre l'équipe pre-training, chargée de l'entraînement initial massif des modèles, sous la direction de Nicholas Joseph. Sa mission : monter une équipe dédiée à l'usage de Claude pour accélérer la recherche en pre-training, soit une boucle où un modèle de langage sert à améliorer l'entraînement des suivants. Le chercheur dit vouloir se replonger pleinement dans la R&D à la frontière des LLM, qu'il juge particulièrement formatrice pour les années à venir, tout en conservant un attachement à l'enseignement, sur lequel il compte revenir plus tard.

L'arrivée illustre la bataille que se livrent Anthropic, OpenAI, Google et Meta pour attirer les profils les plus pointus, notamment sur les lois d'échelle, les données d'entraînement et l'architecture des modèles. Le message relayant la nouvelle a rapidement cumulé des millions de vues.