Discussion avec le PDG d’OpenAI à propos de GPT-4, de ChatGPT et de l’avenir de l’IA

ChatGPT marque un tournant dans le développement de l’IA.

Selon Sam Altman, les individus considéreront GPT-4 comme « une forme très primitive d’IA ». Comme les premiers ordinateurs, il est comparativement lent et imparfait, mais il ouvre la voie à une technologie émergente qui sera bientôt essentielle dans nos vies. Les progrès dans ce domaine sont « constamment exponentiels ». GPT est un grand modèle de langage (large language model ou LLM) révolutionnaire, mais c’est sa mise en œuvre dans le chatbot ChatGPT qui l’a rendu si accessible et facile à utiliser. GPT-4 est entraîné avec d’énormes quantités de données provenant de bases de données ouvertes, de sites web et d’entreprises partenaires. L’apprentissage par renforcement à partir de la rétroaction humaine (RLHF) contribue à adapter le système en vue de réaliser efficacement des tâches initiées par l’homme et d’éliminer les informations indésirables. Le système lui-même peut formuler des questions de suivi, reconnaître ses erreurs et rejeter les demandes jugées inappropriées.

L’accès libre aux codes sources (open sourcing) a aidé les chercheurs à déterminer l’utilité du syst...