EPISODE · Sep 25, 2023 · 1H 4M
Thomas Scialom - Meta
from Comptoir IA 🎙️🧠🤖
Superbe épisode avec Thomas sur Comptoir IA! 🎙️ Chercheur chez Meta à Paris, il a eu une année exceptionnelle et a travaillé sur les papiers les plus importants. Ses contributions ? Rien que ça : Galactica, Toolforer, et Llama 2! 🚀🔮 Les prochains mois vont être passionnants ! Scaling, optimisations, et innovations imprévues, comme toujours dans l'IA.🤖 Stratégie Meta : Zuck a fusionné 3 équipes en créant GenAI, rapprochant la recherche du produit. Une équipe de 400, dont 70 à Paris!🔍 Apprentissage : Thomas décrypte comment le supervisé et le RLHF transforment un modèle brut en chatbot ultra-efficace. Spoiler: Llama 3 est très attendu!🧠 Intelligence: Il éclaire le mécanisme de "next token prediction", une compression de l’information par le modèle s’approchant d’une forme d’intelligence.⚡ L’open-source auquel Meta contribue avec une version commerciale de Llama 2 est fondamental - l’IA en tant que technologie peut être comparée à l’électricité et on ne voudrait pas que 3 entreprises aient la main mise dessus.🌐 Gemini de Google: Performances attendues, mais comment évaluer ces monstres généralistes ?🛠 Toolfmorer : L'idée brillante de connecter les modèles LLM au monde qui a inspiré auto-gpt et les plugins de ChatGPT !🔬 Galactica: Un projet audacieux pour permettre aux LLM de lire et de connecter toute la science mondiale.🤖 AGI: Thomas donne ses perspectives sur la possibilité de voir une AGI cette décennie.📊 Outil du jour : Llama 2 sur Perplexity. À tester!🎬 A voir : "Ready Player One" et "Contact" Hébergé par Acast. Visitez acast.com/privacy pour plus d'informations.
What this episode covers
Superbe épisode avec Thomas sur Comptoir IA! 🎙️ Chercheur chez Meta à Paris, il a eu une année exceptionnelle et a travaillé sur les papiers les plus importants. Ses contributions ? Rien que ça : Galactica, Toolforer, et Llama 2! 🚀🔮 Les prochains mois vont être passionnants ! Scaling, optimisations, et innovations imprévues, comme toujours dans l'IA.🤖 Stratégie Meta : Zuck a fusionné 3 équipes en créant GenAI, rapprochant la recherche du produit. Une équipe de 400, dont 70 à Paris!🔍 Apprentissage : Thomas décrypte comment le supervisé et le RLHF transforment un modèle brut en chatbot ultra-efficace. Spoiler: Llama 3 est très attendu!🧠 Intelligence: Il éclaire le mécanisme de "next token prediction", une compression de l’information par le modèle s’approchant d’une forme d’intelligence.⚡ L’open-source auquel Meta contribue avec une version commerciale de Llama 2 est fondamental - l’IA en tant que technologie peut être comparée à l’électricité et on ne voudrait pas que 3 entreprises aient la main mise dessus.🌐 Gemini de Google: Performances attendues, mais comment évaluer ces monstres généralistes ?🛠 Toolfmorer : L'idée brillante de connecter les modèles LLM au monde qui a inspiré auto-gpt et les plugins de ChatGPT !🔬 Galactica: Un projet audacieux pour permettre aux LLM de lire et de connecter toute la science mondiale.🤖 AGI: Thomas donne ses perspectives sur la possibilité de voir une AGI cette décennie.📊 Outil du jour : Llama 2 sur Perplexity. À tester!🎬 A voir : "Ready Player One" et "Contact" Hébergé par Acast. Visitez acast.com/privacy pour plus d'informations.
NOW PLAYING
Thomas Scialom - Meta
No transcript for this episode yet