#82- BitNet, Transformers com 1 bit.
An episode of the Vida com IA podcast, hosted by Filipe Lauar, titled "#82- BitNet, Transformers com 1 bit." was published on May 30, 2024 and runs 10 minutes.
May 30, 2024 ·10m · Vida com IA
Summary
Fala galera, nesse episódio eu falo de 2 papers, BitNet e 1.58 Transformers. Esses 2 papers da Microsoft apresentar uma nova receita de como treinar Transformers com apenas 1 bit, diminuindo muito o consumo de memória e energia, assim como o tempo de inferencia. BitNet paper: https://arxiv.org/pdf/2310.11453 1.58 bit paper: https://arxiv.org/pdf/2402.17764 Instagram do podcast: https://www.instagram.com/podcast.lifewithai Linkedin do podcast: https://www.linkedin.com/company/life-with-ai
Episode Description
Fala galera, nesse episódio eu falo de 2 papers, BitNet e 1.58 Transformers. Esses 2 papers da Microsoft apresentar uma nova receita de como treinar Transformers com apenas 1 bit, diminuindo muito o consumo de memória e energia, assim como o tempo de inferencia.
BitNet paper: https://arxiv.org/pdf/2310.11453
1.58 bit paper: https://arxiv.org/pdf/2402.17764
Instagram do podcast: https://www.instagram.com/podcast.lifewithai
Linkedin do podcast: https://www.linkedin.com/company/life-with-ai
Similar Episodes
Mar 30, 2026 ·3m
Mar 25, 2026 ·2m
Mar 23, 2026 ·2m
Mar 10, 2026 ·2m
Mar 2, 2026 ·2m