Enabling User-Facing Analytics using Apache Pinot with Kishore Gopalakrishna
from Engenharia de Dados [Cast] Hosted by Luan Moreno, Mateus Oliveira & Kishore Gopalakrishna
Neste episódio entrevistamos o Kishore Gopalakrishna, Co-Fundador e CEO da empresa StarTree, Luan Moreno e Mateus Oliveira batem um papo com o co-criador dessa poderosa ferramenta chamada Apache Pinot. O Pinot é um OLAP DataStore desenvolvido para responder consultas analíticas com tempo de resposta na casa dos milissegundos, podendo ser considerado um banco de dados para consultas em tempo-real. Capaz de ingerir de fontes de dados em Batch (Hadoop HDFS, Amazon S3, Azure ADLS, Google Cloud Storage), bem como fontes de dados em Stream (Apache Kafka, Apache Pulsar, Amazon Kinesis). O Pinot foi projetado para executar consultas OLAP em tempo real, com baixa latência em grandes quantidades de eventos para entregar o conceito de User-Facing Analytics. Foi criado e desenvolvido por engenheiros do LinkedIn e do Uber e projetado para escalar e expandir sem limites. Apache Pinot Kishore Gopalakrishna StarTree Luan Moreno - Linkedin https://engenhariadadosacademy.com.br/ Engenharia de Dados Academy - Instagram
Embed this episode
What this episode covers
Neste episódio entrevistamos o Kishore Gopalakrishna, Co-Fundador e CEO da empresa StarTree, Luan Moreno e Mateus Oliveira batem um papo com o co-criador dessa poderosa ferramenta chamada Apache Pinot. O Pinot é um OLAP DataStore desenvolvido para responder consultas analíticas com tempo de resposta na casa dos milissegundos, podendo ser considerado um banco de dados para consultas em tempo-real. Capaz de ingerir de fontes de dados em Batch (Hadoop HDFS, Amazon S3, Azure ADLS, Google Cloud...
Chapters
- 1:21 Guest Introduction
- 2:12 Previous Projects and Experience with Big Data Products
- 5:01 How Was Your First Encounter with Data Analytics?
- 7:10 Why Developing Apache Pinot at LinkedIN?
- 7:37 What is User-Facing Analytics?
- 11:29 Main Goals for Building Apache Pinot and Which Problems Does It Solves?
- 18:32 Main Apache Pinot Use-Cases
- 24:04 Apache Kafka & Apache Pinot as a Match Made in Heaven
- 26:21 Ability to Issue Thousands of Queries per Second in Apache Pinot
- 28:38 Main Features & Community Growth
- 31:20 Importance of Kubernetes for Data Teams
- 37:17 StarTree Product = Apache Pinot as a Service
- 41:10 Next Steps for StarTree Product for Upcoming Year?
- 45:54 What Is Your Vision of Data Communities?
- 48:38 What is Gonna Happen at The Data Landscape?
No transcript yet.