Início Apresentações Do PostgreSQL ao Data Lake utilizando Kafka-Debezium
Do PostgreSQL ao Data Lake utilizando Kafka-Debezium
Resumo
Será apresentado um overview sobre Zookeeper, Kafka (Broker), Kafka Connect, todos em cluster nesta arquitetura, para então, aprofundar em como transportar dados de tabelas do PostgreSQL utilizando streaming para um data lake (ou S3, Elasticsearch, banco de dados utilizando JDBC, etc.).
Minibiografia
DBA há 10 anos, com experiência em banco de dados Adabas, Oracle, SQL Server em projetos de consultoria, e atualmente trabalhando com PostgreSQL no iFood, num ambiente totalmente diferente com cultura DevOps, ambiente na nuvem, e cheio de desafios todos os dias. Interessado quando o assunto é migração, replicação ou streaming de dados, mas também atento ao que acontece no mundo dos dados.
Sobre o Evento
A PGConf é uma conferência de nível mundial, que parte dos esforços de profissionais e entusiastas para expandir a comunidade do PostgreSQL, possibilitando que os participantes desenvolvam novos conhecimentos através de palestras e treinamentos. A edição de 2019 aconteceu do dia 01 ao dia 03 de Agosto em São Paulo.