Início Apresentações Spark Streaming + Kafka sem perdas
Spark Streaming + Kafka sem perdas
Resumo
A integração do sistema de mensageria Kafka com Spark Streaming é uma solução poderosa que tem sido utilizada para resolver diversos problemas de Big Data. Nessa palestra vamos compartilhar a experiência adquirida ao construir uma arquitetura que utiliza Kafka como fonte de dados para o processamento de milhões de mensagens, integrado a Spark Streaming para um dos maiores e-commerces do país.
Minibiografia
Fabiano Santos é engenheiro de software na Elo7, atuando no time responsável por busca e data science. Possui mais de dez anos de experiência com desenvolvimento e tem grande apreço por sistemas distribuídos. Formado em Ciências da Computação na FEI.
Sobre o Evento
Entre 28 de março e 1° de abril, São Paulo recebeu a nona edição brasileira do QCon. Organizado pelo InfoQ Brasil e com palestras selecionadas por um comitê independente, esta edição contou com 3 keynotes, 100 palestras e 13 workshops, totalizando 130 horas de conteúdo, o que levou o QCon São Paulo ao patamar dos maiores QCons mundiais.