Início Apresentações Apache Spark Structured Stream: Um moedor de dados em tempo quase real
Apache Spark Structured Stream: Um moedor de dados em tempo quase real
Resumo
Nessa apresentação vou mostrar como utilizamos o Structured Stream para processar mais de 100 milhões de transações de tentativas de tarifação por dia, apresentarei nossa arquitetura e alguns aspectos que sobre Streams usando Apache Spark que poderão te ajudar na tarefa de trabalhar e transformar grandes volumes de informação.
Minibiografia
Eiti trabalha com o Cassandra desde a versão 0.6. Hoje trabalha como arquiteto de sistemas distribuídos e de alta performance na Movile Brazil.
Sobre o Evento
O GDG Campinas é parte de um programa do Google (Google Developer Group) sendo atualmente 1 de mais de 700 comunidades espalhadas pelo mundo. O Data Fest é o maior evento do interior de São Paulo voltado para a disseminação do conhecimento a respeito de big data, armazenamento e processamento dados (data) e assuntos relacionados. A edição de 2018 aconteceu dia 31 de outubro e contou com mais de 200 participantes e 16 palestrantes em 2 trilhas.