Apresentações

• por Fabiane Nardon  em  24 set, 2019
  Desenvolvimento

  Acelerando a construção de Data Pipelines em Apache Spark: segredos arquiteturais para hackers de engenharia de dados

  Nesta palestra serão discutidos segredos arquiteturais para permitir acelerar a construção de Data Pipelines em Apache Spark em larga escala, mostrando como eliminar o gap entre experimentação e (...)

  Fabiane Nardon

  em  24 set, 2019

  Curtir

  

  Icon

  40:53
• por Eiti Kimura  em  14 ago, 2019
  Desenvolvimento

  Processamento de dados em "tempo real" com Apache Spark Structured Streaming

  Nessa apresentação vou mostrar o Structured Streaming do Apache Spark e como utilizamos essa tecnologia para processar mais de 100 milhões de transações de tentativas de tarifação por dia. Vou ap(...)

  Eiti Kimura

  em  14 ago, 2019

  Curtir

  

  Icon

  44:45
• por Fabiane Nardon  em  01 jul, 2019
  IA, ML e Engenharia de Dados

  Construção de Data Pipelines em Apache Spark

  Esta palestra aborda os vários aspectos envolvidos na criação de pipelines de dados em Apache Spark.

  Fabiane Nardon

  em  01 jul, 2019

  Curtir

  

  Icon

  38:01
• por Diego Nogare  em  23 mai, 2019
  IA, ML e Engenharia de Dados

  Montando um ambiente de Big Data com Spark integrado com R no Azure

  Nesta sessão vou apresentar a criação do Apache Spark a partir do zero, instanciando uma máquina no Azure e permitindo a interação com linguagem R, incluindo os mecanismos de Machine Learning int(...)

  Diego Nogare

  em  23 mai, 2019

  Curtir

  

  Icon

  41:41
• por Eiti Kimura  em  30 abr, 2019
  Desenvolvimento

  Apache Spark Structured Stream: Um moedor de dados em tempo quase real

  Nessa apresentação vou mostrar como utilizamos o Structured Stream para processar mais de 100 milhões de transações de tentativas de tarifação por dia, apresentarei nossa arquitetura e alguns asp(...)

  Eiti Kimura

  em  30 abr, 2019

  Curtir

  

  Icon

  01:00:41
• por Holden Karau  em  27 ago, 2018
  IA, ML e Engenharia de Dados

  Validating Big Data Jobs - Stopping Failures before Production (w/ Spark, BEAM, & friends!)

  The talk will have code examples in Apache Spark, as well as explore similar concepts in Apache BEAM (a cross platform tool), but the techniques should be applicable across systems. To keep the t(...)

  Holden Karau

  em  27 ago, 2018

  Curtir

  

  Icon

  44:32
• por Anderson Parra  em  04 abr, 2018
  IA, ML e Engenharia de Dados

  Spark, Hadoop e Microservices na SoundCloud: extraindo informações de milhões de eventos

  A SoundCloud é uma das maiores plataformas de áudio do mundo, produzindo uma quantidade enorme e crescente de dados. Nesta palestra será mostrado como a SoundCloud implementou sua arquitetura par(...)

  Anderson Parra

  em  04 abr, 2018

  Curtir

  

  Icon

  49:59
• por Joel Pinho Lucas  em  08 set, 2017
  Building ML application locally with Spark

  An introduction about a powerful machine learning library (MLlib) along with an overview of Spark, describing how to launch applications within a cluster. A demo will show how to simulate a Spark(...)

  Joel Pinho Lucas

  em  08 set, 2017

  Curtir

  

  Icon

  25:14
• por Eiti Kimura  em  28 ago, 2017
  IA, ML e Engenharia de Dados

  Practical Machine Learning Models to prevent Revenue Loss

  We offer a demonstration of machine learning (ML) to create an intelligent application based on distributed system data. We'll show ML techniques in the development of a data analysis application(...)

  Eiti Kimura Flavio Clesio

  em  28 ago, 2017

  Curtir

  

  Icon

  32:04
• por Airton Libório  em  26 jul, 2016
  Scala: canivete suíço de Big Data

  Na palestra será demonstrada uma arquitetura end-to-end de ingestão e processamento de dados com Kafka, Spark e Elasticsearch, com um mini demo.

  Airton Libório

  em  26 jul, 2016

  Curtir

  

  Icon

  40:46
• por Fabiano Santos  em  27 jun, 2016
  Spark Streaming + Kafka sem perdas

  Nessa palestra compartilho a experiência adquirida na arquitetura que utiliza Kafka, como fonte de dados de milhões de mensagens, integrado ao Spark Streaming para um dos maiores e-commerces do país.

  Fabiano Santos

  em  27 jun, 2016

  Curtir

  

  Icon

  41:15
• por Paco Nathan  em  16 out, 2015
  Real-time analytics with Spark Streaming

  Esta apresentação mostra uma visão geral do Spark, sua história e aplicações, então focamos no componente Spark Streaming usado para analise de dados em tempo real.

  Paco Nathan

  em  16 out, 2015

  Curtir

  

  Icon

  41:46