Início Big Data no InfoQ Brasil
Notícias
Feed RSS-
QTrends Engenharia de Dados - Data mesh, streaming e dados como produtos
A combinação do potencial de disrupção de como os dados são tratados e gerenciados, e da evolução de abordagens das preparações de dados (data-wrangling) baseadas em stream, faz com que um real entendimento de padrões, anti-padrões e tecnologias emergentes relacionadas a esses assuntos seja de extrema relevância para a arquitetura de sistemas. A QTrends de agosto é exatamente sobre esses pontos!
-
QDigest #13 - IBM corta reconhecimento facial, Deep Learning, NextJS
A QDigest é uma newsletter com a curadoria de profissionais brasileiros que atuam no mercado de tecnologia e de desenvolvimento de software nacional e internacional. A ideia é ter conteúdo relevante e que chame a sua atenção, com discussões interessantes e que não cabem no formato tradicional do InfoQ.
-
QDigest #9 - SQLite, SGBD, DuckDB, Big Data, JVM, JS, home office, QConSP19, Agile
A QDigest é uma newsletter com a curadoria de profissionais brasileiros que atuam no mercado de tecnologia e de desenvolvimento de software nacional e internacional. A ideia é ter conteúdo relevante e que chame a sua atenção, com discussões interessantes e que não cabem no formato tradicional do InfoQ.
-
Google Dataset Search deixa de ser beta
Com aproximadamente 25 milhões de bases de dados indexadas o Google Dataset Search deixa de ser uma versão beta e oferece recursos adicionais como integração mobile e visualização
-
Engenharia de dados no Badoo: lidando com 20 bilhões de eventos por dia
O Badoo é uma rede social para solteiros que atualmente lida com bilhões de eventos por dia, explica Vladimir Kazanov, líder de engenharia de plataforma de dados. Na Skills Matter, Kazanov falou sobre alguns dos desafios de operar nessa escala e quais ferramentas o Badoo usa para processar e relatar esses dados.
-
Keynote do ApacheCon 2019: Google Cloud aprimora o processamento de big data com o Kubernetes
Na ApacheCon América do Norte, Christopher Crosbie palestrou sobre "Mais um negociador de recursos para Big Data? Como o Google Cloud está aprimorando o processamento do Data Lake com o Kubernetes", destacando os esforços do Google para tornar o software de big data Apache "nativo na nuvem", desenvolvendo operadores opensource para fornecer planos de controle para a execução do software Apache.
-
Big Data Week São Paulo, um dos principais eventos de Big Data Analytics do mundo
Nos dias 1 e 2 de novembro de 2019, em São Paulo, acontecerá a 6ª edição de um dos mais importantes eventos de Big Data Analytics do Brasil. Junte-se a nós e construa relacionamentos altamente benéficos e aumente o seu networking com os demais participantes e palestrantes. Conheça as mais novas tecnologias e gere oportunidades que irão melhorar o seu negócio e a sua carreira.
-
A evolução da plataforma Big Data de 100+ petabytes da Uber
A equipe de engenharia da Uber publicou um artigo sobre como sua plataforma de big data evoluiu de tarefas ETL tradicionais com bancos de dados relacionais para uma plataforma baseada no Hadoop e Spark. Um modelo de ingestão escalável, formato de transferência padrão e uma biblioteca personalizada para atualizações incrementais são os principais componentes da plataforma.
-
Data Lakes e a arquitetura moderna de dados em pesquisa clínica e saúde
O Dr. Prakriteswar Santikary, diretor de dados da ERT, palestrou no Data Architecture Summit 2018 sobre a arquitetura data lake que sua equipe desenvolveu em sua organização de pesquisa clínica. Discutiu a plataforma de dados implantada na nuvem para agilizar a coleta de dados, agregação e relatórios e análises clínicas, usando conceitos como computação serverless e serviços de dados.
-
Big Data Week São Paulo 2018: Descubra o que esta por vir no futuro do Big Data Analytics
No dia 20 de Outubro de 2018 em São Paulo acontece a quinta edição do Big Data Week no Brasil, um dos principais eventos de Big Data Analytics do mundo.
-
IT FORUM EXPO 2018
Nos dias 17 e 18 de outubro, em São Paulo, será realizada a sexta edição do IT FORUM EXPO, um evento em que será discutido o futuro da tecnologia e como ela impulsiona as organizações, a carreira de profissionais de TI e o Brasil, através de palestras e debates com os maiores líderes do setor.
-
Apache Pulsar 2.0 suporta registros de esquemas e compactação de tópicos
A mais recente versão da estrutura de código aberto para mensagens publish-subscribe distribuído do Apache Pulsar permite que as empresas avancem “para além” das ações relacionadas a movimentação dos dados. A Streamlio anunciou que foi disponibilizado uma solução de mensagem em streaming da Apache Pulsar 2.0. A nova versão suporta funções Pulsar, Registro de Esboço e Compactação de Tópicos.
-
Spark, Data Science, Performance, Programação Distribuída, RxJS e muito mais no QConSP
Faltando menos de 2 meses para o QCon, a programação oficial já conta com mais de 50 palestras confirmadas para os 3 dias de evento. Profissionais praticantes de empresas inovadoras e pioneiras de todo o mundo estarão presente nesse que será o maior QCon São Paulo dos últimos anos.
-
Pipelines modernos de Big Data com Kubernetes
Tecnologias de gerenciamento de containers, como o Kubernetes, permitem implementar pipelines modernos de Big Data. Eliran Bivas, arquiteto sênior de Big Data na Iguazio, falou, em Dezembro de 2017, na Conferência KubeCon + CloudNativeCon North America 2017 sobre pipelines de Big Data e como o Kubernetes pode ajudar a desenvolvê-los.
-
Microsoft atualiza os serviços e ferramentas de IA para desenvolvedores e cientistas de dados
Durante a conferência Ignite de 2017, a Microsoft lançou várias atualizações relacionadas aos seus serviços e ferramentas de Inteligência Artificial (IA). Essas atualizações incluem a liberação do serviço Azure ML Experimentation, Azure ML Model Management, Azure ML Workbench e a disponibilidade geral dos serviços cognitivos da Microsoft.