Accueil InfoQ Présentations From Ubu to Kafka
From Ubu to Kafka
Résumé
Avec une plate-forme qui génère quelques 5 M d'événements/sec, rapatrier ces données dans un cluster Hadoop centralisé peut s'avérer délicat. Retraçons une petite histoire de l'ingestion de logs à Criteo, de la base MySQL qui finit par brûler à une fédération de clusters kafka gazouillant de pair, le tout émaillé d'anecdotes sur tout ce qui peut casser dans un système distribué de cette ampleur.
Bio
Senior Software Engineer at Criteo.
A propos de cette Conférence
Let's get together and chat about machine-learning, natural language processing, large scale data analytics using open source tools such as Hadoop MapReduce, Shark, NoSQL databases, the semantic web and linked data.