OLL-8114 Spark Streaming and Suicidal Tendencies | Devoxx

Spark Streaming and Suicidal Tendencies

Conference

bigd Big Data, Machine Learning, IA & Analytics
  Thursday from 11:15 til 12:00

Essayer de mettre du spark streaming en production, faire des calculs savants pour avoir le bon batch intervalle, jouer sur une quinzaine de propriétés Spark plus prometteuse les unes que les autres afin que le temps de traitement moyen d'un batch soit inférieur au batch intervalle calculé, scruté la Spark UI pour essayer de constater des changements... avoir des envies de suicide car tout ça sans succès. Ce qui fait tenir l'espoir de trouver la propriété qui changera tout, se dire que ce nouveau métier de chercheur (qui ne trouve pas) offre des possibilités inattendues de reconversion professionnelles... Finalement trouver une solution et commencer à jouer avec les types complexes en SPARK SQL, c'est reparti pour des envies de suicide... spark.Cordes = interdit, spark.médicaments=interdit,spark. rasoirs=interdits!!!

Youen Chéné Youen Chéné

CTO chez Saagie

Passionné d'informatique et de programmation depuis le CE2 (génération MO5/TO7), je suis un des activistes au sein du Normandy JUG et de Codeurs en Seine.

J'ai fait 7 ans de prestation et de consulting en région parisienne, je suis passé développeur-manager chez Masternaut et je suis maintenant CTO chez Creative Data et je suis en charge de Saagie, une plateforme big data prête à l'emploi.

Aurélien Vandel Aurélien Vandel

Nosql, data processing, scala and spark fanboy. Certified as developer and admin on MongoDB.

TBA : To be announced / Salle non affectée