Optimisez les jobs Spark grâce à son UI

Tools-in-Action

Room: Neuilly 253

Scheduled at : Thursday 17:45 18:15

Abstract

Spark fournit en standard une interface graphique très riche mais un peu complexe qui permet d'analyser le fonctionnement et le performance des vos applications ainsi que des métriques très riches.

Dans cette session, je vous montrerai par des exemples réels comment interpréter correctement les indicateurs fournis dans cette interface et comment j'utilise cette interface et les logs associés dans mes audits pour diagnostiquer les problèmes de performance les plus courants même sans avoir accès aux codes sources applicatifs.

Raphaël Luta

Raphaël Luta

Raphaël est un consultant technique indépendant, spécialiste des aspects opérationnels (sécurité et performance) des systèmes et applications.

Passionné par les données, il développe également pour ses clients des systèmes de traitement et de visualisation de données en s'appuyant sur les outils tels que Spark, Vert.x ou D3.js/Vega.js.

Javaiste depuis les premières bétas et membre de la fondation Apache depuis plus de 10 ans, il a contribué à plusieurs projets Apache Jakarta.

Speaker's bio
Presentation type Tools-in-Action
Track Big Data, Machine Learning, Analytics
Presentation level beginner/novice
Keywords Apache Spark Performance Issues troubleshooting

Room Neuilly 253