Data in Motion Tour 2023 : Comment réinventer Apache Kafka® à l'ère du streaming de données avec Confluent

Le 19 octobre dernier, Paris a accueilli le Data in Motion Tour 2023. On parle d'une tournée qui a fait le tour de 12 villes européennes entre le 20 septembre et le 7 novembre 2023, réunissant tous les acteurs de l’écosystème, les architectes, les développeurs, et même les influenceurs de l'industrie pour discuter de streaming de données.

Cette tournée n'était pas seulement une occasion de voyager, mais aussi l’opportunité unique de networker avec des personnes influentes, d’écouter des retours d’expérience concrets, et de s'imprégner de l'expertise d'une équipe de férus d'Apache Kafka®.

Pendant cet événement dédié au streaming de données, aux architectures de données modernes, plusieurs retours d’expérience et exemples pratiques ont été partagés sur  comment la technologie de Confluent permet aux entreprises de jongler avec leurs données en temps réel. Résultat : des flux de travail plus fluides, des processus qui se gèrent tout seuls, et une expérience digitale appréciée des clients.

Plusieurs clients et experts nous ont décrit leur utilisation quotidienne de la technologie de Confluent et les bénéfices associés: réduire les coûts et la complexité opérationnelle, créer des produits de données plus vite que l'éclair en connectant les environnements, tout en protégeant les données les plus sensibles et les processus les plus stratégiques.

L’un des premiers retour d’expérience, présenté par Mustapha Benosmane, Digital Product Leader au sein d’Adeo, montre comment la plateforme de Data Streaming d'Adeo a été la star des micro-services et du DataMesh au cours des cinq dernières années. Le défi d’Adeo était alors de trouver un équilibre entre gouvernance et autonomie, afin de favoriser l’innovation. C’est à ce moment qu’est entré en jeu la Data Streaming Platform, capable de gérer les trois piliers principaux dont l’entreprise et ses équipes avaient besoin : Technologie, Gouvernance et du Self-Service. Aujourd’hui, ce sont 470 applications utilisant la plateforme, 40 milliards de messages produits dans les clusters et 160 milliards consommés par mois, 4 296 topics en production, et des utilisateurs satisfaits, prouvant que l’entreprise a bien répondu à ce besoin.

Côté Crédit Agricole Gip, Julien Legrand, Product Owner Data et Camille Facque, Chef de Projet, nous ont expliqué comment ils ont construit une offre de service qui simplifie considérablement le déploiement des solutions techniques complexes. L’enjeu pour l’entreprise était de donner à ses utilisateurs les clés pour utiliser ce service en toute autonomie, tout en assurant une sécurité totale des données: “Construire une offre de service, c’est industrialiser le déploiement d’une solution technique complexe en y ajoutant un ensemble d’outils et d'expertises permettant de rendre autonome l’utilisateur final.” 

Au programme également Cédric Barbin, IT & Innovation Architect, chez Lactalis, qui nous a illuminés avec les enseignements clés après la mise en œuvre de la solution Confluent pour moderniser la traçabilité de la supply chain, mais aussi de leurs données. Cette modernisation nécessitait la mise en place d’outils permettant de gérer les contraintes de leur activité. “Pour une migration effectuée dans de bonnes conditions, nous avons un besoin fort d’expertise sur Kafka. Il y a vraiment des pièges dans lesquels il ne fallait pas tomber, notamment sur la normalisation et sur les règles.”

Grâce à cette migration sur Confluent, Lactalis a atteint et même dépassé ses objectifs, notamment au niveau de la fraîcheur et la qualité des données, la capacité de corriger et de rejouer un jeu de données, et enfin, une traçabilité technique des données. 

Julien Brun, Head of APIs & EDA et Sindhu Prasanna, EDA Expert, chez L’Oréal nous ont de leur côté expliqué comment ils ont démocratisé une plateforme EDA en mettant en place un Centre d'Enablement super branché. En gérant la gouvernance, les procédures, l’expertise ou encore la formation via une plateforme unique, Confluent a permis à L’Oréal d’offrir à leurs équipes la liberté et l’autonomie dont elles avaient besoin, et de gagner en maturité collective. 

Et ce n'est pas tout : Julien Maillard, Architecte, chez CDC Informatique a partagé son expérience de plus de 4 ans avec Kafka. Face à la complexité croissante de ses systèmes internes, CDC Informatique a fait évoluer son architecture pour répondre à une série de nouveaux objectifs clés : mise en œuvre rapide, diffusion des connaissances, formation, sécurité, maîtrise, disponibilité, compatibilité…. 

De là est née la plateforme Confluent, qui a présenté de nombreux avantages tels qu’un haut niveau de personnalisation, une meilleure gestion de contenu, ou encore un faible délai de mise en œuvre. Après un an de production, Julien témoigne des nombreux avantages que la plateforme a apportés à l’entreprise, tels que le retour très positif sur l’autonomie des équipes. Aujourd’hui, la plateforme est même devenue un exemple à suivre dans l’entreprise.

Ahmed Tali, Group Head of Architecture & Foundations Engineering, chez Europcar Mobility Group nous a raconté comment ils ont fait le grand saut vers une plateforme cloud agnostic grâce à Confluent Cloud. Les contraintes d’Europcar les ont naturellement guidés vers un modèle “fully managed”, offrant ainsi aux équipes la possibilité de se concentrer sur leur véritable valeur ajoutée, à savoir le business, et non la partie technique derrière leur activité. 

Le Data in Motion Tour 2023 à Paris a été une plongée captivante dans le monde des applications pratiques de la plateforme de streaming de données de Confluent. Chaque session a montré comment Confluent a vraiment donné des super pouvoirs à ses clients, les catapultant directement dans l'ère du streaming de données. Ces belles histoires et exemples concrets prouvent que la réinvention de Kafka dans le contexte du streaming de données n'est pas seulement une évolution technologique, mais une vraie révolution dans la manière dont les entreprises boostent leur créativité avec leurs données.