Dans le cours : Préparer votre carrière dans l'analyse de données

Data engineer

Dans le cours : Préparer votre carrière dans l'analyse de données

Data engineer

“

C’est une chose d’affiner et d’ajouter des éléments dans un jeu de données, c’en est une autre de savoir créer un jeu de données. Je suis convaincue que bien souvent, la personne qu'on voit comme un data analyst dans une organisation fait en réalité plus du data engineering que de l’analyse. Les recoupements de compétences entre l’analyst et l’engineer sont nombreux. Ils partagent beaucoup de compétences de base. Un data engineer sait tout à fait comment examiner un jeu de données, le découper en petits jeux plus logiques pour les utilisateurs, et vous recevez peut-être des données de quelqu’un qui crée ces jeux à partir d’une série de requêtes. Un data engineer a souvent un accès plus large aux données, ce qui explique pourquoi c’est lui qui vous les envoie. Il comprend comment la sécurité et la confidentialité des données s’inscrivent dans la stratégie globale de gouvernance des données. Les data engineers peuvent passer aux fonctions de data architect, qui couvre davantage de systèmes et serveurs, et les stratégies de sécurité pour tous les systèmes de l’organisation. Si vous souhaitez progresser dans ce rôle, vous devrez comprendre plus en profondeur les données structurées et non structurées, et savoir les convertir en jeux de données exploitables. Vous devrez comprendre les méthodes de conception des systèmes de bases de données relationnelles Et vous devrez comprendre comment concevoir des bases de données. Vous aurez aussi besoin de toutes les compétences communes de communication, d’efficacité lors des présentations, d’esprit critique et d'écoute active. Grâce à ces compétences, vous apprendrez à transformer des centaines de tables en tables exploitables par d’autres, à l’aide de processus comme l'ETL, extraction, transformation et chargement, ou l'ELT, extraction, chargement et transformation, qui fait passer les données d’un système de production à un entrepôt de données, par exemple. Il existe beaucoup d’opportunités pour les data analysts qui souhaitent exercer ce rôle en approfondissant leur compréhension des données et de l’infrastructure.

Table des matières