Métiers
Data Engineer (H/F)
Professionnels de la donnée, il-elle prépare l'infrastructure big data pour l'exécution de traitement, notamment ceux conçus par les Data Scientits.
Mission principale
Ils-elles mettent en service le socle matériel et logiciel qui permet d'exécuter différents traitements informatiques optimisés :
- l'intégration de grands volumes de données à partir de diverses sources,
- la transformation de ces données au moyen de différents traitements de nettoyage, normalisation, et enrichissement,
- les traitements analytiques conçus par les Data Scientist,
- et enfin les traitements décisionnels permettant d'établir des rapports périodiques automatisés, ou des visualisations à la demande.
Activités
- Mise en place ou supervision de la mise en place d'une architecture Big Data
- Industrialisation / automatisation d'algorithmes et modèles de prédiction
- Mise en oeuvre d'une veille technologique sur les architecture Big Data
Compétences
Compétences professionnelles
- Bien connaître les technologies d'infrastructures informatiques et leurs performances
- Développer / programmer en langage Python, Scala, Java, Shell Unix, ...
- Développer / programmer en langage C/C++, javascript
- Développer / programmer avec les technologies Big data : Hadoop, Spark, ...
- Développer / programmer en lanage SQL
Compétences comportementales
- Avoir un bon esprit d'analyse
- Entretenir des relations assertives avec les différents interlocuteurs
- Intégrer l'éco-responsabilité dans toutes les dimensions de son activité
- Transmettre des savoirs et savoir-faire
- Etre capable de travailler seul ou en équipe interculturelle et pluridisciplinaire, et en réseau, et à distance
- Prendre en compte plusieurs paramètres à la fois dans ses analyses et décisions - vision systémique
- Se montrer agile et pro-actif dans ses démarches (intrapreneuriat)
- Identifier ses besoins d'apprentissage et apprendre régulièrement, y compris en auto-apprentissaage dans les domaines associés à sa fonction
Compétences transverses
- Bien connaître le fonctionnement global de l'entreprise
- Maîtriser l'anglais technique
- Utiliser des méthodes d'organisation du travail
- Piloter un projet
Métiers de proximité
Éloigné / Évolution
Accès au métier
Les Diplômes
Ce métier est accessible avec un niveau niveau bac +4/5. La plupart du temps, les entreprises privilégient les candidats ayant suivi des cursus dans les domaines de l'ingénierie, et de l'informatique.
Il n’existe pas véritablement de voie royale menant au métier de Data Engineer. Il existe presque autant de parcours professionnels que de Data Engineer sur le marché d’autant que ces profils “technologues” sont souvent des techniciens confirmés.
Parmi les diplômes les plus reconnus, on retrouve :
- Mastère Professionnel Expert en ingénierie informatique
Des MOOC sont également pertinents pour arriver à ce métier.