data engineer

Métiers

Data Engineer (H/F)

Professionnels de la donnée, il-elle prépare l'infrastructure big data pour l'exécution de traitement, notamment ceux conçus par les Data Scientits.

Mission principale

Ils-elles mettent en service le socle matériel et logiciel qui permet d'exécuter différents traitements informatiques optimisés :

- l'intégration de grands volumes de données à partir de diverses sources,

- la transformation de ces données au moyen de différents traitements de nettoyage, normalisation, et enrichissement,

 - les traitements analytiques conçus par les Data Scientist,

 - et enfin les traitements décisionnels permettant d'établir des rapports périodiques automatisés, ou des visualisations à la demande.

Activités

  • Mise en place ou supervision de la mise en place d'une architecture Big Data
  • Industrialisation / automatisation d'algorithmes et modèles de prédiction
  • Mise en oeuvre d'une veille technologique sur les architecture Big Data

Compétences

Compétences professionnelles

  • Bien connaître les technologies d'infrastructures informatiques et leurs performances
  • Développer / programmer en langage Python, Scala, Java, Shell Unix, ...
  • Développer / programmer en langage C/C++, javascript
  • Développer / programmer avec les technologies Big data : Hadoop, Spark, ...
  • Développer / programmer en lanage SQL

Compétences comportementales

  • Avoir un bon esprit d'analyse
  • Entretenir des relations assertives avec les différents interlocuteurs
  • Intégrer l'éco-responsabilité dans toutes les dimensions de son activité
  • Transmettre des savoirs et savoir-faire
  • Etre capable de travailler seul ou en équipe interculturelle et pluridisciplinaire, et en réseau, et à distance
  • Prendre en compte plusieurs paramètres à la fois dans ses analyses et décisions - vision systémique
  • Se montrer agile et pro-actif dans ses démarches (intrapreneuriat)
  • Identifier ses besoins d'apprentissage et apprendre régulièrement, y compris en auto-apprentissaage dans les domaines associés à sa fonction

Compétences transverses

  • Bien connaître le fonctionnement global de l'entreprise
  • Maîtriser l'anglais technique
  • Utiliser des méthodes d'organisation du travail
  • Piloter un projet

Métiers de proximité

Éloigné / Évolution

Accès au métier

Les Diplômes

Ce métier est accessible avec un niveau niveau bac +4/5. La plupart du temps, les entreprises privilégient les candidats ayant suivi des cursus dans les domaines de l'ingénierie, et de l'informatique.

Il n’existe pas véritablement de voie royale menant au métier de Data Engineer. Il existe presque autant de parcours professionnels que de Data Engineer sur le marché d’autant que ces profils “technologues” sont souvent des techniciens confirmés.

Parmi les diplômes les plus reconnus, on retrouve :

  • Mastère Professionnel Expert en ingénierie informatique

Des MOOC sont également pertinents pour arriver à ce métier.

Notre site utilise des cookies pour mesurer l’audience et vous proposer des services personnalisés. Consulter la politique cookies

Gestion de mes cookies

Notre site utilise des cookies pour mesurer l’audience et vous proposer des services personnalisés.
Consulter la politique cookies

Préférences d'utilisation

Ce cookie unique nous permet de sauvegarder vos préférences en matière de gestion de cookies. Il est requis pour l'utilisation du site et ne peut être désactivé. Il expire après six mois. Vous pouvez le supprimer en supprimant votre historique de navigation.

  • Gestion des cookies

Fonctionnalités du site

Ces cookies nous permettent le bon fonctionnement de la sélection sur le site lorsque l'utilisateur n'est pas connecté à son compte.

  • Ma sélection

Mesures statistiques

Ces cookies nous permettent d'obtenir des mesures sur la fréquentation de notre site (ex. : nombre de visites, pages les plus consultées). L'Observatoire Prospectif et Analytique des Métiers et Qualifications de la Métallurgie utilise ces données pour identifier les dysfonctionnements éventuels du site, et les améliorations à apporter.

  • Google Analytics

Médias

Les cookies déposés via les services de partage de médias ont pour finalité de permettre à l’utilisateur de visionner directement sur le site le contenu multimédia.

  • Vidéos YouTube
  • Vidéos Vimeo

Réseaux sociaux

Les cookies qui sont déposés via les boutons réseaux sociaux ont pour finalité de permettre aux utilisateurs du site de faciliter le partage de contenu et d’améliorer la convivialité.

  • AddToAny

Protection du spam

Les cookies déposés via les services de protection du spam.

  • Recaptcha