Data Ingénieur - Lille

CDI

Créé en 2013, les consultants expérimentés 2M-ADVISORY apportent un accompagnement de qualité, réactif et adapté à nos clients au sein de deux business units :
- BU Banque Finance /Assurance
- BU des Transports et des Telecom

Qui sommes-nous ?

Cabinet de conseil opérationnel en transformation des Systèmes d'Information

Au delà des études et des restitutions, les consultants 2M-ADVISORY déploient opérationnellement les solutions préconisées :
- Soit en pilotant les projets de transformation SI et en adressant les principales dimensions : Coûts / Délais / Qualité.
- Soit en intégrant les équipes produits Métier/MOA/MOE pour décliner concrètement les étapes de mise en service de l'application.

Une approche du conseil où l'expérience et la séniorité priment

Parce qu'ils sont qualifiés et recrutés sur la base de leurs expertises professionnelles, les consultants 2M-ADVISORY sont capables de vous accompagner opérationnellement dans la conduite de vos projets de transformation.
Leur double compétence ‘Conseil' et ‘Métier ‘ nous permet de vous proposer un large choix de profils adaptés à vos besoins.

Un cabinet de conseil opérationnel en transformation des Systèmes d'information

Un système d'information permet à une entité de collecter, stocker, traiter et diffuser de l'information grâce à :
- Des hommes
- Des machines
- Des procédures pour lier les deux

Un SI se caractérise notamment par :
- Sa complexité (son passé)
- Son urbanisation
- Son besoin d'évolution
- Son coût

2M-ADVISORY vous accompagne dans la transformation des briques applicatives de votre Système d'Informations.

Description de la prestation :

Dans une équipe agile pluridisciplinaire, composée de data analystes, data ingénieurs et data scientists sont réalisés les tâches suivantes :
Ingestion des données
Analyses fonctionnelles
Restitutions
Ordonnancement des traitements

Au sein de l'équipe Agile, le Data Ingénieur devra :
Manipuler les fichiers sous UNIX et HADOOP
Développer l'ingestion de données via des scripts SQL
Développer de nouvelles UDF
Ordonnancer les traitements
Suivre le run et gérer les erreurs
Optimiser les traitements SQL
Industrialiser les solutions d'imports et d'exports de données
Industrialiser les traitements des Data Scientists
Réaliser des imports et exports de données aux formats non standards
Développer des pipelines d'ingestions et d'export en streaming
Participer au collectif agile
Compétences :

Compétences requises :

Eprit d'équipe / Ouverture d'esprit
Maitrise du SQL et de ses optimisations
Connaissances pratiques de SVN / GIT
Bonnes connaissances de l'environnement HADOOP
Bonnes connaissances de l'environnement UNIX et du SHELL
Bonnes connaissances de Python
Notions de traitements en streaming (Spark, Nifi)
Notions de Java
Concepts de l'agilité
Postuler