Ingénieur Big Data Python - Pyspark à Bordeaux H/F - Management Informatique & Nouvelles Technologies Conseil
- Bordeaux - 33
- CDI
- Management Informatique & Nouvelles Technologies Conseil
Les missions du poste
Dans le cadre du renforcement d'une équipe Data chez l'un de nos clients, nous recherchons un Ingénieur Big Data afin de participer aux activités de maintien en conditions opérationnelles ainsi qu'aux développements et évolutions de plateformes Big Data.
Vous interviendrez dans un environnement Agile et contribuerez à l'ensemble du cycle de vie des développements : conception, développement, livraison et recette.
Vos missions
- Participer au maintien en conditions opérationnelles des applications et traitements Big Data
- Concevoir et développer des traitements de données
- Réaliser les développements en Python et PySpark
- Participer aux phases de recette et de validation
- Contribuer aux optimisations de performance des traitements Spark
- Participer aux livraisons et au suivi des mises en production
- Travailler en collaboration avec les équipes techniques et fonctionnelles dans un contexte Agile Scrum
Votre environnement technique
- Python
- PySpark
- Cloudera / Hadoop
- HDFS
- Hive
- Impala
- Sqoop
- YARN
- SQL
- Shell / Linux
- Git
Vos compétences
- Solides compétences en développement et analyse de données
- Bonne maîtrise de la modélisation de données
- Maîtrise avancée de Python et PySpark
- Bonne connaissance de l'écosystème Big Data Hadoop / Cloudera
- Maîtrise des optimisations de performances Spark :
- partitionnement,
- caching,
- broadcast variables
- Bonne maîtrise des environnements Linux et scripting Shell
- Connaissance des méthodologies Agile Scrum
Les plus
- Support R / R Studio
- Connaissance de Control-M
- Expérience avec Jira / Confluence
- Expérience des outils CI/CD
Votre profil
- Vous appréciez les environnements Data à forte volumétrie
- Vous êtes rigoureux, autonome et force de proposition
- Vous aimez travailler en équipe dans des contextes Agile
- Vous êtes à l'aise aussi bien sur les sujets MCO que développement
Informations complémentaires
- Environnement Agile Scrum
Pourquoi devenir un Talent MINT-Conseil ? :
- Pour travailler sur des projets stratégiques et innovants.
- Pour être toujours incité à être force de proposition.
- Pour intégrer une entreprise qui s'occupe de ses Talents.
- Pour rejoindre un programme de Mentorat.
- Pour être accompagné dans le développement de vos compétences pour devenir un futur MINT-Leader.
- Pour profiter de locaux modernes et d activités (Afterworks, yoga, stretching, sophrologie, soirées à thèmes ).
Depuis plus de 10 ans nous sommes une société de conseil en Technologies Innovantes et Management de Projets.
Nous proposons à nos clients un accompagnement tout au long du cycle de développement de leurs produits et services.
Le Développement Humain et la Montée en Compétence sont stimulés pour garantir l'épanouissement personnel des Talents MINT-Conseil.
Les consultants sont associés aux comités de pilotage (Offres, Formation, RH ) afin de participer directement à la MINT-Attitude : forcément collaborative et orientée vers le partage des connaissances de l'ensemble de nos Talents.