Consultant Hbase - Aws Emr H/F - Astorm

ASTORM est une Société de Consulting, basée à Paris et à Brive-la-Gaillarde qui apporte son expertise à ses clients principalement dans les domaines suivants :

BANQUE/ASSURANCE

TELECOM

AERONAUTIQUE/DEFENSE

INDUSTRIE AUTOMOBILE

ENERGIE

Tout en étant une entreprise à taille humaine, ASTORM bénéficie d'un référencement en direct auprès de Grands Comptes.

Astorm détient une filiale en Tunisie et une autre au Maroc afin d'y accompagner certains de ses clients.

Nous cherchons à recruter des ingénieurs de valeur afin de renforcer notre équipe de consultants.

Astorm a comme politique d'impliquer chaque consultant dans le développement de l'entreprise en soutenant les initiatives par des primes d'intéressements.

Chez Astorm, vous ne serez pas seulement un consultant mais vous serez un acteur de la société.

Vous avez confiance en votre potentiel, vous cherchez de nouvelles opportunités pour faire avancer votre carrière, vous souhaitez être considéré pour ce que vous êtes et êtes motivé pour réussir. Vous êtes notre candidat !

Description du poste

Dans le cadre du renforcement d'une plateforme Big Data stratégique, nous recherchons plusieurs Consultants HBase / AWS EMR afin d'assurer l'exploitation, l'optimisation et la fiabilisation d'environnements de production à forte volumétrie.

Vous interviendrez sur des plateformes critiques nécessitant une expertise approfondie sur HBase, AWS EMR et les problématiques de performance, de capacité et de disponibilité.

Vos missions

Exploitation et support

- Assurer le maintien en condition opérationnelle des plateformes HBase.
- Participer à l'exploitation quotidienne des clusters.
- Analyser et résoudre les incidents de production.
- Assurer le support de niveau 2 et 3.
- Garantir la disponibilité et la stabilité des environnements.

Performance et optimisation

- Identifier les problématiques de performance et les axes d'amélioration.
- Réaliser les analyses de capacité et les études de montée en charge.
- Optimiser les performances des clusters et des traitements.
- Analyser les métriques système et applicatives.
- Participer à l'amélioration continue des architectures existantes.

Administration HBase

- Administrer et maintenir les environnements HBase.
- Gérer les opérations de maintenance et d'évolution des clusters.
- Intervenir sur les problématiques liées aux Region Servers et HMaster.
- Superviser et optimiser les opérations de Major et Minor Compaction.
- Optimiser la gestion des HFiles, WAL, MemStore et Region Splits.
- Participer à la gestion de la volumétrie et de la croissance des données.
- Améliorer la répartition de charge et les performances de lecture/écriture.

Environnement technique

Big Data

- Apache HBase
- HDFS
- ZooKeeper

Cloud

- AWS
- Elastic MapReduce (EMR)

Systèmes

- Linux

Monitoring & Exploitation

- Supervision de clusters
- Analyse de performances
- Troubleshooting

Compétences requises

- Excellente maîtrise d'Apache HBase.
- Expérience significative en environnement de production.
- Bonne maîtrise d'AWS EMR (Elastic MapReduce).
- Expertise en troubleshooting et analyse de performances.
- Expérience sur des plateformes critiques à forte volumétrie.
- Maîtrise de Linux.

Connaissances appréciées

- Region Servers
- HMaster
- Compactions (Major / Minor)
- HFiles
- WAL (Write Ahead Log)
- MemStore
- Region Split
- Hot Regions
- Capacity Planning
- Optimisation des lectures et écritures
- Répartition de charge

Expérience

- 5 à 8 ans d'expérience minimum sur des environnements Big Data.
- Au moins 3 ans d'expérience significative sur HBase en production.
- Expérience AWS EMR fortement souhaitée.

Qualités recherchées

- Autonomie.
- Esprit d'analyse et de résolution de problèmes.
- Rigueur et sens du service.
- Capacité à évoluer dans des environnements techniques exigeants.
- Force de proposition sur les optimisations et améliorations techniques.