Les missions du poste
Le besoinContexteDans le cadre de l'exploitation et de l'évolution d'une plateforme Big Data à grande échelle, un acteur majeur recherche un expert technique orienté Data Engineering / DataOps. La mission s'inscrit au sein d'un centre d'expertise dédié aux plateformes data, dans un environnement hybride combinant infrastructures on-premise et cloud public.L'objectif principal est d'assurer la disponibilité, la fiabilité et l'automatisation des environnements Datalake, tout en accompagnant les équipes projets dans leurs usages data.MissionsAssurer le maintien en conditions opérationnelles des plateformes DatalakeGérer les incidents, demandes d'exploitation et support aux utilisateursParticiper aux déploiements sur les différents environnements (intégration, pré-production, production)Contribuer à l'automatisation et à l'industrialisation des processusMettre en oeuvre des solutions d'orchestration et de déploiementParticiper à l'amélioration continue des outils et pratiques d'exploitationCollaborer avec les équipes techniques et les parties prenantes métiersAssurer le reporting et la communication opérationnelleLivrables attendusExploitation et supervision opérationnelle des plateformesDocumentation technique et procédures d'exploitationScripts et automatisations de déploiementAméliorations continues des processus DataOpsSupport technique aux équipes projetsEnvironnement techniqueCloud & InfrastructureAWS · Microsoft Azure · Environnements hybrides on-prem / cloudBig Data & Data EngineeringKafka · Kafka Connect · Spark · Starburst · DataikuOrchestration & AutomatisationKubernetes · Helm · Terraform · Ansible · AirflowCI/CD & DevOpsGitLab CI/CD · Jenkins · Pipelines d'intégration continueSystèmes & LangagesLinux · PythonProfil recherchéExpérience confirmée en exploitation de plateformes Big Data / DatalakeSolides compétences en environnements Linux et scripting PythonMaîtrise des outils d'orchestration et d'automatisationBonne connaissance des architectures cloud et conteneuriséesExpérience en CI/CD et industrialisation des déploiementsCapacité à gérer des environnements critiques en productionBon relationnel et esprit d'équipeInformations complémentairesMission orientée RUN avec contribution aux évolutionsEnvironnement technique complexe et à forte volumétrie de donnéesCollaboration avec équipes Data, DevOps et métiersContexte nécessitant rigueur, autonomie et réactivité
Compétences requises
- Python
- Reporting
- Amélioration continue
- Autonomie
- Big data
- Microsoft Azure
- Kubernetes
- Création d'une base documentaire
- Terraform
- Jenkins
- Git
- Ansible
- AWS
- Linux
- Réactivité
- KAFKA