Cloud Data Engineer AWS / Streaming temps réel (H/F)
VISIANMédiasPubliée il y a 5 jours
~ 450 – 600 €/jFourchette estimée par FreelanceScope à partir du niveau d'expérience demandé : la source ne publie pas de TJM pour cette mission.
- Lieu
- Marseille · Télétravail non précisé
- Durée
- 3 ans
- Démarrage
- 16 novembre 2026
- Expérience
- Confirmé (3-6 ans)
- Langues
- Français, Anglais
- Contrat
- Freelance
Situer cette mission
Repères calculés par FreelanceScope sur les missions ouvertes de son catalogue — ils ne proviennent pas de l'annonce et n'engagent pas l'entreprise.
- 4 missions data engineer sont ouvertes à Marseille en ce moment, sur 526 pour ce métier en France.
- 1 % des missions data engineer de notre catalogue sont ouvertes en télétravail total.
- Compétences peu demandées ailleurs dans le catalogue : Apache Iceberg (3 missions), Spark (104 missions), Machine Learning (124 missions). À séniorité égale, une compétence rare se négocie mieux.
Profil confirmé (3-6 ans) · Comment ces repères sont calculés
La mission
Vos missions
Concevoir et faire évoluer une architecture de streaming pour la collecte, le traitement et l'analyse des données
Développer des pipelines de traitement temps réel et batch avec Apache Flink, Apache Spark et Apache Iceberg
Déployer les pipelines d'ingestion et de traitement en CI/CD et Infrastructure as Code, pour les environnements batch et streaming
Participer à la migration et au refactoring de l'architecture historique vers AWS (Move to Cloud, ETL/ELT, batch et streaming)
Contribuer à l'implémentation d'algorithmes de maintenance prédictive et de routage
Industrialiser et exposer des modèles de Machine Learning sous forme d'API, en lien avec les équipes data science
Assurer le monitoring, la fiabilité et la performance des traitements en production
Environnement technique
Streaming et traitement : Apache Flink, Apache Kafka (MSK), Kinesis, Apache Spark, Apache Iceberg
Orchestration : Apache Airflow (MWAA)
Cloud AWS : S3, Lambda, EKS, ECS, EC2, ECR, IAM, IoT Core
IoT : MQTT, données capteurs remontées par satellite
Data warehouse : Snowflake
DevOps / IaC : Terraform, Docker, CI/CD
Langages : Python, SQL
Profil recherché
Formation Bac+5 (école d'ingénieur ou master) en informatique, data ou télécommunications
Au moins 5 ans d'expérience en data engineering, dont une part significative sur AWS
Expérience solide des architectures streaming à forte volumétrie (Flink, Kafka ou Kinesis)
Compétences attendues
Indispensables
- AWS
- Spark
- Apache Iceberg
- CI/CD
- Machine Learning
- Kafka
Appréciées
- Airflow
- IAM
- Snowflake
- Terraform
- Docker
- Python
- SQL
- MLOps