🎯 Tes missions :

En tant que Data Engineer , vous jouerez un rôle clé dans le développement, la gestion et l’optimisation de notre datalake central, au service des projets d’intelligence artificielle de e-sensia . Vous serez responsable d'assurer la scalabilité, la performance et la sécurité des données utilisées pour entraîner nos algorithmes, tout en soutenant nos déploiements en production.

Responsabilités principales :

• Conception et gestion du datalake central :
• Développer et maintenir un datalake centralisé pour gérer des formats de données variés : audio , texte (et à moyen terme image et vidéo ).
• Gérer un volume de données >1000 appels/jour/lieu , avec un haut niveau de performance.
• Garantir la communication et l’interopérabilité entre le datalake central (hébergé sur Scaleway et/ou AWS) et les datalakes déployés on-premise chez certains clients.
• Flux et transformations de données :
• Développer et optimiser des pipelines de données pour des entrées multiples (temps réel et batch).
• Configurer des vues filtrées et dynamiques pour les projets de recherche et l'entraînement des modèles d’IA.
• Sécurité et gestion des données :
• Implémenter un système robuste de gestion des permissions et des accès.
• Assurer la gestion des backups et la continuité des données critiques.
• Mettre en œuvre des outils de monitoring, de remontée de logs et d’alerting, avec un tableau de bord d’administration ( Prometheus & Grafana ).
• Optimisation de l’existant :
• Analyser et évaluer l'infrastructure actuelle (technologies MinIO, Spark, Airflow, Python, PostgreSQL, Git, Docker, FastAPI ).
• Être force de proposition pour des évolutions architecturales ou technologiques.
• Collaboration avec les équipes IA et produit :
• Soutenir les équipes dans leurs besoins en données pour l’entraînement des modèles IA et le déploiement opérationnel.
• Travailler en étroite collaboration avec les hôpitaux et autres partenaires pour garantir l’efficacité des solutions déployées.

Compétences techniques :

• Maîtrise des technologies MinIO, Pyspark, Airflow ou équivalents.
• Expertise en gestion de datalakes et pipelines de données complexes.
• Solides compétences en Python , Scala ou Java pour le traitement des données.
• Bonne connaissance des solutions cloud, en particulier Scaleway et AWS (S3, Glue, Redshift, Athena) et outils d’Infrastructure-as-code Terraform/OpenTofu.
• Connaissance des architectures hybrides cloud/on-premise et des technologies de réseau (administration de réseaux privés, VPN).
• Expérience avec des flux de données temps réel ( Kafka , AWS Kinesis , ou similaires).
• Sécurisation des données : gestion des permissions, authentification, sauvegardes.

Atouts :

• Familiarité avec les besoins d'entraînement de modèles IA.
• Appétence pour le prompt engineering
• Expérience avec les outils de monitoring ( Prometheus , Grafana , etc.).
• Connaissance des problématiques liées à l’analyse de données, en particulier médicales (réglementations, normes ISO27001, HDS).

Profil recherché :

• 3+ ans d’expérience en tant que Data Engineer , idéalement dans un environnement technique exigeant.
• Capacité à évaluer de manière critique les systèmes existants et à proposer des améliorations innovantes.
• Autonomie, esprit d’équipe, excellente communication et initiative
• Etat d’esprit « problem-solver » en proposant des solutions nouvelles et en les mettant en œuvre
• Capacité à travailler en équipe, rigueur et souci de l’innovation.
• A l’aise dans un environnement professionnel changeant, en forte croissance.

Cadre de travail :

• Possibilité de travail en full remote
• Horaires de travail flexibles
• Bureau à Paris (1er arrondissement)
• Possibilité de déplacements chez les clients possédant une infrastructure on-premise

Ce poste offre l’opportunité de travailler au cœur de projets technologiques ambitieux, contribuant directement à améliorer les soins d’urgence et l’impact des technologies IA dans le domaine médical.

👉 Pour postuler : CV à adresser à job@e-sensia.com

Rejoignez e-sensia pour faire une différence !