Data engineer Teradata H/F Ajouter aux favoris
Dans le cadre du développement du DatahubV2, nous recherchons un Data Engineer confirmé maîtrisant les environnements Java, Spark et les architectures Data modernes. Vous interviendrez au sein de l'équipe Socle Data et serez responsable de la construction, l'optimisation et la fiabilisation des pipelines data, tout en garantissant les bonnes pratiques de développement et de performance. Vos missions principales :
- Concevoir, développer et optimiser des pipelines de données performants (batch, calcul distribué).
- Développer des traitements Spark 3 instanciés sur Kubernetes (Spark as a Service).
- Manipuler les données du DatahubV2 via Starburst (Trino) en SQL.
- Construire et orchestrer des workflows Data sur Astronomer / Apache Airflow en Python.
- Réaliser les intégrations applicatives en Java (et potentiellement Scala selon les applications).
- Assurer la qualité, la performance et la fiabilité des jobs Data.
- Contribuer à la mise en place et à la maintenance des pipelines DevOps (Gitlab, Jenkins, ArgoCD...).
- Suivre et analyser les logs applicatifs via ELK (Log as a Service).
- Coopérer avec l'équipe Socle Data, utiliser et faire évoluer les librairies Python internes.
- Participer à la documentation et à l'amélioration continue des pratiques Data du DatahubV2.
Technologies & Compétences requises Compétences Data / Big Data
- Spark 3 - Java ou Scala → Avancé
- Traitements distribués, performance, optimisation, exécution sur Kubernetes.
- Starburst (Trino) - SQL → Moyen
- Requêtage SQL interactif, combinaison multi-sources, compréhension du SEP.
- Apache Airflow / Astronomer - Python → Moyen
- Création, planification et supervision de DAGs, orchestration de workflows.
- Kubernetes, COS (S3), Vault → Bas
- Compréhension des environnements cloud de la DMZR.
- Log as a Service (ELK) → Moyen
- Dashboarding, gestion et analyse des logs.
- Gitlab, Jenkins, ArgoCD, Ansible - Go / Yaml → Bas
- Gestion et évolution de pipelines CI/CD basés sur des templates existants.
- Java → Moyen
- SQL → Moyen
- Python → Moyen
- Scala → Moyen
Profil recherché
- Expérience confirmée en tant que Data Engineer sur des environnements distribués et Big Data.
- Très bonne maîtrise de Java et Spark.
- Capacité à travailler dans un environnement cloud, containerisé et orienté DevOps.
- Bon niveau en SQL pour manipuler des données multi-sources.
- Autonomie, rigueur, esprit d'analyse, sens de la performance.
- Une expérience en contexte bancaire ou datahub est un plus.
• 10 RTT en plus des 27 jours de congés payés • Des avantages groupes : 9€/jour sur votre carte Swile, une bonne mutuelle, prise en charge de 70% de votre abonnement de transports, des indemnités kilométriques vélo... • Un CSE : subvention sport et loisir, chèques vacances, chèques cadeaux... • De la flexibilité avec 2 jours de télétravail/semaine en moyenne
Emplois Recommandés
Coordinateur.rice de missions complexes
À propos de nous Créée il y a près de 20 ans, Vitalliance est une société leader du secteur du Service à Domicile. Avec + de 150 agences en France et +8000 salariés, Vitalliance accompagne les personn…
SAISON Agent Logistique Cariste Nantes- H/F
HEINEKEN France recrute pour le compte de sa filiale de distribution France Boissons un Agent logistique cariste H/F basé a Nantes ! Vous êtes organisé(e), rigoureux(se), poncutel(le), autono…
Alternant - Chargé d’animation Clients & Offres - Marché...
Qui sommes-nous ? La proximité, la solidarité, la responsabilité et l’utilité sont des valeurs qui résonnent en vous ? Vous êtes au bon endroit, découvrons-nous ! La proximité relationnelle …
Conseiller technicien cycles H/F
Notre client, acteur innovant dans le secteur de la mobilité durable, développe un réseau de showrooms dédiés à la vente de vélos électriques premium reconditionnés. Dans le cadre de son expansion, n…
ASSISTANT COMMERCIAL ET ADMINISTRATIVE (H/F)
Présentation de l'agence Ltd compte 9 agences spécialisées en recrutement et en travail temporaire organisées par pôle d'expertise en Ingénierie, Encadrement BTP et Tertiaire Haut de Gamme - F…
Responsable de Chantier Électricité (H/F)
Le poste de Responsable de Chantier Électricité (H/F) En tant que Responsable de Chantier Électricité, vous serez le garant(e) de la bonne réalisation des chantiers, de la préparation à la récept…
Alternant Chargé de missions RH (F/H)
Votre rôle: Nous recherchons un(e) chargé(e) de missions RH en alternance sur notre site de Nantes MLK pour une durée minimum d'un an à compter de septembre 2026 (intégration possible avant le mois s…
ALT - CHARGE DE RELATION CLIENT F/H
Generali Avec plus de 71 millions de clients et un chiffre d’affaires de 95,2 milliards d’euros en 2024, Generali est l’un des leaders de l’assurance et de la gestion d’actifs dans le monde. Assur…
Hydraulicien (H/F)
A propos de TALENTS NATURE: TALENTS NATURE est une agence d'emploi dédiée exclusivement aux métiers des secteurs agricoles et para agricoles, qui intervient sur l'ensemble du département de la Loire …
BUSINESS ANALYST CONFIRME
Description de l'entreprise Inetum est un leader européen des services numériques. Pour les entreprises, les acteurs publics et la société dans son ensemble, les 28 000 consultants et spécialiste…