Data engineer Teradata H/F Ajouter aux favoris
Dans le cadre du développement du DatahubV2, nous recherchons un Data Engineer confirmé maîtrisant les environnements Java, Spark et les architectures Data modernes. Vous interviendrez au sein de l'équipe Socle Data et serez responsable de la construction, l'optimisation et la fiabilisation des pipelines data, tout en garantissant les bonnes pratiques de développement et de performance. Vos missions principales :
- Concevoir, développer et optimiser des pipelines de données performants (batch, calcul distribué).
- Développer des traitements Spark 3 instanciés sur Kubernetes (Spark as a Service).
- Manipuler les données du DatahubV2 via Starburst (Trino) en SQL.
- Construire et orchestrer des workflows Data sur Astronomer / Apache Airflow en Python.
- Réaliser les intégrations applicatives en Java (et potentiellement Scala selon les applications).
- Assurer la qualité, la performance et la fiabilité des jobs Data.
- Contribuer à la mise en place et à la maintenance des pipelines DevOps (Gitlab, Jenkins, ArgoCD...).
- Suivre et analyser les logs applicatifs via ELK (Log as a Service).
- Coopérer avec l'équipe Socle Data, utiliser et faire évoluer les librairies Python internes.
- Participer à la documentation et à l'amélioration continue des pratiques Data du DatahubV2.
- Spark 3 - Java ou Scala → Avancé
- Traitements distribués, performance, optimisation, exécution sur Kubernetes.
- Starburst (Trino) - SQL → Moyen
- Requêtage SQL interactif, combinaison multi-sources, compréhension du SEP.
- Apache Airflow / Astronomer - Python → Moyen
- Création, planification et supervision de DAGs, orchestration de workflows.
- Kubernetes, COS (S3), Vault → Bas
- Compréhension des environnements cloud de la DMZR.
- Log as a Service (ELK) → Moyen
- Dashboarding, gestion et analyse des logs.
- Gitlab, Jenkins, ArgoCD, Ansible - Go / Yaml → Bas
- Gestion et évolution de pipelines CI/CD basés sur des templates existants.
- Java → Moyen
- SQL → Moyen
- Python → Moyen
- Scala → Moyen
Profil recherché
- Expérience confirmée en tant que Data Engineer sur des environnements distribués et Big Data.
- Très bonne maîtrise de Java et Spark.
- Capacité à travailler dans un environnement cloud, containerisé et orienté DevOps.
- Bon niveau en SQL pour manipuler des données multi-sources.
- Autonomie, rigueur, esprit d'analyse, sens de la performance.
- Une expérience en contexte bancaire ou datahub est un plus.
• 10 RTT en plus des 27 jours de congés payés • Des avantages groupes : 9€/jour sur votre carte Swile, une bonne mutuelle, prise en charge de 70% de votre abonnement de transports, des indemnités kilométriques vélo... • Un CSE : subvention sport et loisir, chèques vacances, chèques cadeaux... • De la flexibilité avec 2 jours de télétravail/semaine en moyenne
Emplois Recommandés
DESSINATEUR TOPSOLID H/F
A propos de ALTITUDE RH: Notre client est un acteur de référence dans l'aménagement intérieur de prestige dans les secteurs du nautisme, du tertiaire et de l'hôtellerie de luxe. En collaboration avec…
[FBO] technicien informatique N1 support applicatif habilitation - Nantes - 1364 (IT)
Contexte de la mission Dans le cadre de cette mission vous serez encadré(e) par le Team Leader du plateau et accompagné(e) par le Référent Technique, vos missions seront les suivantes : Accueil télé…
PROJETEUR VRD - AMENAGEMENT URBAIN H/F
Le poste : LTD, dans le cadre du développement de son activité VRD recherche, un Projeteur VRD/Aménagement urbain Mensura et ou Covadis H/F En équipe et sous la responsabilité d'un chef de proje…
Testeur Technique - Freelance
Taux journalier (TJM): 410 Sous pilotage d’un responsable d’intégration, la mission consiste à réaliser les tests techniques des changements confiés à l'équipe avant leur mise en production. L’activi…
ANALYSTE FONCTIONNEL (F/H)
Poste ouvert aux personnes en situation de handicap.Notre client est une entreprise située à NANTES qui propose des services d'édition variés dans les domaines de la gestion des services informatiques…
manipulateur en radiologie médicale (f/h).
descriptif du poste Quels défis captivants vous attendent en tant que Manipulateur en radiologie médicale à l'hôpital ? Au sein d'un environnement hospitalier, vous serez responsable de la réa…
242271/Développement Applicatif en React JS pour le Secteur Public NANTES (IT)
Développement Applicatif en React JS pour le Secteur PublicNous recherchons une expertise en développement applicatif utilisant React JS dans sa dernière version pour un acteur du secteur public. Notr…
Business Manager F/H
Votre rôle: &##129000; Au sein de l’entité Digital Services France et basé à Nantes, nous recherchons un(e) Business Manager pour renforcer nos équipes. Animateur(trice) du développement commercial…
Chef de projet TCE H/F
À propos de nous Nous sommes la filiale de Framatome, créée en 2020 et spécialisée dans des secteurs de pointe tels que le Nucléaire, le Naval Défense et les Énergies Renouvelables. Forts de l'experti…
Technicien Climatisation (H/F/D)
Notre agence recherche activement un Technicien Climatisation Itinérant (H/F/D) pour notre client spécialisé en CVC. Dans le cadre de vos fonctions, vous aurez les responsabilités suivantes : - As…