Data Engineer Hadoop / PySpark

  • Home
  • Data Engineer Hadoop / PySpark

Contexte de la mission
Le consultant travaillera en étroite collaboration avec les équipes de production applicative et DevOps afin de mettre en œuvre les évolutions techniques de la plateforme.

Missions principales
• Mettre en œuvre de nouvelles ingestions de données.
• Réaliser les traitements de Data Préparation / transformation.
• Développer, maintenir et faire évoluer les pipelines de données en PySpark.
• Réaliser du Shell Scripting sous Unix/Linux.
• Collaborer avec l’équipe DevOps pour les demandes d’évolution de la plateforme.
• Participer au maintien en conditions opérationnelles et à l’évolution des traitements Data.
• Rédiger les spécifications techniques et documenter les solutions mises en œuvre.

Compétences indispensables
Très bonne maîtrise attendue :
• Hadoop
• Python / PySpark
• Hive
• SQL
• Shell Scripting Unix/Linux

Environnement/outils :
• Git
• Jenkins
• Jira
• Méthodologie Agile / Scrum

Anglais professionnel indispensable, à l’écrit comme à l’oral,

Compétences appréciées / différenciantes
Une expérience sur les technologies suivantes constituera un plus :
Indexima – Alteryx – Altair – GCP – BigQuery – bibliothèques Python orientées API.
Profil recherché
Data Engineer disposant idéalement de 3 à 6 ans d’expérience, très opérationnel sur l’écosystème Hadoop / PySpark, avec une véritable appétence pour le développement et le traitement de volumes importants de données.
Le consultant devra être autonome, dynamique, force de proposition et techniquement curieux, avec une forte capacité d’analyse et de résolution de problèmes. Un excellent relationnel et une bonne capacité à travailler en équipe dans un environnement international sont également attendus.

Candidature : CV+ LM + Copie des diplômes à envoyer à contact@keoni.fr

Crée en 2008, Kéoni Consulting est une société de conseil et d’ingénierie informatique spécialisée dans le secteur de la banque, de la finance de marché, et de l’assurance, et de l’industrie. Nous sommes le partenaire dans la transformation digitale des grands Comptes. Nous les aidons à transformer leur modèle économique, aligner vos processus opérationnels, sélectionner les meilleures technologies, atténuer et palier les risques liés au digital.
Kéoni Consulting aide les entreprises à :
Faire la différence
Innover et créer
Réinventer votre business
Satisfaire les clients
Gagner en avantages compétitifs
Devenir le leader de leur secteur
Devenir le leader de votre secteur
Notre activité couvre la totalité du cycle de vie des systèmes d’informations (Pilotage et Gestion de projet, Conseil en MOA, Conception, Réalisation, Maintenance, Production Exploitation).

Catégorie d'emploi: Transformation digitale
Type d'emploi: Full Time
Lieu de travail: Europe

Postuler pour ce poste

Types autorisés: .pdf, .doc, .docx