Les missions du poste
Dans le cadre de la mise en place d'un nouvel environnement Data sur la plateforme Databricks pour un grand acteur du secteur de l'énergie, nous recherchons un Développeur Databricks confirmé pour intervenir sur la construction et l'optimisation d'une plateforme de traitement de données à grande échelle.
Vos missions
Participer à la mise en place et à la structuration d'un nouvel environnement Databricks.
Concevoir et optimiser les flux de données entrants.
Travailler sur la gestion et l'ingestion de volumes importants de données (environ 1,5 To par jour).
Apporter une expertise technique et des recommandations sur les meilleures pratiques d'intégration et d'acheminement des données vers la plateforme.
Participer à la performance et à l'optimisation des traitements côté Databricks.
Collaborer avec les équipes data et architecture dans un environnement en construction.
Environnement technique
Databricks
Gestion des flux de données entrants
Optimisation de performances sur gros volumes de données
Informations sur le poste
- Contrat : CDI
- Nature : Contrat travail
- Durée de travail : 39H/semaine Travail en journée...
- Expérience : 3 An(s)
- Salaire : 40k minimum
- Qualification : Cadre
- Secteur : Conseil en systèmes et logiciels informatiques
- Métier ROME : M1811 Data engineer
- Postes : 3
- Compétences : Analyser, exploiter, structurer des données ; Databricks ; Power Bi
- Source : France Travail — 215SBML