Skills

Python SQL Data Warehousing AWS Dataiku Databricks

Job Specifications

Budget: 900€

Contexte Technique

Cette mission s’inscrit dans un projet de migration technologique visant à reconstruire des traitements de données critiques initialement développés dans un environnement SAS. Le nouveau socle technologique repose sur une infrastructure AWS, avec une combinaison de Databricks pour le calcul et de Dataiku pour les transformations de données.

L’objectif principal est de reconstituer des fonctionnalités existantes tout en optimisant la performance, la qualité des données et les coûts d’exécution, en s’appuyant sur des approches low-code et des outils analytiques modernes.

Responsabilités

Conception et développement de flux de transformation complexes :

Mise en œuvre de pipelines de données dans Dataiku, en utilisant prioritairement les recettes visuelles (low-code) et les bonnes pratiques de structuration entre nœuds de développement et d’automatisation.

Optimisation Via Databricks

Exploitation du moteur de calcul Databricks pour maximiser l’efficacité des traitements, tant en termes de performance que de coût.

Garantie de la qualité et de l’intégrité des données :

Suivi rigoureux du cycle de transformation, de la validation des données à leur disponibilité pour les équipes utilisatrices.

Transmission De Compétences

Accompagnement des équipes techniques et métiers dans la montée en compétence sur les solutions mises en place, en vue d’une reprise opérationnelle autonome.

Compétences Techniques Requises

Maîtrise avancée de Dataiku :

Utilisation experte des recettes visuelles, création de plug-ins, gestion des workflows de transformation dans des projets de grande envergure.

Solide Expertise SQL Et Python

Connaissance approfondie du langage SQL pour le traitement de données, complétée par des compétences en Python pour les étapes plus complexes.

Expérience En Environnement Databricks

Compréhension des concepts liés au calcul distribué et capacité à intégrer Databricks dans un flux de transformation de données.

Projets De Data Warehousing

Expérience avérée dans des projets d’entreposage de données avec des architectures modernes.

Capacité à Collaborer Dans Un Environnement Mixte

Aisance dans les échanges avec des équipes techniques et des utilisateurs métier, avec une bonne compréhension des besoins fonctionnels.

Profil Recherché

Formation supérieure en informatique, mathématiques, ingénierie ou domaine connexe.

5 ans minimum d’expérience en SQL/SAS et projets de données.

2 ans minimum d’expérience sur Dataiku.

Certification Dataiku Developer fortement appréciée.

Compétences Linguistiques

Maîtrise du français ou du néerlandais

Anglais professionnel courant requis

About the Company

Une plateforme, deux volets : 1) un volet recruteur, la MegaSearch, pour sourcer, contacter et recruter sans commission les 500,000 freelances de Collective (vive l'IA !). => Par ici pour avoir une démo de l'interface Recruteur : https://calendly.com/juliette-collective-work/demo-collective-work-clone 2) un volet freelance pour se rendre visible et joinable des recruteurs, développer son réseau, et se professionnaliser via des outils de gestion. Faites comme 2,500 ESN, entreprises, cabinets et agences (Theodo, Artefact, Cher... Know more