Ingénieur de données senior

Ce que vous ferez

• Créer et maintenir des pipelines de données par lots et en continu.

• Déplacez les données de production vers un stockage d'archives/lac de données en toute sécurité et de manière observable.

• Améliorer la qualité, la fiabilité et l'observabilité des ensembles de données dérivés.

• Concevoir des validations pour la fraîcheur, l'exhaustivité, l'exactitude du schéma et la qualité des données.

• Créez des ensembles de données réutilisables qui réduisent le travail ponctuel d'extraction et d'agrégation de données.

• Optimisez les requêtes et les tâches de traitement de données en termes d'exactitude, de latence et de coût.

• Prototypez dans les bons outils, puis intégrez des expériences de production ciblées avec les systèmes d'amo si nécessaire.

Doit avoir

• Expérience de niveau supérieur dans la création et l'exploitation de pipelines de données.

• Python et SQL forts.

• Expérience de production avec Python ou Scala.

• Expérience avec PySpark, Spark SQL, Spark Streaming, Parquet et Iceberg.

• Bonne compréhension du traitement par lots et par flux.

• Expérience d'optimisation des requêtes.

• Familiarité avec les composants internes des moteurs de données et les systèmes de données distribués.

• Expérience avec les lacs de données, les formats de tables/stockage et les ensembles de données dérivés.

Agréable à avoir

• Expérience avec Flink ou des systèmes de traitement de flux similaires.

• Expérience avec la formation ML ou les pipelines d'inférence.

• Familiarité avec le classement, les recommandations, les intégrations ou la résolution d'entités.

• Expérience avec les systèmes de données sensibles à la confidentialité, les flux de travail RGPD ou les pipelines de suppression/exportation de données.

• Expérience en lecture ou en réalisation de modifications étendues dans les systèmes soutenus par Rust.

La vie chez moi

Pour garantir que chacun soit prêt à réussir dans le cadre de notre façon de travailler, nous travaillons ensemble sur site 5 jours par semaine.
Nous voulions nous assurer que votre venue au bureau soit aussi confortable que possible :

• Nous avons choisi un emplacement au centre de Paris, à proximité de l'Opéra (lignes de Métro 3,8,9 et RER A).

• Nous disposons d'un beau bureau de style parisien avec de hauts plafonds, des balcons et d'immenses fenêtres. Donc beaucoup de lumière naturelle !

Parce que la vie en dehors du travail doit également être sans stress, nous couvrons :

• Soins de santé (couverture à 100%).

• Congé de maternité, congé de paternité, congé de deuxième parent (salaire maintenu à 100 %).

• Jours de vacances : 8-9 semaines (total) par an - (été européen ? 🥹😎).

• 5 semaines de congés payés (par l'Etat) ;

• 1 à 2 semaines supplémentaires (RTT, selon notre contrat d'entreprise) ;

• ~11 jours fériés.
Nous fermons entièrement deux fois par an, deux semaines en été et une semaine en hiver pour permettre à chacun de se ressourcer réellement et éviter des ralentissements prolongés (surtout en été). Ces pauses font partie de votre temps total de vacances, donnant à chacun une réelle chance de se débrancher et de se ressourcer. Pas de Slack, pas d'e-mail, pas de FOMO.

Trouvez un emploi en France sur Arbeitnow

Source : Arbeitnow (https://www.arbeitnow.fr/jobs/companies/amo/senior-data-engineer-paris-371160)