Ingénieur Data - Intégrations Cloud & SaaS

Emplacement
Notre Data Engineer fera partie intégrante de notre équipe R&D. Ce rôle est basé à distance en tant qu'employé à temps plein au Royaume-Uni, en Irlande, en Estonie, aux Pays-Bas, en Suède et en Israël. Nous sommes également ouverts aux entrepreneurs d’Europe de l’Est et du Portugal.

Qui nous sommes
DoiT est une entreprise technologique mondiale qui travaille avec des organisations basées sur le cloud pour tirer parti du cloud afin de stimuler la croissance et l'innovation des entreprises. Nous combinons les données, la technologie et l'expertise humaine pour garantir que nos clients opèrent dans un état bien architecturé et évolutif, de la planification à la production.

En fournissant DoiT Cloud Intelligence, la seule solution qui intègre une technologie avancée à l'intelligence humaine, nous aidons nos clients à résoudre des problèmes multicloud complexes et à gagner en efficacité.

Forts de plusieurs décennies d'expérience multicloud, nous disposons de spécialisations dans Kubernetes, GenAI, CloudOps et bien plus encore. Partenaire stratégique primé d'AWS, Google Cloud et Microsoft Azure, nous travaillons aux côtés de plus de 4 000 clients dans le monde.

L'opportunité
Les dépenses cloud ne concernent plus uniquement AWS, Google Cloud et Azure. Nos clients gèrent désormais une part importante et croissante de leurs dépenses technologiques via des plateformes SaaS, des nuages ​​de données et des fournisseurs d'IA - chacun avec sa propre API de facturation, son propre modèle de tarification et sa propre idée de ce que signifie un « élément de campagne ». Le cadre d'intégration de DoiT est ce qui transforme cela en une image unique et fiable des coûts.

Nous recrutons un Data Engineer pour s'occuper du côté données. Votre mandat consiste à élargir la visibilité : en intégrant davantage de dépenses d'un client sur la plateforme, provenant d'un plus grand nombre de fournisseurs, à un niveau de qualité sur lequel les gens peuvent prendre des décisions financières. Le paysage des fournisseurs évolue constamment, il s'agit donc d'une propriété authentique et permanente avec un lien court entre votre travail et ce que voient les clients.

Vous travaillerez avec l'IA dès le premier jour. Nous attendons de vous que vous utilisiez l’IA dans l’ensemble de votre flux de travail, et non de manière occasionnelle, et que vous ayez de véritables opinions sur la place qu’elle occupe.

Responsabilités

• Extension de la couverture des fournisseurs. C’est le cœur du rôle. Créez de nouvelles intégrations avec des API de facturation et d'utilisation tierces et obtenez une plus grande part des dépenses de nos clients visibles sur la plateforme. Maintenez les intégrations existantes à jour à mesure que les fournisseurs modifient leurs API et leurs modèles de tarification, ce qu'ils font constamment. Réduisez le coût marginal de la prochaine intégration afin que la couverture évolue plus rapidement.

• Fonctionnement augmenté par l'IA. Utilisez l'IA quotidiennement tout au long de votre travail : exploration de bases de code inconnues et d'API tierces, approches de prototypage, génération et révision de code, débogage, rédaction de tests et production de documentation. Poussez sur ce que les outils peuvent faire pour cette base de code et portez un jugement sur les domaines dans lesquels l'IA augmente la vitesse et dans lesquels un humain doit encore maintenir la barre de qualité.

• Exactitude et exhaustivité des données. Posséder la qualité des données produites par nos intégrations : duplication, lacunes et conditions de concurrence lors de l'ingestion et du retraitement, déduplication des dépenses qui arrivent également via les marchés cloud et prise en charge des tarifs négociés par les clients plutôt que des tarifs publics. Élaborez les contrôles et les rapprochements qui nous permettent de prouver que les chiffres sont exacts plutôt que d'espérer qu'ils le sont.

• Normalisation entre les fournisseurs. Concevez et construisez des modèles qui rendent comparables des dizaines de factures de fournisseurs de formes différentes : unités, devises, granularité temporelle, taxonomies de ressources et de services et catégories de coûts cohérentes.

• Propriété du pipeline. Posséder les mécanismes d'orchestration, de planification et de remplissage pour les pipelines d'ingestion de bout en bout, notamment en faisant des remplissages une opération de routine, sûre et en libre-service.

• Collaborer et résoudre des problèmes. Travaillez avec le produit, le support et les ingénieurs en vous appuyant sur ces données pour comprendre où les lacunes font mal. Proposez le travail qui, selon vous, devrait être réalisé ; vous n'êtes pas là pour attendre une spécification.

Qualifications

• Plus de 3 ans d'expérience professionnelle dans l'ingénierie des données ou dans un rôle backend gourmand en données, avec la propriété de la production de pipelines dont dépendent d'autres personnes.

• SQL fort : vous pouvez écrire, lire et raisonner sur les performances de requêtes analytiques non triviales.

• Expérience pratique dans la création et l'exploitation de pipelines de données avec un cadre d'orchestration. Dagster ou Airflow est fortement souhaité ; une expérience équivalente avec Prefect, dbt ou un outil comparable est pertinente si vous êtes prêt à travailler dans Dagster/Airflow

• Python fort, ou un autre langage que vous utilisez couramment pour le travail sur les données

• Expérience avec un entrepôt de données cloud ou un magasin analytique (BigQuery, ClickHouse, Snowflake, Redshift ou similaire)

• Expérience de l'intégration d'API REST tierces, y compris la gestion des réalités : pagination, limites de débit, échecs partiels, données arrivées tardivement et retraitées, et fournisseurs dont la documentation est erronée.

• Un réel instinct pour l'exactitude des données. Vous êtes le genre d'ingénieur qui rapproche les totaux, remet en question un nombre qui semble plausible et construit l'affirmation plutôt que de supposer.

• Style de travail amélioré par l'IA : vous utilisez déjà des outils d'IA dans votre flux de travail d'ingénierie et pouvez parler concrètement de ce que vous en avez retiré.

• Expérience dans le développement de solutions dans le cloud et/ou dans l'utilisation de services cloud

• Excellentes compétences en communication en anglais, à la fois écrite et verbale

• Auto-organisé, axé sur les objectifs et motivé; confiant, minutieux et tenace

Points bonus

• Expérience avec les données de facturation cloud ou SaaS – exportations de coûts et d'utilisation AWS/GCP/Azure, facturation Marketplace ou spécification FOCUS.

• Familiarité avec Go, que nous utilisons dans nos services backend

• Expérience avec des systèmes qui comportent des exigences d'exactitude financière ou de niveau audit : facturation, comptage, rapprochement des revenus ou moteurs de facturation.

• Exposition aux pratiques FinOps ou aux produits de gestion financière cloud

• Diplôme BA/BS ou expérience pratique équivalente

Êtes-vous un Faiseur ?
Soyez votre vrai moi. Travaillez selon vos conditions. Faites une différence.…

Source : Arbeitnow (https://www.arbeitnow.co.uk/jobs/companies/senior-full-stack-engineer-ai-cost-visibility-greenhouse/data-engineer-cloud-saas-integrations-140820)