Ingénieur de données AWS (associé)

Mactores est la société de modernisation AWS composée d'agents. La plupart des travaux de modernisation ne sont pas livrés, ils stagnent dans les projets pilotes, glissent un an ou atterrissent avec trois fois le budget. Nous existons pour l'expédier : systèmes de production en cours d'exécution, anciens systèmes retirés, résultats mesurés. Notre prestation s'appuie sur Aedeon, la plateforme d'agents construite par la société sœur des fondateurs de Mactores, qui absorbe les 60 à 70 % répétitifs du travail d'engagement, de découverte, de cartographie des dépendances, de validation, de génération de tests, pour lesquels le conseil traditionnel facture des heures humaines. Les ingénieurs déployés à l’avant possèdent le reste : l’architecture, le jugement et la transition, aux dates que nous nous engageons dans le contrat.

Ce rôle s'inscrit dans notre pilier Modernisation de la plateforme de données : consolider et migrer l'infrastructure de données client sur AWS en quelques semaines, et non en trimestres. Les clients nous contactent avec des pipelines auxquels personne ne fait confiance, des indicateurs sur lesquels personne n'est d'accord et des entrepôts qui bloquent toute nouvelle question commerciale. Vous créerez les produits de données qui résolvent ce problème, en travaillant avec des responsables commerciaux, des analystes et des scientifiques des données pour comprendre le domaine, puis en expédiant des pipelines et des modèles qui résistent en production.

Étant donné qu'Aedeon gère la découverte répétitive des sources des couches, le mappage de schémas et les harnais de validation, vous ne passerez pas votre début de carrière à effectuer des audits de feuilles de calcul. Vous le consacrerez à l'écriture de code qui atteint la production et à l'apprentissage du jugement des ingénieurs propriétaires des basculements. La qualité des données n'est pas une case à cocher ici ; c'est le produit.

Que ferez-vous ?

• Écrivez du code PySpark et Amazon Glue efficace qui sera envoyé en production.

• Écrivez du SQL dans Amazon Athena et Amazon Redshift.

• Adopter de nouvelles technologies et techniques et les mettre en pratique sur de vrais problèmes commerciaux.

• Travailler avec les équipes d'ingénierie et commerciales pour créer des produits et services de données que les gens utilisent réellement.

• Livrer des projets avec l'équipe et fournir des mises à jour aux clients à temps.

Que recherchons-nous ?

• 1 à 3 ans d'expérience avec Apache Spark, PySpark et Amazon Glue.

• Plus de 2 ans d'expérience dans la rédaction de tâches ETL à l'aide de PySpark et SparkSQL.

• 2+ années d'expérience avec les requêtes SQL et les procédures stockées.

• Compréhension approfondie de l'API Dataframe et des fonctions de transformation prises en charge par Spark 2.7+.

Vous serez préféré si vous avez

• Expérience préalable de travail sur AWS EMR, Apache Airflow

• Certifications AWS Certified Big Data – Spécialité OU Ingénieur Big Data certifié Cloudera OU Ingénieur Big Data certifié Hortonworks

• Compréhension de l'ingénierie DataOps

Comment travaillons-nous ?

Nous exécutons un modèle déployé vers l’avant. Les ingénieurs s'intègrent à l'équipe du client, s'approprient les résultats de la découverte jusqu'à la production et assument personnellement l'engagement de livraison. Aedeon absorbe le tartre ; les ingénieurs absorbent leur jugement ; le contrat absorbe le risque. En tant qu'associé, vous travaillerez à l'intérieur de ce modèle dès le premier jour d'expédition aux côtés d'ingénieurs senior plutôt que de regarder depuis un banc. La culture est décontractée et évite les habitudes rigides des entreprises. Nous nous soucions de ce qui est expédié et nous vous laissons être vous-même pendant que vous l'expédiez.

Rémunération

Informations supplémentaires

La vie à Mactores

Nous avons à cœur de créer une culture qui fait une réelle différence dans la vie de chaque Mactorien. Nos 10 principes fondamentaux de leadership qui honorent la prise de décision, le leadership, la collaboration et la curiosité déterminent notre façon de travailler.

1. Ayez une longueur d'avance

2. Offrez le meilleur

3. Soyez audacieux

4. Faites attention aux détails

5. Profitez du défi

6. Soyez curieux et agissez

7. Prenez le leadership

8. Possédez-le

9. Offrir de la valeur

10. Soyez collaboratif

Nous aimerions que vous lisiez plus de détails sur la culture de travail sur https://mactores.com/careers

Le chemin pour rejoindre l’équipe Mactores

Chez Mactores, notre processus de recrutement s'articule autour de trois étapes distinctes :

Évaluation préalable à l'emploi :

Une série d'évaluations de vos compétences techniques et de votre aptitude au poste.

Entretien avec le manager : le responsable du recrutement s'engage avec vous dans plusieurs discussions, de 30 minutes à une heure chacune, couvrant les compétences techniques, l'expérience pratique, le potentiel de leadership et la communication.

Discussion RH : Au cours de cette session de 30 minutes, vous aurez l'occasion de discuter de l'offre et des prochaines étapes avec un membre de l'équipe RH.

Mactores offre des chances égales dans toutes les pratiques d'emploi. Nous ne faisons aucune discrimination fondée sur la race, la religion, le sexe, l'origine nationale, l'âge, le handicap, l'état civil, le statut militaire, les informations génétiques ou toute autre catégorie protégée par les lois fédérales, étatiques et locales. Cela s'applique à toutes les étapes de la relation de travail, du recrutement, de la rémunération, des promotions, des transferts, des mesures disciplinaires, des licenciements, de la formation et des programmes sociaux et récréatifs.

Remarque : Veuillez répondre à autant de questions que possible avec cette candidature afin d'accélérer le processus d'embauche.

Source : Jobicy (https://jobicy.com/jobs/151141-aws-data-engineer-associate)