Senior Data Engineer

Σχετικά με τον Nebius:

Ο Nebius ηγείται μιας νέας εποχής στην υποδομή cloud για την παγκόσμια οικονομία AI. Κατασκευάζουμε μια πλήρους στοίβας πλατφόρμα cloud τεχνητής νοημοσύνης που υποστηρίζει προγραμματιστές και επιχειρήσεις από την εκπαίδευση δεδομένων και μοντέλων μέχρι την ανάπτυξη παραγωγής, χωρίς το κόστος και την πολυπλοκότητα της κατασκευής μεγάλης εσωτερικής υποδομής AI/ML.

Κατασκευασμένο από μηχανικούς, για μηχανικούς. Από την ενορχήστρωση GPU μεγάλης κλίμακας έως τη βελτιστοποίηση συμπερασμάτων, είμαστε κύριοι των δύσκολων προβλημάτων στους υπολογισμούς, την αποθήκευση, τη δικτύωση και την εφαρμοσμένη τεχνητή νοημοσύνη.

Εισηγμένες στο Nasdaq (NBIS) και με έδρα το Άμστερνταμ, έχουμε παγκόσμιο αποτύπωμα με κόμβους Ε&Α σε όλη την Ευρώπη, το Ηνωμένο Βασίλειο, τη Βόρεια Αμερική και το Ισραήλ. Η ομάδα μας των 1.500+ περιλαμβάνει εκατοντάδες μηχανικούς με βαθιά εξειδίκευση σε υλικό, λογισμικό και Ε&Α τεχνητής νοημοσύνης.

Ο ρόλος

Η ομάδα Data Engineering δημιουργεί και λειτουργεί την πλατφόρμα δεδομένων που τροφοδοτεί την ανάλυση, την επιχειρηματική ευφυΐα, τις επιχειρησιακές αναφορές και τα προϊόντα που βασίζονται σε δεδομένα στο Nebius. Απολαμβάνουμε δεδομένα από εσωτερικά και εξωτερικά συστήματα, αναπτύσσουμε αξιόπιστες αγωγούς μετασχηματισμού και μοντέλα δεδομένων και διαθέτουμε αξιόπιστα σύνολα δεδομένων σε επιχειρήσεις και ομάδες προϊόντων.

Αναζητούμε έναν Ανώτερο Μηχανικό Δεδομένων για να κατέχει σημαντικά μέρη της πλατφόρμας δεδομένων μας και να παρέχει σύνθετα προϊόντα δεδομένων από άκρη σε άκρη. Θα μετατρέψετε τις διφορούμενες επιχειρηματικές ανάγκες σε ρεαλιστικές τεχνικές λύσεις, θα κάνετε συμβιβασμούς στην αρχιτεκτονική και την υλοποίηση και θα βελτιώσετε την αξιοπιστία, την επεκτασιμότητα και τη χρηστικότητα του οικοσυστήματος δεδομένων μας.

Θα συνεργαστείτε στενά με ομάδες προϊόντων, πλατφορμών και επιχειρήσεων, βοηθώντας τις να χρησιμοποιούν τα δεδομένα αποτελεσματικά, διασφαλίζοντας παράλληλα ότι τα συστήματά μας παραμένουν διατηρητέα και αξιόπιστα καθώς αναπτύσσεται η Nebius.

Οι ευθύνες σας:

• Κάτοχος του σχεδιασμού, της παράδοσης και της λειτουργίας πολύπλοκων αγωγών δεδομένων, συνόλων δεδομένων και στοιχείων πλατφόρμας.

• Μεταφράστε τις επιχειρηματικές και αναλυτικές απαιτήσεις σε κλιμακούμενα μοντέλα δεδομένων, αξιόπιστα προϊόντα δεδομένων και σαφή τεχνικά σχέδια.

• Σχεδιάστε και εξελίξτε την αρχιτεκτονική δεδομένων, την αποθήκευση, την επεξεργασία και τα μοτίβα ενορχήστρωσης για φόρτους εργασίας μεγάλης κλίμακας.

• Βελτιώστε την ποιότητα των δεδομένων, την παρατηρησιμότητα, τη γενεαλογία και την απόκριση συμβάντων για κρίσιμα σύνολα δεδομένων και αγωγούς.

• Διερευνήστε και επιλύστε προκλητικά ζητήματα απόδοσης, αξιοπιστίας και ορθότητας δεδομένων στην παραγωγή.

• Καθιερώστε επαναχρησιμοποιήσιμα εργαλεία, συμβάσεις και αυτοματισμούς που βελτιώνουν την παραγωγικότητα της μηχανικής και μειώνουν τον λειτουργικό κίνδυνο.

• Συνεργαστείτε με ομάδες προϊόντων και επιχειρηματικούς φορείς για να καθορίσετε συμβάσεις δεδομένων, προτεραιότητες και κριτήρια επιτυχίας.

• Συνεισφέρετε στην τεχνική κατεύθυνση μέσω αναθεωρήσεων σχεδιασμού, στοχαστικών αντισταθμίσεων και τεκμηρίωσης.

• Υποστήριξη και καθοδήγηση άλλων μηχανικών μέσω επισκοπήσεων, σύζευξης και ανταλλαγής γνώσεων.

• Συμμετέχετε στην εναλλαγή εφημερίας και αναλάβετε την ευθύνη της βελτίωσης της λειτουργικής υγείας των συστημάτων που υποστηρίζετε.

Απαραίτητα:

• 5+ χρόνια εμπειρίας στη μηχανική δεδομένων, στη μηχανική υποστήριξης ή σε σχετικό ρόλο. ή ισοδύναμη εμπειρία στην παράδοση και λειτουργία συστημάτων δεδομένων παραγωγής.

• Αποδεδειγμένη εμπειρία στην ανεξάρτητη παροχή σύνθετων αγωγών δεδομένων ή δυνατοτήτων πλατφόρμας δεδομένων από τον ορισμό του προβλήματος μέχρι τη λειτουργία παραγωγής.

• Ισχυρές δεξιότητες Python και SQL, συμπεριλαμβανομένης της σύνταξης συντηρήσιμου κώδικα παραγωγής και της βελτιστοποίησης μη τετριμμένων ερωτημάτων.

• Πρακτική εμπειρία με εργαλεία ενορχήστρωσης ροής εργασιών όπως Airflow, Prefect ή Dagster.

• Ισχυρή κατανόηση της μοντελοποίησης δεδομένων, συμπεριλαμβανομένου του σχεδιασμού αναλυτικών μοντέλων με δυνατότητα συντήρησης και συμβάσεων δεδομένων για πολλούς καταναλωτές.

• Στέρεη γνώση των αρχιτεκτονικών δεδομένων και των συστημάτων αποθήκευσης, συμπεριλαμβανομένων των αντισταθμίσεων μεταξύ διαφορετικών προσεγγίσεων επεξεργασίας και αποθήκευσης.

• Εμπειρία σχεδιασμού για αξιοπιστία: δοκιμή, παρακολούθηση, επικύρωση ποιότητας δεδομένων, ειδοποίηση, εντοπισμός σφαλμάτων και επίλυση περιστατικών.

• Ικανότητα λήψης τεχνικών αποφάσεων υπό ασάφεια, επεξήγησης των αντισταθμίσεων με σαφήνεια και αποτελεσματικής συνεργασίας με μηχανικούς και μη τεχνικούς ενδιαφερόμενους

Ωραία:

• Εμπειρία με πλατφόρμες δεδομένων σε πραγματικό χρόνο ή συμβάντα και τεχνολογίες ροής.

• Απολαύστε τη δημιουργία ή τη λειτουργία εγγενών υπηρεσιών cloud με το Docker και το Kubernetes.

• Εξοικείωση με το Infrastructure as Code, ιδιαίτερα το Terraform.

• Εμπειρία με τη διακυβέρνηση δεδομένων, τον έλεγχο πρόσβασης, το απόρρητο και τις απαιτήσεις συμμόρφωσης, όπως GDPR ή SOC 2.

• Εμπειρία με εργαλεία ή πλαίσια παρακολούθησης δεδομένων και ποιότητας, όπως το Great Expectations.

• Απολαύστε τη βελτίωση των προτύπων μηχανικής μέσω κοινών βιβλιοθηκών, εργαλείων πλατφόρμας, τεχνικής τεκμηρίωσης ή καθοδήγησης.

Πραγματοποιούμε συνεντεύξεις κωδικοποίησης ως μέρος της διαδικασίας.

Οφέλη και προνόμια:

• Ανταγωνιστική αποζημίωση

• Ευκαιρίες ανάπτυξης σταδιοδρομίας και μάθησης

• Ευελιξία και ιδιοκτησία

• Συνεργατική και καινοτόμος κουλτούρα

• Ευκαιρία να εργαστείτε σε έργα τεχνητής νοημοσύνης με αντίκτυπο

• Διεθνές περιβάλλον και ταλαντούχες ομάδες

Πώς είναι να εργάζεσαι στη Nebius:

Γρήγορη κίνηση - Τολμηρή σκέψη - Συνεχής ανάπτυξη - Σημαντικός αντίκτυπος - Εμπιστοσύνη και πραγματική ιδιοκτησία - Ευκαιρία να διαμορφώσετε το μέλλον της τεχνητής νοημοσύνης

Δήλωση ίσων ευκαιριών:

Ο Nebius είναι εργοδότης ίσων ευκαιριών. Δεσμευόμαστε να προωθήσουμε έναν εργασιακό χώρο χωρίς αποκλεισμούς και ποικιλομορφία και να παρέχουμε ίσες ευκαιρίες απασχόλησης σε όλες τις πτυχές της απασχόλησης. Δεν κάνουμε διακρίσεις με βάση τη φυλή, το χρώμα, τη θρησκεία, το φύλο (συμπεριλαμβανομένης της εγκυμοσύνης), την εθνική καταγωγή, την καταγωγή, την ηλικία, την αναπηρία, τις γενετικές πληροφορίες, την οικογενειακή κατάσταση, την κατάσταση βετεράνου, τον σεξουαλικό προσανατολισμό, την ταυτότητα φύλου ή έκφραση ή οποιοδήποτε άλλο χαρακτηριστικό που προστατεύεται από την ισχύουσα νομοθεσία.

Οι υποψήφιοι πρέπει να έχουν εξουσιοδότηση να εργαστούν στη χώρα στην οποία υποβάλλουν αίτηση και θα πρέπει να προσκομίσουν απόδειξη επιλεξιμότητας για εργασία ως προϋπόθεση πρόσληψης.

Εάν χρειάζεστε καταλύματα κατά τη διαδικασία αίτησης, ενημερώστε μας.

Πηγή: Jobicy (https://jobicy.com/jobs/156537-senior-data-engineer-5)