Μηχανικός Μηχανικής Μάθησης - LLM

Ποιοι Είμαστε
Έχετε παραγγείλει δείπνο μέσω του Just Eat Takeaway. Έχετε αγοράσει και πουλήσει στο OLX. Έχετε πληρώσει με PayU. Οι πιθανότητες είναι ότι έχετε ήδη χρησιμοποιήσει μια εταιρεία Prosus σήμερα.
Είμαστε η Prosus, μια παγκόσμια εταιρεία τεχνολογίας που τροφοδοτεί ορισμένες από τις κορυφαίες επιχειρήσεις ηλεκτρονικού εμπορίου στον τρόπο ζωής στον κόσμο. Κάθε μέρα, δισεκατομμύρια άνθρωποι σε όλη την Ινδία, τη Λατινική Αμερική, την Ευρώπη και πέραν αυτής χρησιμοποιούν τα προϊόντα και τις υπηρεσίες μας για να αγοράσουν, να πουλήσουν, να πληρώσουν, να συνδεθούν και να ανακαλύψουν.
Το οικοσύστημά μας που βασίζεται στην τεχνητή νοημοσύνη εκτείνεται σε 100+ εταιρείες στο ηλεκτρονικό εμπόριο, την παράδοση φαγητού, το fintech και τις εμπειρίες, εξυπηρετώντας δισεκατομμύρια καταναλωτές σε όλο τον κόσμο. Η τεχνητή νοημοσύνη εξουσιοδοτεί τον τρόπο με τον οποίο λειτουργούμε και καινοτομούμε, με περισσότερους από 60.000 ενεργούς πράκτορες τεχνητής νοημοσύνης να βοηθούν τις ομάδες μας να χτίσουν, να κλιμακωθούν και να προχωρήσουν πιο γρήγορα. Μέσω της επενδυτικής μας ομάδας, υποστηρίζουμε επίσης τους ιδρυτές και τις τεχνολογίες που διαμορφώνουν το μέλλον: Από τη ρομποτική και τα αυτόνομα συστήματα μέχρι τη συνθετική βιολογία και την τεχνητή νοημοσύνη συνόρων.
Με γνώμονα τις πέντε αξίες μας, Καινοτομία, Αποτελέσματα, Άνθρωποι, Αντίκτυπος και Επιχειρηματικότητα, ο πολιτισμός είναι το ανταγωνιστικό μας πλεονέκτημα. Ευδοκιμούμε με τον πειραματισμό. χτίζουμε, δοκιμάζουμε, μαθαίνουμε, επαναλαμβάνουμε.
Ελάτε μαζί μας στη διαμόρφωση του μέλλοντος της τεχνολογίας σε παγκόσμια κλίμακα.
Γίνετε μέλος της ομάδας μας AI στην Prosus, τη μεγαλύτερη καταναλωτική εταιρεία Διαδικτύου στην Ευρώπη και έναν από τους μεγαλύτερους επενδυτές τεχνολογίας στον κόσμο. Θα εργάζεστε στην ομάδα που οδηγεί την ανάπτυξη και την καινοτομία σε όλη την εταιρεία, με την εργασία σας να επηρεάζει άμεσα τον τρόπο με τον οποίο εκατομμύρια άνθρωποι ψωνίζουν στο διαδίκτυο.

Αυτόν που ψάχνουμε
Αναζητούμε έναν έμπειρο Μηχανικό Μηχανικής Εκμάθησης για να αναπτύξουμε τα γλωσσικά μοντέλα μας για συγκεκριμένο τομέα. Θα διαθέτετε το πλήρες πρόγραμμα εκπαίδευσης - από τη συνεχιζόμενη προ-εκπαίδευση σε ιδιόκτητα δεδομένα, μέσω της τελειοποίησης, έως τις προηγμένες τεχνικές μετά την εκπαίδευση. Έχετε πρακτική εμπειρία εκπαίδευσης μοντέλων γλώσσας σε κλίμακα (από ενσωμάτωση μοντέλων έως εξειδικευμένα LLM), βαθιά κατανόηση των κατανεμημένων συστημάτων και διαπρέπει στη μετατροπή των ερευνητικών εννοιών σε ισχυρά συστήματα παραγωγής. Παρακινείστε βλέποντας την εργασία σας να αναπτύσσεται και να χρησιμοποιείται από εκατομμύρια πραγματικούς χρήστες. Ευδοκιμείτε σε περιβάλλοντα με γρήγορους ρυθμούς όπου εξισορροπείτε τις γνώσεις της έρευνας με τον πρακτικό επιχειρηματικό αντίκτυπο.

Τι θα κάνεις

• Αναλύστε την απόδοση του μοντέλου και τα δεδομένα εκπαίδευσης για να εντοπίσετε ευκαιρίες βελτίωσης και να διατυπώσετε υποθέσεις για βελτίωση

• Σχεδιασμός, εκτέλεση και αυστηρή αξιολόγηση πειραμάτων για τη βελτίωση της ποιότητας του μοντέλου, της αποτελεσματικότητας της εκπαίδευσης και της απόδοσης εργασιών κατάντη

• Εκπαιδεύστε μεγάλα γλωσσικά μοντέλα για τον τομέα μας μέσω συνεχούς προεκπαίδευσης και πλήρους προσαρμογής παραμέτρων σε ιδιόκτητα σύνολα δεδομένων

• Σχεδιάστε και εφαρμόστε αγωγούς μετά την εκπαίδευση χρησιμοποιώντας RLHF, DPO, GRPO και άλλες τεχνικές ενίσχυσης εκμάθησης

• Δημιουργία και βελτιστοποίηση κατανεμημένης υποδομής εκπαίδευσης σε συμπλέγματα GPU πολλαπλών κόμβων χρησιμοποιώντας πλαίσια όπως DeepSpeed, FSDP, Megatron-LM ή Axolotl

• Διαθέτετε προετοιμασία δεδομένων μεγάλης κλίμακας: στρατηγικές φιλτραρίσματος, αξιολόγησης ποιότητας, αντιγραφής και μείγματος δεδομένων για εκπαιδευτικά σώματα σε κλίμακα διακριτικών 100Β+

• Δημιουργία και επιμέλεια συνθετικών δεδομένων υψηλής ποιότητας για τελειοποίηση των οδηγιών και βελτίωση δυνατοτήτων

• Εντοπίστε προβλήματα σταθερότητας εκπαίδευσης, βελτιστοποιήστε την απόδοση της εκπαίδευσης και παρακολουθήστε την απόδοση του μοντέλου σε μακροχρόνιες κατανεμημένες εργασίες

• Εφαρμόστε τεχνικές από πρόσφατες εργασίες και προσαρμόστε τις στις περιπτώσεις χρήσης μας

• Δημιουργήστε ισχυρά πλαίσια αξιολόγησης για τη μέτρηση της ποιότητας του μοντέλου και την καθοδήγηση των αποφάσεων κατάρτισης

• Γράψτε καλά ελεγμένο κώδικα ποιότητας παραγωγής και συνεισφέρετε στα πρότυπα μηχανικής ομάδας

Ελάχιστα προσόντα

• 3+ χρόνια εμπειρίας μηχανικού ML

• Αποδεδειγμένη εκπαίδευση και ανάπτυξη γλωσσικών μοντέλων στην παραγωγή (ενσωμάτωση μοντέλων, μοντέλων κωδικοποιητών ή μεγάλων γλωσσικών μοντέλων) συμπεριλαμβανομένης της προεκπαίδευσης, της συνεχούς προεκπαίδευσης ή της λεπτομέρειας με αυστηρή αξιολόγηση

• Εμπειρία στην προετοιμασία συνόλων δεδομένων εκπαίδευσης μεγάλης κλίμακας: φιλτράρισμα δεδομένων, αξιολόγηση ποιότητας, στρατηγικές αντιγραφής και σχεδιασμός μείξης δεδομένων

• Πρακτική εμπειρία με κατανεμημένα πλαίσια εκπαίδευσης (DeepSpeed, FSDP, Megatron-LM ή Axolotl), συμπεριλαμβανομένης της ενορχήστρωσης εργασιών πολλών κόμβων, αποσφαλμάτων εντοπισμού σφαλμάτων και βελτιστοποίησης απόδοσης

• Ισχυρή κατανόηση της δυναμικής εκπαίδευσης σε κλίμακα: αποσφαλμάτωση αστάθειας απώλειας, συντονισμός χρονοδιαγραμμάτων ρυθμού εκμάθησης, διαχείριση σταθερότητας εκπαίδευσης σε μακροχρόνιες εργασίες πολλών κόμβων

• Έμπειροι Python και PyTorch με εμπειρία παραγωγής με χρήση βιβλιοθηκών εκπαίδευσης ( Transformers , DeepSpeed, Accelerate)

• Ισχυρές πρακτικές μηχανικής λογισμικού: έλεγχος έκδοσης, δοκιμή, CI/CD, αναθεώρηση κώδικα

Προτιμώμενα προσόντα

• Δημοσίευσε έρευνα σε συνέδρια ML (NeurIPS, ICML, ICLR, ACL, EMNLP), κυκλοφόρησε μοντέλα στο Hugging Face, δημιούργησε δημόσια σημεία αναφοράς ή συνεισέφερε σε έργα ανοιχτού κώδικα

• Εμπειρία με μεθόδους μετά την εκπαίδευση: RLHF, DPO, GRPO ή άλλες ενισχυτικές προσεγγίσεις μάθησης για ευθυγράμμιση και παρακολούθηση οδηγιών

• Απολαύστε τη βελτιστοποίηση μοντέλων για συμπεράσματα παραγωγής: κβαντοποίηση, συμπίεση μοντέλων, απόσταξη και πλαίσια εξυπηρέτησης (vLLM)

• Κατανόηση της βελτιστοποίησης μνήμης: βαθμίδα ελέγχου, εκπαίδευση μεικτής ακρίβειας (FP16, BF16, FP8), βελτιστοποίηση ZeRO

• Παρακολούθηση κατασκευής αγωγών παραγωγής συνθετικών δεδομένων για συντονισμό εντολών ή προσαρμογή τομέα

• Ερευνητικές συνεισφορές: δημοσιευμένες εργασίες σε συνέδρια ML, μοντέλα που κυκλοφόρησαν στο Hugging Face ή δημιουργήθηκαν σημεία αναφοράς που χρησιμοποιούνται από την κοινότητα

• Συνεισφορές σε έργα ή εργαλεία κατάρτισης LLM ανοιχτού κώδικα

Τι προσφέρουμε

• Έργα τεχνητής νοημοσύνης υψηλού αντίκτυπου που είναι στρατηγικά ζωτικής σημασίας για την εταιρεία, με άμεση δέσμευση από ανώτερα ηγετικά στελέχη, συμπεριλαμβανομένου του Διευθύνοντος Συμβούλου

• Υποδομή τελευταίας τεχνολογίας: στόλος GPU H200, τεράστια ιδιόκτητα σύνολα δεδομένων, πρόσβαση σε μοντέλα συνόρων (OpenAI, Anthropic, Google, Together.ai ) για αξιολόγηση και βασικές γραμμές

• Ειδικοί συνάδελφοι που έχουν κυκλοφορήσει κορυφαία μοντέλα Hugging Face, έχουν συντάξει εργασίες στο NeurIPS, δημιούργησαν γνωστά σημεία αναφοράς και κατασκεύασαν πολλαπλά συστήματα AI παραγωγής…

Πηγή: Arbeitnow (https://www.arbeitnow.nl/jobs/companies/prosus/machine-learning-engineer-llms-amsterdam-244530)