Evaluation Engineer, Applied AI

Σχετικά με το Mistral
Η Mistral παρέχει λύσεις τεχνητής νοημοσύνης πλήρους στοίβας: από μοντέλα συνόρων έως εργαλεία προγραμματιστών, εφαρμογές και υπολογιστές. Συνεργαζόμαστε με επιχειρήσεις που αντιμετωπίζουν τα πιο δύσκολα προβλήματα σε κλάδους υψηλού κινδύνου, όπως η χρηματοδότηση, η μεταποίηση, η άμυνα, η υγειονομική περίθαλψη και ο δημόσιος τομέας, συνδημιουργώντας εξατομικευμένα συστήματα AI που μπορούν να λειτουργήσουν με τους όρους τους.
Είμαστε μια δυναμική, συνεργατική ομάδα παθιασμένη με την τεχνητή νοημοσύνη και τις δυνατότητές της να μεταμορφώσει την κοινωνία. Το ποικιλόμορφο εργατικό μας δυναμικό ευδοκιμεί σε ανταγωνιστικά περιβάλλοντα και είναι αφοσιωμένο στην προώθηση της καινοτομίας. Οι ομάδες μας κατανέμονται μεταξύ Ευρώπης, Βόρειας Αμερικής, Ασίας και Μέσης Ανατολής. Είμαστε δημιουργικοί, με χαμηλό εγωισμό και ομαδικό πνεύμα.

Ο Ρόλος
Ως Μηχανικός Αξιολόγησης στην ομάδα Εφαρμοσμένης Τεχνητής Νοημοσύνης, θα διαμορφώσετε τον τρόπο με τον οποίο οι εταιρικοί πελάτες μετρούν και εμπιστεύονται τις λύσεις τεχνητής νοημοσύνης. Θα συνεργαστείτε στενά με πελάτες και εσωτερικά ενδιαφερόμενα μέρη για την παροχή συστημάτων αξιολόγησης που καθορίζουν πότε ένα μοντέλο τεχνητής νοημοσύνης είναι έτοιμο για πραγματικό επιχειρηματικό αντίκτυπο. Η αποστολή της ομάδας είναι να διασφαλίσει ότι κάθε έργο - ανεξάρτητα από το πόσο φιλόδοξο είναι - μετακινείται από την ιδέα στην παραγωγή με σαφήνεια και υπευθυνότητα. Η εργασία σας θα βρίσκεται στο σημείο αναφοράς της έρευνας, της μηχανικής και των λύσεων, επηρεάζοντας άμεσα τον τρόπο με τον οποίο βελτιώνονται και αναπτύσσονται τα μοντέλα σε διάφορους τομείς.

Τι θα κάνετε

• Σχεδιάστε και εφαρμόστε ολοκληρωμένα πλαίσια για την αξιολόγηση της απόδοσης του μοντέλου μεγάλων γλωσσών (LLM) σε περιπτώσεις χρήσης πελατών

• Κατασκευή και συντήρηση κλιμακούμενης υποδομής αξιολόγησης και αγωγών για γρήγορη, αναπαραγώγιμη αξιολόγηση

• Ανάπτυξη νέων μεθόδων αξιολόγησης για ειδικές ανά τομέα ή αναδυόμενες δυνατότητες μοντέλων

• Συνεργαστείτε με πελάτες για να δημιουργήσετε προσαρμοσμένες σουίτες αξιολόγησης που ταιριάζουν στις μοναδικές ανάγκες και τα κριτήριά τους

• Συνεργαστείτε με ερευνητικές ομάδες για να μετατρέψετε τις γνώσεις αξιολόγησης σε βελτιώσεις μοντέλων που μπορούν να υλοποιηθούν

• Συνεργαστείτε με ομάδες προϊόντων για να βελτιώσετε τα εργαλεία αξιολόγησης με βάση τα σχόλια των χρηστών

• Καθορίστε και κοινοποιήστε σαφείς μετρήσεις επιτυχίας για μοντέλα τεχνητής νοημοσύνης «έτοιμα για παραγωγή».

Αυτό που Ψάχνουμε

• Τουλάχιστον 3 χρόνια εμπειρίας στην αξιολόγηση συστημάτων ML, LLM ή πρακτόρων

• Αποδεδειγμένο υπόβαθρο στην εφαρμογή προϊόντων τεχνητής νοημοσύνης ή μηχανικής μάθησης, ειδικά με API ή συστήματα υποστήριξης

• Ισχυρές δεξιότητες κωδικοποίησης Python

• Βαθιά κατανόηση των εννοιών και των αλγορίθμων μηχανικής μάθησης, ειδικά όσον αφορά τα LLM

• Απολαύστε την ξεκάθαρη επικοινωνία τεχνικών θεμάτων τόσο σε τεχνικό όσο και σε μη τεχνικό κοινό

• Εξοικείωση με πλαίσια αξιολόγησης όπως το LM Eval Harness ή το OpenAI Evals ή συνεισφορές σε σχετικά έργα ανοιχτού κώδικα

• Εμπειρία εργασίας με βιβλιοθήκες ML (π.χ. PyTorch, HuggingFace Transformers)

• Συνεργατικός, άμεσος επικοινωνιακός που εκτιμά τα αποτελέσματα και την ομαδική εργασία με χαμηλό εγώ

Τι Προσφέρουμε
Προσφέρουμε ένα ολοκληρωμένο πακέτο παροχών που έχει σχεδιαστεί για να υποστηρίζει την ευημερία, την ανάπτυξη και την ισορροπία μεταξύ επαγγελματικής και προσωπικής ζωής. Τα οφέλη διαφέρουν ανάλογα με τη χώρα και μπορεί να περιλαμβάνουν κάλυψη υγειονομικής περίθαλψης, γονική άδεια, συνταξιοδοτικά προγράμματα, υποστήριξη μετεγκατάστασης, προγράμματα ευεξίας, επιδόματα γευμάτων και μεταφοράς και άλλα προνόμια για συγκεκριμένη τοποθεσία.
Για τις πιο ενημερωμένες λεπτομέρειες σχετικά με τα προνόμια που είναι διαθέσιμα στην τοποθεσία σας, ανατρέξτε στη σελίδα Οφέλη .

Πολιτική Απορρήτου
Το απόρρητό σας έχει σημασία για εμάς. Μπορείτε να μάθετε περισσότερα σχετικά με τον τρόπο με τον οποίο χειριζόμαστε τα προσωπικά σας δεδομένα στην Πολιτική απορρήτου των αιτούντων.
Βρείτε περισσότερες αγγλόφωνες θέσεις εργασίας στη Γαλλία στο Arbeitnow

Πηγή: Arbeitnow (https://www.arbeitnow.fr/jobs/companies/mistralai/evaluation-engineer-applied-ai-paris-96814)