Değerlendirme Mühendisi, Uygulamalı Yapay Zeka

Mistral Hakkında
Mistral, sınır modellerinden geliştirici araçlarına, uygulamalara ve bilişime kadar tam kapsamlı yapay zeka çözümleri sunar. Finans, imalat, savunma, sağlık ve kamu sektörü gibi yüksek riskli sektörlerdeki en zor sorunlarla mücadele eden kuruluşlarla ortaklık kuruyor, kendi şartlarına göre çalıştırabilecekleri özelleştirilmiş yapay zeka sistemlerini birlikte oluşturuyoruz.
Yapay zekaya ve onun toplumu dönüştürme potansiyeline tutkuyla bağlı, dinamik, işbirliğine dayalı bir ekibiz. Çeşitliliğe sahip iş gücümüz rekabetçi ortamlarda başarılı olur ve yenilikçiliği teşvik etmeye kararlıdır. Ekiplerimiz Avrupa, Kuzey Amerika, Asya ve Orta Doğu arasında dağılmıştır. Yaratıcıyız, egosu düşük ve takım ruhuna sahibiz.

Rol
Uygulamalı Yapay Zeka ekibinde bir Değerlendirme Mühendisi olarak kurumsal müşterilerin yapay zeka çözümlerini nasıl ölçtüğünü ve bunlara nasıl güvendiğini şekillendireceksiniz. Bir yapay zeka modelinin gerçek iş etkisi için ne zaman hazır olacağını tanımlayan değerlendirme sistemleri sunmak için müşterilerle ve iç paydaşlarla yakın işbirliği içinde çalışacaksınız. Ekibin misyonu, ne kadar iddialı olursa olsun her projenin fikirden üretime netlik ve sorumlulukla geçmesini sağlamaktır. Çalışmanız araştırma, mühendislik ve çözümlerin kesişim noktasında yer alacak ve modellerin çeşitli alanlarda nasıl geliştirilip dağıtılacağını doğrudan etkileyecektir.

Ne yapacaksın

• Müşteri kullanım senaryolarında büyük dil modeli (LLM) performansını değerlendirmek için kapsamlı çerçeveler tasarlayın ve uygulayın

• Hızlı, tekrarlanabilir değerlendirme için ölçeklenebilir değerlendirme altyapısı ve işlem hatları oluşturun ve sürdürün

• Sektöre özgü veya yeni ortaya çıkan model yetenekleri için yeni değerlendirme yöntemleri geliştirmek

• Müşterilerin benzersiz ihtiyaçlarına ve kriterlerine uygun özel değerlendirme paketleri oluşturmak için müşterilerle işbirliği yapın

• Değerlendirme öngörülerini eyleme dönüştürülebilir model iyileştirmelerine dönüştürmek için araştırma ekipleriyle işbirliği yapın

• Kullanıcı geri bildirimlerine göre değerlendirme araçlarını iyileştirmek için ürün ekipleriyle birlikte çalışın

• "Üretime hazır" yapay zeka modelleri için net başarı ölçümlerini tanımlayın ve iletin

Aradığımız şey

• ML, LLM veya temsilcilik sistemlerini değerlendirme konusunda en az 3 yıllık deneyim

• Yapay zeka veya makine öğrenimi ürünlerinin özellikle API'ler veya arka uç sistemlerle uygulanmasında kanıtlanmış deneyim

• Güçlü Python kodlama becerileri

• Makine öğrenimi kavramları ve algoritmalarının, özellikle de Yüksek Lisans'larla ilgili olarak derinlemesine anlaşılması

• Teknik konuları hem teknik hem de teknik olmayan izleyicilere net bir şekilde aktarma deneyimi yaşayın

• LM Eval Harness veya OpenAI Evals gibi değerlendirme çerçevelerine aşinalık veya ilgili açık kaynak projelerine katkılar

• ML kitaplıklarıyla çalışma deneyimi (ör. PyTorch, HuggingFace Transformers)

• Sonuçlara ve düşük egolu ekip çalışmasına değer veren işbirlikçi, doğrudan iletişimci

Ne Sunuyoruz?
Refahınızı, büyümenizi ve iş-yaşam dengenizi desteklemek için tasarlanmış kapsamlı bir fayda paketi sunuyoruz. Avantajlar ülkeye göre değişir ve sağlık sigortası kapsamını, ebeveyn iznini, emeklilik planlarını, yer değiştirme desteğini, sağlıklı yaşam programlarını, yemek ve ulaşım ödeneklerini ve konuma özgü diğer avantajları içerebilir.
Bulunduğunuz bölgede sunulan avantajlara ilişkin en güncel ayrıntılar için lütfen Avantajlar sayfamıza bakın.

Gizlilik Politikası
Gizliliğiniz bizim için önemlidir. Başvuru Sahibi Gizlilik Politikamızdan kişisel verilerinizi nasıl işlediğimiz hakkında daha fazla bilgi edinebilirsiniz.
Arbeitnow'da Fransa'da daha fazla İngilizce Konuşma İşi bul

Kaynak: Arbeitnow (https://www.arbeitnow.fr/jobs/companies/mistralai/evaluation-engineer-applied-ai-paris-96814)