AI Evaluation Engineer

Poszukujemy doświadczonego AI Evaluation Engineera

który będzie odpowiedzialny za ocenę, testowanie i analizę modeli sztucznej inteligencji. Osoba na tym stanowisku zapewni wysoką jakość modeli AI, będzie współpracować z zespołami data science i ML, a także przyczyni się do optymalizacji procesów ewaluacyjnych.

Zakres roli:

• Tworzenie i prowadzenie procesów oceny modeli AI pod kątem jakości, trafności i zgodności z wymaganiami biznesowymi
• Analiza wyników modeli AI i przygotowywanie raportów dla zespołów technicznych i biznesowych
• Współpraca z zespołami data science, ML oraz inżynierami oprogramowania w celu identyfikacji błędów i usprawnień w modelach
• Projektowanie i wdrażanie testów jakości danych i wyników modeli AI
• Identyfikacja ryzyk związanych z wydajnością i etycznym użyciem AI oraz proponowanie działań naprawczych
• Dokumentowanie procesów ewaluacyjnych i wdrażanie najlepszych praktyk
• Udział w spotkaniach zespołowych, przeglądach modeli i retrospektywach projektowych

Oczekujemy:

• 3–6 lat doświadczenia w pracy z modelami AI, ML lub systemami uczenia maszynowego
• Znajomości narzędzi i frameworków do oceny modeli AI (np. Python, TensorFlow, PyTorch, scikit-learn, narzędzia do walidacji danych i modeli)
• Umiejętności analitycznego myślenia i wyciągania wniosków z dużych zbiorów danych
• Doświadczenia w pracy z zespołami technicznymi i biznesowymi
• Znajomości języka angielskiego na poziomie umożliwiającym współpracę z zespołami międzynarodowymi
• Gotowości do wykonywania zadań w godzinach zgodnych ze strefą czasową USA
• Umiejętności pracy w środowisku zdalnym oraz samodzielnej organizacji czasu pracy
• Mile widziana znajomość procesów Agile i Scrum