Opis
Inżynier ds. zapewnienia jakości (QA) będzie odpowiadać za pomiar, testowanie i usprawnianie produktów AI firmy AI. Rola łączy w sobie ewaluację AI, inżynierię oprogramowania i jakość produktu poprzez budowanie frameworków ewaluacyjnych, zbiorów danych, automatyzowanych testów oraz narzędzi dla funkcji opartych na LLM. Inżynier będzie współpracować z zespołami inżynierskimi i produktowymi, aby identyfikować awarie AI, analizować wyniki działania modeli, określać przyczyny źródłowe i przekładać te ustalenia na mierzalne usprawnienia. Stanowisko wymaga solidnego zaplecza programistycznego lub technicznego, doświadczenia w Python lub podobnym języku programowania, wiedzy o LLM i generatywnym AI oraz doświadczenia w tworzeniu zbiorów danych ewaluacyjnych, przypadków testowych i pakietów regresyjnych.
