Süni intellekt üzrə qiymətləndirmə mühəndisi (Rəqəmsal kanallar sahəsi)
ABB
AI assistant
Job Description
Görəcəyiniz işlər:
- Süni intellekt əsaslı məhsul və funksiyalar üçün qiymətləndirmə strategiyalarını hazırlamaq və icra etmək;
- Biznes tələblərini, istifadəçi ssenarilərini və dialoq axınlarını ölçülə bilən test ssenarilərinə çevirmək;
- Qiymətləndirmə dataset-lərini, benchmark-ları, reqressiya test paketlərini və təkrar istifadə oluna bilən test aktivlərini hazırlamaq, saxlamaq və təkmilləşdirmək;
- Süni intellekt tətbiqləri üzrə funksional, konversasiya, exploratory, API və reqressiya testlərini icra etmək;
- Əsas istifadəçi ssenariləri, kənar hallar (edge case), çoxdilli istifadə, qeyri-müəyyən sorğular və adversarial ssenarilər üzrə test əhatəsini təmin etmək;
- Süni intellekt funksiyaları üçün qiymətləndirmə meyarlarını, keyfiyyət metrikalarını, qiymətləndirmə şkalalarını (scoring rubric), qəbul və reqressiya kriteriyalarını hazırlamaq;
- Deterministik yoxlamaları, qiymətləndirmə