Tietoa tehtävästä
Tekoälyagentit kirjaavat Nexus-alustalla korvaushakemusten muistiinpanoja, luonnostelevat hyvityslaskuja ja luokittelevat tullinimikkeitä. Jokaista agenttia on mitattava, arvioitava ja pidettävä sille asetetuissa rajoissa, ja mittareiden on oltava sellaisia, jotka valvojakin hyväksyy.
Vastaat rehellisen arvioinnin osa-alueista, mallien luotettavuutta ylläpitävistä vertailuaineistoista sekä tavasta, jolla laadusta raportoidaan asiakkaille.
Tehtäväsi
- Suunnittelet ja toteutat agenttien, taitojen ja mallien arviointeja.
- Rakennat arviointiputkia, jotka yhdistävät eri malliperheiden malleja.
- Muutat ihmisten ilmoittamat virheelliset tulokset pysyviksi testitapauksiksi.
- Raportoit laadusta tavoilla, jotka asiakkaat ja tarkastajat voivat todentaa.
- Teet yhteistyötä alustakehittäjien kanssa, jotta arvioinnit ovat riittävän edullisia ajettavaksi usein.
Mitä odotamme sinulta
- Käytännön kokemusta kielimallien tai koneoppimisjärjestelmien arvioinnista.
- Vahva Python-osaaminen ja hyvä tilastollinen arviointikyky.
- Kokemusta sellaisten työkalujen rakentamisesta, joihin muut kehittäjät luottavat.
- Terve kriittisyys yksittäisiä tunnuslukuja kohtaan.
- Selkeä kirjallinen ilmaisu.
Eduksi katsotaan
- Kokemus säännellyltä alalta tai malliriskien parista.
- Kokemus ihmisen suorittamista arviointiohjelmista.
- EU:n tekoälysäädöksen tuntemus.
Mitä tarjoamme
Aito vastuu tuotteesta, jota käytetään vaativissa ympäristöissä, tiimi, joka dokumentoi työn huolellisesti, sekä aikaa tehdä työ kunnolla. Kirjallisessa työtarjouksessa määritellään palkka, vaativuustaso ja edut.
Rekrytointiprosessi tähän tehtävään
- Ensimmäinen puhelu rekrytoivan esihenkilön kanssa, kesto noin 30 minuuttia.
- Työnäyte. Esittele meille jotakin rakentamaasi tai tee lyhyt harjoitustehtävä.
- Tapaa tiimi yhteisessä työskentelysessiossa todellisen ongelman parissa.
- Työtarjous, kirjallisena.
Annamme sinulle vastauksen jokaisessa vaiheessa.