Om stillingen
KI-agenter i Nexus registrerer skadenotater, skriver utkast til kreditnotaer og klassifiserer varelinjer for toll. Hver enkelt må måles, gjennomgås og holdes innenfor sine rammer, og målingene må kunne godkjennes av tilsynsmyndigheter.
Du får ansvar for deler av redelighetskontrollen, referansesettene som holder modellene etterrettelige, og hvordan kvalitet rapporteres til kundene.
Hva du skal gjøre
- Utforme og kjøre evalueringer for agenter, ferdigheter og modeller.
- Bygge kontrollflyter som kombinerer modeller fra ulike familier.
- Gjøre dårlige resultater innmeldt av brukere om til varige testcaser.
- Rapportere kvalitet på en måte som kunder og revisorer kan etterprøve.
- Samarbeide med plattformingeniører for å gjøre kontrollene rimelige nok til at de kan kjøres ofte.
Kvalifikasjoner
- Praktisk erfaring med evaluering av språkmodeller eller maskinlæringssystemer.
- Sterke Python-ferdigheter og god statistisk dømmekraft.
- Erfaring med å bygge verktøy som andre ingeniører er avhengige av.
- Sunn skepsis til enkelttall.
- Evne til å skrive klart og tydelig.
En fordel om du har
- Erfaring fra en regulert bransje eller arbeid med modellrisiko.
- Erfaring med programmer for menneskelig gjennomgang.
- Kjennskap til EUs KI-forordning (AI Act).
Hva vi tilbyr
Reelt eierskap til et produkt som brukes på viktige steder, et team som dokumenterer arbeidet skriftlig, og tid til å gjøre jobben ordentlig. Det skriftlige tilbudet fastsetter lønn, nivå og goder.
Slik ansetter vi til denne rollen
- En første samtale med rekrutterende leder, rundt tretti minutter.
- Arbeidet ditt. Vis oss noe du har bygget, eller løs en kort oppgave.
- Møt teamet i en arbeidsøkt rundt en reell problemstilling.
- Et tilbud, skriftlig.
Vi gir deg svar på hvert trinn i prosessen.