A pozícióról
A Nexuson futó MI-ügynökök kárbejelentési feljegyzéseket rögzítenek, jóváíró számlákat készítenek elő és vámtételeket sorolnak be. Mindegyiket mérni és felülvizsgálni kell, a kijelölt keretek között tartva őket – méghozzá olyan mérőszámokkal, amelyeket a felügyeleti hatóságok is elfogadnak.
Ön felel majd a hiteles felülvizsgálat egyes részeiért, a modellek megbízhatóságát garantáló referenciakészletekért (golden sets), valamint azért, ahogyan a minőségről jelentést teszünk az ügyfeleknek.
Feladatok
- Ügynökök, képességek és modellek kiértékelésének megtervezése és futtatása.
- Különböző modellcsaládokat párosító ellenőrzési folyamatok (pipeline-ok) kiépítése.
- A felhasználók által jelzett hibás eredmények tartós tesztesetekké alakítása.
- Minőségi jelentések kialakítása az ügyfelek és auditorok által is ellenőrizhető formában.
- Együttműködés a platformmérnökökkel, hogy az ellenőrzések elég költséghatékonyak legyenek a gyakori futtatáshoz.
Elvárások
- Nyelvi modellek vagy gépi tanulási (ML) rendszerek kiértékelésében szerzett gyakorlati tapasztalat.
- Magabiztos Python-tudás és jó statisztikai ítélőképesség.
- Más mérnökök munkáját támogató eszközök fejlesztésében szerzett tapasztalat.
- Egészséges kételkedés az egyetlen kiragadott mérőszámokkal szemben.
- Világos, érthető íráskészség.
Előnyt jelent
- Szabályozott iparágban vagy a modellkockázat-kezelés területén szerzett tapasztalat.
- Emberi felülvizsgálati programokkal kapcsolatos tapasztalat.
- Az EU mesterséges intelligenciáról szóló rendeletének (AI Act) ismerete.
Amit kínálunk
Valódi felelősség egy komoly helyeken használt termékért, egy csapat, amely mindent írásban rögzít, és elegendő idő a munka alapos elvégzésére. Az írásbeli ajánlat tartalmazza a bérezést, a besorolási szintet és a juttatásokat.
A kiválasztási folyamat
- Első beszélgetés a felvételért felelős vezetővel, körülbelül harminc percben.
- Szakmai bemutatkozás. Mutasson be egy korábbi munkát, amelyet Ön épített, vagy oldjon meg egy rövid feladatot.
- Találkozás a csapattal egy közös munkamenetben, egy valós problémán dolgozva.
- Ajánlat, írásban.
Minden lépésnél visszajelzést adunk.