Prompt drift

Prompt drift · Tekoäly

Lyhyesti

Tilanne, jossa saman promptin tuotokset heikkenevat ajan myota muuttuvan kontekstin tai mallin takia.

Prompt drift tapahtuu, kun aiemmin hyvin toiminut prompti alkaa tuottaa epätasaisia tai huonompia tuloksia. Syina voi olla mallipaivitys, datan muutos, uusi domain-konteksti tai liian laaja syote. Driftia vastaan auttaa säännöllinen evalointi, versioitu promptikirjasto ja mittarit, joilla laatu nähdään trendinä, ei yksittäisenä onnistumisena.

Esimerkkejä

Sama prompti tuottaa eri viikolla eri laatua ilman selkeaa syyta

Uusi datalähde sotkee aiemmin toimineen vastauksen rakenteen

Mallin paivitys heikentaa tietyn tehtavaluokan tuloksia