Zero-shot prompting
Zero-shot prompting løser opgaven uden demonstrationseksempler. Det fungerer godt, når instruktionen og kategorierne er selvforklarende, men bør testes før du antager at et eksempel er overflødigt.
Det skal du kunne bagefter
- afprøve metoden og kontrollere, om opgaven er objektivt beskrevet
- genkende og undgå fejlen: “bruge zero-shot til subjektive kategorier uden definition”
Kort svar: Zero-shot prompting løser opgaven uden demonstrationseksempler. Det fungerer godt, når instruktionen og kategorierne er selvforklarende, men bør testes før du antager at et eksempel er overflødigt.
Start uden eksempler, når opgaven er tydelig nok
Zero-shot er et godt udgangspunkt, når opgaven er klar nok til at kunne beskrives direkte. Start enkelt; tilføj først eksempler eller mere kompleks prompting, når du kan se en konkret fejl, de skal løse.
Eksempel: klassifikation med et klart skema
“Udtræk virksomhedsnavn, dato og total fra denne fakturatekst og returnér JSON” kan ofte startes zero-shot, fordi felterne er konkrete. Edge cases som kreditnotaer kan senere kræve eksempler.
Gør instruktionen testbar før du tilføjer demonstrationsdata
- 1. Formulér opgaven og outputformatet præcist.
- 2. Definér labels eller felter entydigt.
- 3. Angiv hvad modellen skal gøre ved manglende data.
- 4. Test på både normale cases og særlige grænsetilfælde.
- 5. Tilføj først few-shot-eksempler, hvis du kan se et tilbagevendende fejlmønster.
Når zero-shot bliver for åbent
- At bruge zero-shot til subjektive kategorier uden definition.
- At lade blanke felter blive udfyldt med gæt.
- At tilføje eksempler uden at vide hvilken fejl de skal løse.
Prøv samme opgave uden eksempler
Test en ekstraktionsopgave zero-shot på 20 cases. Notér præcist hvilke felter og dokumenttyper der fejler, før du tilføjer eksempler.
Sammenlign fejltyper – ikke bare formulering
- Er opgaven objektivt beskrevet?
- Er fallback for ukendte værdier defineret?
- Ved du hvorfor du eventuelt tilføjer few-shot senere?
Tilføj few-shot først når testen viser behovet
Spørgsmål om emnet
Hvad er hovedpointen i “Zero-shot prompting”?
Zero-shot prompting løser opgaven uden demonstrationseksempler. Det fungerer godt, når instruktionen og kategorierne er selvforklarende, men bør testes før du antager at et eksempel er overflødigt.
Hvordan kan jeg øve det?
Test en ekstraktionsopgave zero-shot på 20 cases. Notér præcist hvilke felter og dokumenttyper der fejler, før du tilføjer eksempler.
Hvilken fejl bør jeg især undgå?
At bruge zero-shot til subjektive kategorier uden definition.
Hvornår er min løsning god nok til at bruge?
Brug disse kontrolspørgsmål: Er opgaven objektivt beskrevet? Er fallback for ukendte værdier defineret? Ved du hvorfor du eventuelt tilføjer few-shot senere?