Prompt engineering: komplet guide
Prompt engineering er disciplinen omkring at designe, teste og forbedre de instruktioner og kontekster, der får en model til at løse en bestemt opgave stabilt. I praksis handler det mere om test og informationsdesign end om magiske formuleringer.
Det skal du kunne bagefter
- afprøve metoden og kontrollere, om dine testcases også dækker fejl og særlige grænsetilfælde
- genkende og undgå fejlen: “vurdere prompten ud fra ét flot eksempel”
Kort svar: Prompt engineering er disciplinen omkring at designe, teste og forbedre de instruktioner og kontekster, der får en model til at løse en bestemt opgave stabilt. I praksis handler det mere om test og informationsdesign end om magiske formuleringer.
Prompt engineering handler om systematisk forbedring
Prompt engineering bliver først værdifuldt, når det behandles som design af en arbejdsproces: du opstiller en opgave, tester den på flere cases, måler fejl og ændrer én ting ad gangen.
Fra første udkast til en testbar prompt
En supportafdeling vil klassificere henvendelser. De laver et testsæt på 50 historiske supportsager, definerer en fast kategoriliste, giver eksempler på svære cases og måler fejlrate før prompten sættes i drift.
Arbejd i iterationer med faste eval-kriterier
- 1. Definér opgaven og den fejltype, der er dyrest.
- 2. Lav et lille repræsentativt testsæt før du finjusterer prompten.
- 3. Design input- og outputskema, så resultater kan sammenlignes.
- 4. Tilføj eksempler dér hvor kategorier eller grænser er svære at forklare abstrakt.
- 5. Kør testen, noter fejltyper og ændr kun én variabel ad gangen.
- 6. Gem promptversion, testresultat og kendte begrænsninger.
Undgå prompt-teater og overdesign
- At vurdere prompten ud fra ét flot eksempel.
- At skifte model, prompt, temperature og input samtidig og derfor ikke vide hvad der forbedrede resultatet.
- At måle “lyder godt” i stedet for korrekthed, komplethed eller faktisk arbejdsbesparelse.
Lav et lille eval-sæt
Vælg en gentagen opgave og lav 10 realistiske inputcases. Skriv på forhånd, hvad der tæller som godkendt output, før du tester AI.
Mål stabilitet – ikke kun det bedste svar
- Har du cases der også repræsenterer fejl og særlige grænsetilfælde?
- Kan output valideres manuelt eller maskinelt?
- Er promptversionen dokumenteret?
Fortsæt med chaining, few-shot og evaluering
Spørgsmål om emnet
Hvad er hovedpointen i “Prompt engineering: komplet guide”?
Prompt engineering er disciplinen omkring at designe, teste og forbedre de instruktioner og kontekster, der får en model til at løse en bestemt opgave stabilt. I praksis handler det mere om test og informationsdesign end om magiske formuleringer.
Hvordan kan jeg øve det?
Vælg en gentagen opgave og lav 10 realistiske inputcases. Skriv på forhånd, hvad der tæller som godkendt output, før du tester AI.
Hvilken fejl bør jeg især undgå?
At vurdere prompten ud fra ét flot eksempel.
Hvornår er min løsning god nok til at bruge?
Brug disse kontrolspørgsmål: Har du cases der også repræsenterer fejl og særlige grænsetilfælde? Kan output valideres manuelt eller maskinelt? Er promptversionen dokumenteret?