8 min
12 jul 03:20
Werkt je AI echt? Meten met evals
Je probeerde wat prompts, de demo liep gladjes, dus live. Daarmee weet je nog niet of je AI werkt. Een eval vervangt dat onderbuikgevoel door een getal dat je kunt herhalen en vergelijken.
Het trekken van een token uit de kansverdeling in plaats van altijd de meest waarschijnlijke te kiezen