Concept

LLM-as-a-judge

techniek waarbij een sterker model de output beoordeelt

Nieuws· 1

AWS bewaakt productie-agents met Evaluations en DevOps Agent

Nieuws

5 min

11 sep 22:11

AWS bewaakt productie-agents met Evaluations en DevOps Agent

AWS koppelt live kwaliteitsmetingen voor productie-agents aan geautomatiseerd oorzaakonderzoek. AgentCore Evaluations scoort een steekproef van interacties asynchroon, terwijl DevOps Agent IAM-, CloudWatch- en runtime-sporen samenbrengt bij incidenten.

Uitgelegd· 1

Uitgelegd

8 min

12 jul 03:20

Werkt je AI echt? Meten met evals

Je probeerde wat prompts, de demo liep gladjes, dus live. Daarmee weet je nog niet of je AI werkt. Een eval vervangt dat onderbuikgevoel door een getal dat je kunt herhalen en vergelijken.