CompactifAI

trains using text tasks, multi-step agent trajectories, images, and video, followed by GRPO post-training for agent tasks

“De training gebruikt teksttaken, meerstaps agenttrajecten, beeld en video, gevolgd door een GRPO-natraining voor agenttaken.”

restores performance through distillation from the original Nemotron model

“en herstelt prestaties met distillatie vanuit het oorspronkelijke Nemotron-model.”

removes selected parameters after identifying weights that carry little additional information

“CompactifAI zoekt eerst waar gewichten weinig extra informatie dragen, verwijdert daarna geselecteerde parameters”