NVIDIA et Siemens évaluent les agents de conception de puces sur leurs fichiers finaux

Ce qui change

Un contrôle échoué annule la récompense. Les diagnostics ont guidé les révisions des skills et descriptions MCP, à modèle et harnais constants.

Source : NVIDIA Technical Blog Siemens NeMo Gym case study

Notre analyse

Point de vue du studio : pour un agent web, vérifier la page publiée et les liens plutôt que son message de fin. Comparer les résultats acceptés avant de réduire les appels d’outils.

À garder en tête

Petit benchmark de développement du fournisseur, pas une preuve générale de fiabilité ; nous ne l’avons pas reproduit.

Source : NVIDIA Technical Blog Siemens NeMo Gym case study