Décider quelles phrases sont des affirmations, c'est le plus difficile
Les outils de fact-checking échouent de l'une de deux façons. Ils ne vérifient rien d'important, ou ils exigent une source pour chaque phrase, y compris des énoncés du type « beaucoup d'équipes trouvent cela frustrant ». Dans les deux cas, le rédacteur arrête de lire le rapport.
Le travail utile se fait avant toute vérification. Vous décidez quels énoncés sont des affirmations vérifiables, lesquels ne sont que des cadres ou des opinions, et lesquels ont besoin d'une source primaire plutôt que de n'importe quelle source qui les répète. Ce classement est un jugement sur la langue. C'est là qu'un agent montre sa valeur.
Le second critère est le poids. Une réserve peut rester sur un commentaire latéral invérifiable. Si tout l'argument repose sur une affirmation invérifiable, cette affirmation ne peut pas rester. Vous ne voyez pas cette différence à partir de la phrase seule.
Le résultat est trois listes. La liste du milieu contient les affirmations qui n'ont pas pu être confirmées. Cette liste du milieu est le livrable.
Comment l'agent est construit dans Agent Studio
Le prompt système fixe ce qui compte comme une affirmation et ce qui compte comme assez de preuves. Un secteur réglementé et un blog de développeurs n'utilisent pas les mêmes seuils. Cette différence appartient au prompt.
Les prompt skills portent la politique de preuve. La politique précise quels types de sources comptent comme primaires, de quelle fraîcheur une source a besoin, et qu'une affirmation répétée par trois sources secondaires reste traitée comme non vérifiée.
La récupération vient des connexions MCP. Sans elles, l'agent pourrait trier mais pas vérifier. C'est encore utile, mais ce n'est que la moitié du produit.
L'agent n'altère ni ne supprime jamais une affirmation. Si une affirmation est marquée comme porteuse de l'argument, le drapeau signifie qu'une personne doit décider avant publication. Cette frontière est voulue, car si un agent qualifie une phrase en silence, il a changé votre argument sans vous le dire.
Les preuves sont conservées, pas seulement le verdict. Au bout de six mois, la question est rarement « est-ce que ça a passé » mais « qu'est-ce qu'il a regardé ». Seules les preuves conservées peuvent y répondre.
Le nœud Agent Chat permet à un ActionFlow d'appeler cet agent, si bien que la vérification s'inscrit dans le processus de publication plutôt que de dépendre de quelqu'un qui s'en souvient.
De quoi cet agent est constitué
- System prompt : ce qui compte comme une affirmation et ce qui compte comme assez de preuves dans votre domaine.
- Prompt skills : la politique de preuve, y compris la fraîcheur des sources et les règles de source primaire.
- Connexions MCP : la récupération, sans laquelle l'agent peut trier mais pas vérifier.
- Service et modèle : raisonnement soigneux ; les erreurs de cet agent sont coûteuses et silencieuses.
- Agent Chat (Util) : place la vérification à l'intérieur d'un flux de publication plutôt qu'à côté.
- Human in the Loop : chaque affirmation porteuse non vérifiée exige la décision d'une personne.
- Quand un ActionFlow suffit : Si vos affirmations sont toujours les mêmes chiffres produit, un flux de travail de consultation contre la source de référence est plus fiable que n'importe quel agent.
Questions fréquentes
Newsletter
Recevoir les mises à jour produit
Nouveaux nœuds, agents et notes produit. Nous n'envoyons un e-mail que lorsqu'il vaut la peine de l'ouvrir.