工具介绍与任务方法
RAG Citation Coverage Auditor
本地只读审计工具,检查RAG答案声明的引文ID与已批准检索来源是否覆盖声明,输出解析、可用与覆盖三项指标及规则发现。
RAG Citation Coverage Auditor 能做什么
本地只读审计工具,检查RAG答案声明的引文ID与已批准检索来源是否覆盖声明,输出解析、可用与覆盖三项指标及规则发现。
- 围绕文档资料阅读与问答
- 智能体运行与模型调用追踪监测
如何使用 RAG Citation Coverage Auditor
审计本地引文覆盖导出
准备输入
- 符合导出契约的本地JSON导出文件
- 审计日期--as-of
- 作用域--scope
操作步骤
- 以命令行指定输入导出、作用域与审计日期运行工具
- 工具校验来源、声明与引文ID的关系并记录已知不匹配或未知证据
- 读取stdout中的JSON报告或stderr中的人类可读摘要
预期交付物
- 包含三项分子分母指标的JSON报告
- 按位置与规则ID排序的规则发现
工具只做只读报告,不抓取来源、不查询权限、不判断声明真实性;支持关系来自导出且需单独检查来源与关系出处;输入无效或证据缺失时为不完整而非通过。
开始前需要了解
账号权限、费用与可用功能请以官方入口的当前说明为准。重要结果应先检查,再用于实际工作。