検索に戻る
案件記録
一种面向异构智能体任务轨迹的可用证据归一化评测指标构建与评分方法及系统
発明不明
10請求項 · 3 独立
§ Ⅰ
案件概要
IPC分類
G06F 18/21 (2023.01)G06F 18/15 (2023.01)G06F 18/2433 (2023.01)G06F 18/25 (2023.01)G06F 18/22 (2023.01)G06N 3/006 (2023.01)G06N 3/0455 (2023.01)G06N 5/04 (2023.01)G06N 5/045 (2023.01)
本发明提供一种面向异构智能体任务轨迹的可用证据归一化评测指标构建与评分方法及系统。所述方法包括:由基准的适配器执行任务并返回异构原始日志并将其转换为统一日志;由所述统一日志抽取试验记录,由智能体产出的协议日志生成派生证据产物,所述派生证据产物包括规范化任务轨迹;将任务执行过程划分为规划阶段、执行阶段以及验证与交付阶段,并针对每个阶段分别构建指标卡;聚合得到规划阶段、执行阶段以及验证与交付阶段的三阶段规则分,计算过程总分、过程诊断分和整体置信度;将所述三阶段规则分与真实任务结果分、多结果来源一致性分执行结果锚定,得到结果锚定总分。本发明能够显著提高过程评测的可解释性。
ログインして全文を読む
請求項 1 を表示しています。無料登録で全 10 項の請求項、明細書全文、全図面、翻訳、法的状態を閲覧できます。
- 全請求項
- 技術分野
- 背景技術
- 発明の概要
- 図面の説明
- 発明を実施するための形態
外部リソース