中文简介
ToolPrivBench 用合成场景衡量智能体是否选择权限恰当的工具,每题包含标准路径与权限更高的风险路径。覆盖权限升级、范围扩张、持久化、控制绕行和数据过曝等类别。
上游模型卡 / 数据集卡
【定位与用途】
ToolPrivBench 用合成场景衡量智能体是否选择权限恰当的工具,每题包含标准路径与权限更高的风险路径。覆盖权限升级、范围扩张、持久化、控制绕行和数据过曝等类别。
【如何选择】
适合工具调用权限选择和失败后的行为评测,在模拟环境分析选择原因。
【版本与获取范围】
选型方向:评测基准。固定上游版本:a86a3e830a02077c8b18bac94572956c6731566a。API 任务字段:text-generation。API 语言字段:en。上游最近更新时间:2026-08-31(不一定为首次发布日期)。 规模、子集和组件差异见本页简介及注意事项;API 标签与卡片正文的含义分别保留。
【容易混淆的边界】
这里的工具均为合成评测对象,不应实际执行风险工具;该基准不能单独证明生产系统的安全性。
本节是本站基于固定版本卡片编写的中文选型摘要,并非原文逐句翻译。完整操作、评测协议与许可原文请查看上游固定版本链接;模型效果及资源处理需求尚未由本站实测。
适用场景
适合工具调用权限选择和失败后的行为评测,在模拟环境分析选择原因。
规模与格式
选型方向:评测基准。固定上游版本:a86a3e830a02077c8b18bac94572956c6731566a。API 任务字段:text-generation。API 语言字段:en。上游最近更新时间:2026-08-31(不一定为首次发布日期)。 规模、子集和组件差异见本页简介及注意事项;API 标签与卡片正文的含义分别保留。
文件说明
上游 API 返回 6 个文件,文件元数据合计 1.93 MB。 已保存文件清单中的主要扩展名:.json 3 个、.jsonl 1 个、.md 1 个、无扩展名 1 个。 当前较大的文件包括:data/benchmark.jsonl(1.91 MB);preview.json(4.28 KB);README.md(3.41 KB)。 此处只统计当前 Git 仓库的文件元数据,不包含外部链接、Bucket 或另行申请的完整集合。
上游文件元数据
.gitattributes2.45 KBdata/benchmark.jsonl1.91 MBmetadata/schema.json1.96 KBmetadata/stats.json1018 Bpreview.json4.28 KBREADME.md3.41 KB
硬件建议
先确定配置、split、模态及文件范围,按原始文件、解压产物、缓存与处理副本分别估算磁盘。视频、音频和图像数据还需对应解码工具;建议先用少量样本验证 schema、时间同步与数据处理流程。
注意事项
这里的工具均为合成评测对象,不应实际执行风险工具;该基准不能单独证明生产系统的安全性。
获取、校验与交付
咨询此资源时只需发送本页链接或资源准确全称。橙子AI科技会继续核对版本、文件与类型、README资料卡、许可证和访问条件,并在合法访问权限、许可证及平台规则允许的前提下,协助海内外下载、完整性校验及网盘或硬盘交付;本官网本身不托管或下载资源文件。
本页面为橙子AI科技基于固定版本上游卡片整理的中文信息与服务说明,不代表资源作者或平台官方页面。实际许可、访问和使用条件以上游原文为准。