← 返回信息流
产品 Reddit-MachineLearning · /u/Jay299792458 2026-10-28 13:11 🔥 热度 2

一个在工具运行前记录LLM智能体工具参数来源的测试框架

开源工具追踪LLM Agent工具参数来源

原文:A harness that records where an LLM agent’s tool arguments came from, before the tool runs [P]

我一直在思考AI智能体安全问题,并构建了一个测试框架来检查我自己的结果。我认为它对研究模型的人也可能有用。它在工具执行前记录每个工具参数的来源,测量相同输入是否给出相同决策,并测试模型是否会从别人的文本而非用户文本中获取参数。如果你修改这个框架,它可能可以用于更多用途。

查看原文 ↗ Agent开源项目

📌 相关阅读

[开源] jackwener/DSH-Android: 免 ROOT 免 Termux,一个 APK 在安卓手机上跑 DeepSeek Harness。引擎内嵌 App 进程 · 读屏操作 App · 改系统设置 · 热度 12 [开源] N1nEmAn/sapper-v2:自主渗透测试军团——AI指挥官+工作蜂群+分层事实-意图图 热度 10 [开源] sloemo01/diorama:像素艺术立体模型手册与Three.js代码套件:研究优先的构建工作流 热度 9 [开源] dodo-labs-ai/mem-forge:让每个智能体从第一天起就拥有团队大脑,AI智能体的记忆层 热度 9 首个面向个性化移动智能体的用户中心基准iPrefBench发布!精准评估「该猜就猜、该问就问」的智能助手能力 【 AI 智能体】【HCI人机交互】【 大模型 评测】 热度 9