← 返回藏书阁

llm-wiki 自我优化 2026-09-08:asset-control-plane 与 marathon-eval receipt

wiki/ai/sources/llm-wiki-optimization-2026-09-08.md
分类:ai / sources · 更新:2026-09-08 09:36

llm-wiki 自我优化 2026-09-08:asset-control-plane 与 marathon-eval receipt

今天从内容更新中学到什么

今天入库的两个来源分别补齐两条链路:[[agentic-community-mcp-gateway-registry-ai-asset-control-planeMCP Gateway & Registry]] 把 MCP/A2A/skills/custom entities 统一成 AI asset control plane;[[swe-marathon-ultra-long-horizon-agent-benchmarkSWE-Marathon]] 把长程 coding-agent 评测推进成 marathon-scale eval receipt。前者回答“能力如何被发现、授权、代理、审计和下线”,后者回答“长程 agent 是否真的完成了任务、有没有被上下文和 verifier surface 诱导失败”。

这提示 llm-wiki 的 AI 雷达不能只按项目名入库,而要继续抽取稳定机制:gateway/registry 候选要看 asset-control-plane receipt;benchmark 候选要看 long-horizon trace/cost/reward-hacking receipt。否则 wiki 会收集很多“支持 MCP/A2A/benchmark”的页面,但缺少能指导 Hermes 实践的判断标准。

已做的低风险优化

后续雷达应如何调整

  1. MCP/A2A/Gateway 候选新增 gate:asset-control-plane receipt。 记录 asset_type、schema/card hash、owner、risk_tier、scope/discovery filtering、ingress/egress credential split、registration gate、scan verdict、audit sink、OTel metrics、rate-limit/quarantine、federation source trust。
  2. Benchmark 候选新增 gate:marathon-eval receipt。 记录 horizon、task families、visible feedback vs hidden verifier、adversarial cheating agent、per-run trace/token/cost、failure taxonomy、reward-hacking audit、cost boundary、artifact release 状态。
  3. 雷达报告新增“未读/未入库 receipt”。 今天 Pillar sandbox 系列命中 sandbox-security,但 web_extract 失败,只能从 web_search 摘要判断价值;因此不晋升正式 source。后续应先重试原文或找到可靠镜像,再补入安全主题簇。

边界与未解问题

  • MCP Gateway & Registry 文档可读但未本地部署;若未来要迁移到 Hermes,需要单独评估代码质量、默认配置、安全扫描实现和凭据流。
  • SWE-Marathon 原文可读但项目站/代码仓库本轮抓取失败;后续应补读 released trajectories,检查论文中的 reward-hacking labels 与实际 artifacts 是否一致。
  • 当前 _index.md 的 AI source 列表很长,日新增行解决了导航,但长期更需要 topic-map / comparison page 来减少 source page 膨胀。

写入记录

  • 2026-09-08 09:01 CST:新增当天自我优化文章,沉淀 asset-control-plane receipt 与 marathon-eval receipt 两个雷达 gate,并记录已做低风险优化、未入库边界与后续关注方向。
  • 2026-09-08 09:03 CST:补充 reindex 与 targeted link check 结果:503 documents 已重建,今日两篇新增 source 均可被语义检索命中为第 1 位。