跳到正文
返回论文列表
cs.AI提交于 已译

AgentSSL: MLE 智能体能否利用无标签数据?

AgentSSL: Can MLE Agents Leverage Unlabeled Data?

Ethan Lin · Akanksha Sarkar · Ziang Liu · Kristin Branson · Jennifer J. Sun

中文摘要

将机器学习系统应用到新领域时,标注数据获取与人工流水线工程都会形成瓶颈。近期 MLE 智能体在自动化流水线设计上展现出潜力,但几乎只在全监督设定下被研究,尚未在标注稀缺、无标签数据丰富的现实场景中检验。为此引入 Agentic Semi-Supervised Learning(AgentSSL),把半监督学习(SSL)表述为程序搜索问题,研究智能体在有限监督下如何探索该空间。结果显示,即便反馈微弱且计算量匹配,智能体也能合成代码,组合并适配已有 SSL 技术,在 12 个设定中的 8 个超过最强人工基线,最高提升 +21.8%。但程序选择是 AgentSSL 的关键瓶颈:按智能体反馈指标选择时性能最多下降 47%。为系统研究该瓶颈,提出 ProgramSelectBench,包含共 16,977 个智能体生成与人工设计的 SSL 程序,并评估无监督与主动程序选择方法。还在真实生态检测任务上评估 AgentSSL,揭示将智能体发现的策略迁移到受控基准之外的机遇与挑战。

关键要点

  1. 01现有 MLE 智能体研究几乎只覆盖全监督设定,缺少标注稀缺场景下的检验
  2. 02将半监督学习表述为程序搜索问题,智能体可组合适配已有 SSL 技术
  3. 0312 个设定中 8 个超过最强人工基线,最高提升 +21.8%
  4. 04程序选择是关键瓶颈,按智能体反馈指标选择时性能最多下降 47%
  5. 05提出含 16,977 个程序的 ProgramSelectBench,并在真实生态检测任务上评估迁移性

解读

尚无解读。

原始英文摘要

arXiv:2611.17323v1 Announce Type: new Abstract: Applying machine learning systems to new domains introduces bottlenecks in both labeled data acquisition and manual pipeline engineering. While recent MLE agents show promise in automating pipeline design, they have been studied almost exclusively in fully supervised settings, leaving them untested in realistic regimes where labeled data is scarce but unlabeled data is abundant. In this work, we introduce Agentic Semi-Supervised Learning (AgentSSL), framing SSL as a program search problem and studying how agents navigate this space under limited supervision. We find that even under weak feedback and matched compute, agents can synthesize code that combines and adapts established SSL techniques, exceeding the strongest human-engineered baselines in 8 of 12 settings by up to +21.8%. However, our results identify program selection as a critical bottleneck in AgentSSL, where performance drops by as much as 47% when selecting based on the agent's feedback metric. To systematically study this bottleneck, we introduce ProgramSelectBench, a large-scale benchmark with a combined total of 16,977 agent-generated and human-engineered SSL programs, and evaluate both unsupervised and active program selection methods. We further evaluate AgentSSL on real-world ecology detection tasks, highlighting the opportunities and challenges of transferring agent-discovered strategies beyond controlled benchmarks.

同方向论文 · cs.AI

查看全部 →

反向发现 · 这篇论文相关的工具与提示词

去交叉发现 →

关联工具 · 3

Reddit · r/artificial76

Anthropic 称 Claude Fable 5.2 调度 1000 多个子智能体,八天构建出可运行操作系统

Anthropic 在一项内部实验中让 Claude Fable 5.2 仅凭一个基础提示词和空项目文件夹,调度 1000 多个子智能体在八天内完成操作系统的编写、测试与审查,成品可在笔记本上启动,包含自研内核、硬件驱动、持久化文件存储、图形界面、登录界面和安装程序。

推荐理由:Anthropic 内部实验称 Claude Fable 5.2 调度千余子智能体八天写出可启动操作系统,同时点出算力成本与可靠性未披露。

Hacker News · 首页78

AgentRun 开源发布:为 Agent 加上自改进与持久执行

Parcha Labs 开源 AgentRun,在 Claude Code、Codex、OpenCode、pi 等 Agent harness 之上加入自改进、持久执行和控制面,采用 Apache-2.0 许可。

推荐理由:原文给出自改进、持久执行与控制面的具体机制和成本案例,读者可据此判断它如何接入现有 Agent 工作流。

Mistral AI71

Mistral 发布 Agents API

Mistral 推出新的 Agents API,将 Mistral 强大的语言模型与内置连接器(代码执行、网络搜索、图像生成、文档库)、MCP 工具支持、持久记忆和智能体编排能力相结合。SimpleQA 基准测试显示,加入 web search 后,Mistral Large 和 Mistral Medium 的得分分别从 23% 和 22.08% 提升至 75% 和 82.32%。

推荐理由:原文给出了 SimpleQA 基准测试的具体分数对比(有无 web search),读者可以据此评估搜索增强对模型实际能力的提升幅度。