Reddit · r/LocalLLaMA· /u/failuremap-f·· 6 天前AI 评分56
Failure Map 发布:20,168 个开源 Python 边界调试任务
Can your local coding model repair these boundary-case bugs? Failure Map: 20,168 open Python tasks
AI 导读
Failure Map 是一个包含 20,168 个 Python 调试任务的数据集,涵盖 254 个类别,提供标准库实现、明确合约、失败修复尝试和可执行边界检查。数据集附带方法论,测试者需报告模型版本、量化参数、提示词、采样设置、种子值、每个任务的尝试次数和通过计数。
来源:Reddit · r/LocalLLaMA · reddit.com