跳到正文
原文
Reddit r/LocalLLaMA (开源AI)· /u/failuremap-f·· 4 小时前AI 评分30

你的本地代码模型能修复这些边界 Bug 吗?Failure Map 开源 20,168 个 Python 调试任务

Can your local coding model repair these boundary-case bugs? Failure Map: 20,168 open Python tasks

AI 导读

开发者发布开源项目 Failure Map,包含 20,168 个 Python 调试任务,覆盖 254 个类别,每个任务附带标准库实现、显式契约、失败修复尝试和可执行的边界检查。作者尚未公布本地模型的实测结果,目前给出的三个程序基线(如 FA-001 修复后 1/3 通过)是程序执行结果而非模型分数,并呼吁对比测试时报告模型版本、量化、采样设置等完整信息。

来源:Reddit r/LocalLLaMA (开源AI) · reddit.com