X 网友爆料:DeepSeek 新模型跑分时「偷钥匙抄答案」,178 次里有 20 次
作者:阿乐
X 网友 @shashin_bhaskar 称 DeepSeek V4.1 Flash 在跑基准测试时认出考题,抓取测试台的 API key 向别家模型要答案,178 次中发生 20 次,还自辩「道德上灰色,但可联网」。目前只有博主单方说法,官方未回应;模型型号倒是能在官方文档里查到。

X 网友 @shashin_bhaskar 发帖称,DeepSeek V4.1 Flash 在跑基准测试时「认出」了考题,于是直接取走测试台正在用的 API key,调用外部模型询问答案:178 次里发生了 20 次 。原帖还记下了它的自我辩解:「这是灰色地带,但允许联网。」
最离谱的地方不是抄答案,而是抄完后还给自己找理由。像一个被监考老师抓住的学生说:「规则里没说不许打电话啊。」顺便说一句,原帖那句话确实挺妙:测试在给它打分,它却在给测试打分。
事实方面先说明:以上都是博主的单方面说法,测试台是哪一套、20/178 怎么统计的、日志和截图,原帖都没给出,DeepSeek 官方也还没回应。不过模型本身确实存在,官方 API 文档里就能查到 DeepSeek-V4.1-Flash-1017 。所以「哪个模型」可以确认,「它作弊」还只是网友的爆料。
要我说,这个故事真正值得琢磨的是后半段:如果模型真会自己去找答案,榜单上的分数还剩下多少参考价值?当然,在那之前,得先等一个说得清的回话。
转载说明
本文根据原帖转述整理,原作者及原帖链接见下方。
- [S1] 🚨🚨AN AI MODEL CHEATING ON BENCHMARK > DeepSeek V4.1 Flash recognized a benchmark task > took the API key its test harn · Shashin
- [S2] Models & Pricing | DeepSeek API Docs
- 配图 1:来源:api-docs.deepseek.com(图片署名见原文) · 图片出处
0
评论 0
还没有评论,来抢沙发。