DeepSeek版o1炸场,数学代码超越OpenAI,每天免费玩50次,后续将开源

来源:量子位

DeepSeek版o1来了,发布即上线,现在就能玩!

c10b7c350485baa660665ea89baf60f3.png

模型名为DeepSeek-R1-Lite预览版在难度较高数学和代码任务上超越o1-preview,大幅领先GPT-4o等。

96f4f911d5b0a5c07f1e5371e0c2cf34.png

据了解,DeepSeek-R1-Lite使用强化学习训练,推理含大量反思和验证,遵循新的Scaling Laws——

推理越长,表现更强。

如下展示,在AIME测试基准中,随着计算时间增加,其得分稳步提升。

dcebc4e7c3f9e91c5db493dff70e5aea.png

值得一提的是,官方还表示,目前模型仍在开发阶段,经持续迭代,正式版DeepSeek-R1模型将完全开源,包括公开技术报告并提供API。

a2386cbacd5796d0f1129a22812d0872.png

这下网友们纷纷坐不住,已齐刷刷码住开始实测了。

网友实测在此

登录官方网页,打开深度思考按钮,就能体验DeepSeek-R1-Lite预览版

每天有默认50次的免费使用。

feedd285ae5303893462d3b8f918035e.png

下面这位小哥让模型破解如下密码:

9 2 8 5 (一个数字正确但位置错误)

1 9 3 7 (两个数字正确但位置错误)

5 2 0 1 (一个数字正确且位置正确)

6 5 0 7 (没有数字正确)

8 5 24 (两个数字正确但位置错误)

190e33da8edc7d4d8494e8e828162d5d.png

没成想OpenAI o1-preview在这个测试中答错了(3289),而DeepSeek-R1-Lite-Preview推理正确,直接给出了正确答案3841。

a3d8a7a1be67bd8d29b62aa28c816fb9.png

还有网友来了个系统性测试,一通体验后感觉是:

数学能力:该模型在数学推理问题上看起来很有效。基准测试结果确实反映了模型在数学推理能力上的潜力。这是一个值得密切关注的模型。

编码任务:在解决编程问题时,表现稍显不足。例如,在生成用于转置矩阵的bash脚本这样的简单代码问题上,它未能成功解决,而o1模型可以轻松解决。

复杂知识理解:我还尝试了在一个更难的字谜游戏上测试它,但它表现得非常糟糕。公平地说,即使o1模型在这个需要现代知识引用的测试中也同样表现不佳。

b55b43121ad7de34754c3b8d4f5bac5e.png

以下是这位网友的详细测试:

这位网友最后还补充道:

我认为该模型在代码和数学任务上表现出色,这可能得益于DeepSeek团队在这些领域的明确优化。然而,在“推理”步骤上仍有改进空间。

在某些情况下,模型似乎能够在生成推理步骤时自我纠正,表现出类似原生“自我反思”的能力。不过,没有训练数据、模型架构和技术报告/论文的细节,很难确认这一点。

期待未来的开源模型和API!

除此之外,也有网友在测试中发现,模型玩井字棋(tic tac toe)还是不太行。

02cb922e02e7e6416ebbdb14bce3843f.png
87c17c17bd538e802066f65a0a68aa08.png

不过,有网友反馈现在的一些新模型能够稳定地玩这个游戏,但不能在第一次尝试时就成功。

如果继续尝试,它们实际上可以画出正确的结果。

74d3d5a3ba7fc49a4286348df9de0f42.png

好了,感兴趣的童鞋赶紧自己实测一波吧~

官网:https://chat.deepseek.com/

参考链接:
[1]https://x.com/deepseek_ai/status/1859200141355536422
[2]https://x.com/_philschmid/status/1859203470059811298
[3]https://x.com/omarsar0/status/1859373413439066590

3e46d9e2e259b6615ce1bb9c85a0caca.gif·················END·················

分享

收藏

点赞

在看

078c06de7ba3d8400f0613be9657ab01.gif

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值