AI能取代程序员吗?

AI能取代程序员吗?

Devin

  • 这是一个据称可以替代programmer工作的一个AI平台,从演示看,像是一个结合了RAG的chatgpt加上自动化平台。 然后给出了一个新的模型参数, reasoning 都远超过现有的大模型。

但是我一直理解不了,按道理现在的大模型都是基于transformer, transformer基于attention, 训练的参数主要是提取的attention影响权重。正常的public数据里面能反应的应该的正常水平的attention权重, 但是reasoning是不寻常的,一个复杂的reasoning往往是将看似没有关联的信息联系起来,这个应该正好和attention的训练目标相反。 复杂的reasoning是少数人的游戏,并不适合大多数人,那样即使要训练,正常也应该取少数人的样本数据来训练,但是这样的数据量不足以支持数十亿的参数训练。

所以我一直觉得, 如果要让chatgpt拥有高于常人的reasoning, 目前应该不是transformer为基础的模型能解决的.

  • 5
    点赞
  • 10
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值