程序猿进阶

然后就是强化学习的部分，还是提出问题，让SFT模型生成多个答案，不同是的是，之前是人类来排名，现在交给奖励模型打分，如果对一个答案分数比较高，则这个答案的所有token都会强化，就是概率会增加，而如果分数比较低，则所有的token出现的概率会降低。ChatGPT出来的时候，我就很好奇它是怎么做到的，又是怎么突然出现的，所以我搜集了一些资料，在这里跟大家交流一下，因为我也不是专业的，所以也没法讲得很深入，当然可能也有错误的地方，希望大家可以指出。再进一步，我们可以调整a/b/c的值，可以更加接近这些数据。

成为优秀的架构师是大部分初中级工程师的阶段性目标。优秀的架构师往往具备八种核心能力：编程能力、调试能力、编译部署能力、性能优化能力、业务架构能力、在线运维能力、项目管理能力和规划能力。这几种能力之间的关系大概如下图。编程能力、调试能力、编译部署能力属于最基础的能力。不能精通掌握这三种能力，很难在性能优化能力和业务架构能力方面有所成就。具备了一定的性能优化能力和业务架构能力之后，才能在线运维能力和项目管理能力方面表现优越。团队管理能力是最高能力，它对项目管理能力的依赖度更大。一、编程能力对工程师.