强化学习曾小健

Lex Fridman，生于1983年8月15日，是一位俄罗斯裔美国计算机科学家和播客主持人。他主持Lex Fridman播客，在播客中他采访科学、技术、体育和政治等各个领域的知名人士嘉宾。Fridman于2018年开始了他的播客，并于2019年声名鹊起，此前他与人合著了一项未经同行评审的研究，该研究得出结论，驾驶员在使用特斯拉的半自动驾驶系统时保持专注，该系统得到了埃隆·马斯克的积极回应，但受到了人工智能专家们的批评。

闫俊杰：过程很痛苦，失败了两次。因为我们本来就有很多不确定性，做新东西又增加了不确定性，它就应该遇到挑战。比如模型训了半个月，发现一些指标离前期估测的越来越远。就像你发了一个火箭，本来以为它可以到三万米，但它偏航了。你就开始想哪个地方错了，把问题解完之后，发现还没有回到一个好的状态，又失败了。但你得到了很多经验，把经验汇聚起来，再来一次。每一次都是很多钱，更重要的是时间。我后来发现其实这也不是赌，因为很多挑战不是 MoE 本身带来的，而是更多底层的东西：比如对实验方法、网络和数据结构的探索等等。

原创 安然 深网腾讯新闻 2024-04-10 14:02 北京来源：视觉中国作者丨安然 编辑丨虞尘出品丨深网·腾讯新闻小满工作室AI光年/追踪中国AGI崛起之路Kimi走红，最大的压力将给到百度。因为Kimi的背后，已站着阿里的身影。 就在国内大模型竞争处于焦灼状态时，创业公司月之暗面却靠着kimi智能助手的“200万字长文本”率先出圈，甚至还催生了“Kimi概念股”。 Kimi的优势仅领先一个星期。随着阿里通义千问、百度文心一言等宣布免费开放200万—500万甚至1

原创 花哥福建关注我，关注Ai大模型的全部信息！8篇原创内容公众号大模型发展竞争愈发激烈。全球瞩目的文生视频Sora、谷歌Gemini 1.5、Meta的V-JEPA以及超越GPT4的Claude3相继发布。Open AI的GPT5也即将问世。奥特曼不仅自研芯片，还投资可控核聚变公司，以算力和能源为未来储备关键资源。

在Claude 3模型中，增加了一个额外的原则到Claude的宪法中，以鼓励尊重残疾人权利，这一原则源自对集体宪法AI的研究。Claude 3模型的训练基于专有的混合数据集，包括截至2023年8月互联网上公开可用的信息，以及第三方提供的非公开数据、数据标注服务和付费承包商提供的数据，还有内部生成的数据。这些初始响应通常包含有害和有毒的内容。Claude 3模型家族在推理、编码和问答任务上展现出卓越的性能，特别是在行业标准基准测试中取得了显著的提升，证明了其在处理复杂问题和提供准确答案方面的能力。

Jassy 在股东信里提到，在生成式 AI 方面，向 Amazon SageMaker 添加了数十种功能，以便开发人员更轻松地构建新的基础模型（“FM”）；借助他的影响力，百度中美人工智能团队增长到了 1300 人，AI 也逐渐应用到各个业务层面，确立了探索无人驾驶、自然语言处理和语音交互等底层技术的大方向。尽管未能打造出与 ChatGPT 正面抗衡的消费级生成式 AI 产品、消费者和整个市场普遍认为亚马逊在 AI 领域已然落后，Jassy 仍信心满满地表示，该公司将成为下一轮技术竞赛的主要参与者。

GenAI X土耳其AI明星创业公司购买英伟达GPU，估值迅速增长，但实际投入与收入之间存在巨大差距。高成本和技术发展之间的平衡成为AI行业的讨论焦点……成立不到半年，估值达到20亿美元！AI程序员Devin的母公司杀疯了。Cognition AI正式成立于2023年底，种子轮融资估值就已经高达3.5亿美元！Cognition Labs的团队创始团队的10枚IOI金牌的「含金量」恐怖如斯。而在产品首个版本上线几周之后，他们就火速展开下一轮融资，并且估值一下就翻了6倍。

这背后，是公司营收和净利润的大幅增长，2023年营收同比增长11%，达到107亿元，净利润更是飙升78%，达到创纪录的21亿元。为此，他积极利用硅谷的团队、资金和技术，并将其与国内的人才和制造优势结合，在北美竞争对手的夹击中，找到差异化的求生之道。2011年前后，随着云计算的兴起，以谷歌为代表的大厂，开始大规模建设数据中心，全世界对40G高速光模块的需求激增。但刘圣儒雅的外表下，涌动着一颗不安分的心，美国工作期间，他和自己的同伴，看到了光模块产业向亚洲转移的大趋势。但做高端产品，意味着大量的研发投入。

我们意识到，那种你提出一个问题，然后立即从 AI 得到一个答案的聊天式体验，更有可能是与 AI 互动的最佳方式，而不是 Quora 的发布提问等待回答的模式。作为 Meta 的前 CTO，Quora CEO Adam D'Angelo 目前还是 OpenAI 的董事会成员，在 Quora 之外推出的 Poe，成为当下接入大模型最多的 Chatbot 平台：GPT-4、Claude3、Mistral 等模型都有，用户也可以在上面搭建自己的 Chatbot 机器人，如果有别的用户使用，还可以产生收益。

比如，训练DBRX系列中较小的成员DBRX MoE-B（总参数为23.5B，活跃参数为6.6B）所需的Flop比LLaMA2-13B少1.7倍，才能在Databricks LLM Gauntlet上达到45.5%的得分。而Databricks的员工激动地表示，过去3个月，朋友们周末约我都说「不行，这周不行我有事，但是又不能说有啥事」的日子终于结束了，DBRX就是我们加班加点搞出来的一头「怪兽」。在租用的3072个强大英伟达H100 GPU上训练模型两个月后，DBRX在多个基准测试中已经取得了卓越的成绩。

比如，那些知识是模型允许生成的，哪些知识是模型不允许生成的，类似于检索模型Rag，用来对数据文本进行分类、定级，决定什么样的内容适合做什么样的推理运算。所有现有的发明、创新、AI应用都可以追溯到你们刚刚发布Transformer的时候，以一种有序的方式从海量数据集（包括有序数列和空间数列）中进行学习，找到各数据组之间的关系和运行模式来设计算法模型是一件极具变革意义的事情，你们也是这方面的专家。因此，我们认为对这一进展的衡量，也是创意的一种方式，是科学发展的一种方式，也是我们自动化发展的一种方式。

ChatGPT是由OpenAI在阿尔巴尼亚出生的远见卓识首席执行官Mira Murati的领导下开发的，决定采用ChatGPT，标志着加快整合进程的战略举措。阿尔巴尼亚政府正在开拓ChatGPT的创新应用，不仅将其用于促进欧盟一体化，还计划通过电子政务平台，利用AI优化公共服务，提高政府治理效率。该倡议旨在加速该国的欧盟加入进程，因为该国已在欧盟等候室等待了14年之久，并且对欧盟东扩进程中的萎靡不振感到越来越沮丧。推迟至2022年夏。他强调，此举可节省大量翻译和法律专家费用，加快整合进程，节省数百万欧元。

订阅Perplexity的Pro计划（每月20美元）的用户可以切换模型——目前轮换的模型包括谷歌的Gemini、Mistra 7Bl、Anthropic的Claude 2.1和OpenAI的GPT-4——并解锁功能，如图像生成；毕竟，人工智能并不是最好的总结工具，有时会遗漏关键细节，误解和夸大语言，或者以非常权威的方式编造事实。根据该公司的服务条款，客户同意“使Perplexity免受”因使用其服务而产生的索赔、损害和责任的影响——这意味着在涉及法律费用的问题上，Perplexity不负责任。

以下文章来源于Super黄的念想 ，作者Super黄最近两周见了小20个创业者，基本在聊到AI陪伴类产品时，每个人都会问我，你写Character.ai很好，那你怎么看星野、Talkie？会从这三个部分展开：产品框架与分析用户洞察与定位商业模式与创新1. 星野成功的关键在于利用多模态技术，打造沉浸式的AI虚拟社交体验，抓住了以国产乙女游戏用户群为核心的市场需求。2. 星野的商业收入并不是北极星指标。3.，需要具备独特的技术实力和用户洞察。

此外，Tasha还曾创办机器人初创Fellow Robots，并在奇点大学担任Autodesk创新实验室的主管，教授机器人技术。2009年，25岁的他自主创业，联合创立Quora。在她的监督下，OpenAI会在发展中更加注重风险管控和道德规范，真正造福全人类，而不仅仅追求商业利益。这位乔治城大学新兴技术政策中心(CSET)的战略研究主管，还在OpenAI的非营利性董事会内进行公益工作。Adam D’Angelo是OpenAI董事会的外部独立董事，也是问答社区知乎的Quora CEO和联合创始人。

与此同时，我们相信，随着我们的前进发展，新的领导层是必要的。鉴于她任职时间较长，并与公司各个方面密切接触，包括她在人工智能治理和政策方面的经验，董事会认为她是担任这一职位的独特人选，并预计在正式寻找永久首席执行官时实现无缝过渡。Mira 在 OpenAI 拥有五年的管理经验，在 OpenAI 发展成为全球人工智能领导者的过程中发挥了关键作用。OpenAI表示，SamAltman的离职是在董事会经过深思熟虑的审查程序之后进行的，审查程序得出的结论是，独特的技能，对公司的价值观、运营和业务有深入的了解。

负责深度学习和人工智能研究的谷歌大脑（Google Brain），在高级研究员Jeff Dean的领导下，将数百万个来自YouTube的随机、无标签视频帧输入这台新的超级计算机，并对其进行编程，使其能够理解所看到的内容。可以说，是它自己发明了猫的概念。Geoffrey的姑妈之一，Joan Hinton是一位核物理学家，她以物理学家费米的学生的身份加入了曼哈顿计划，是为数不多的参与曼哈顿计划的女性之一。「很长一段时间以来，」他说，「我都觉得自己不是——好吧，我终于做到了，这让我能松了一口气了。

ExLlamaV2 采用全新的代码库和内核实现，取得了显著的性能提升，支持与 V1 相同的 4 位 GPTQ 模型，同时支持新的“EXL2”格式。CodeFuse-MFTCoder 是多任务微调代码大模型项目，包含代码大模型的模型、数据、训练等，具备多任务、多模型、多框架、高效微调的优势。，旨在为用户提供全方位、高精准的法律咨询与解答服务。目前提供基于 Qwen-7B、InternLM-7B、Baichuan-13B 三个版本的微调模型，利用了大规模预训练模型的优势，具备处理复杂心理问题的能力。

通过这样的交互迭代，机器的理解会更接近用户的真实意图，这不仅包含对当下的思考，还有接下来的规划，甚至是能进一步理解用户的情绪起伏。我们在 Inflection 的组织搭建中很重视的一点是，我们不会特别区分研究员、科学家、工程师和数据科学家这些角色，几乎每个人都是 Technical Staff 的 Tittle，对我们来说，每个职能都要能得到平等和尊重，这也是其他实验室之前做得不太好的方面，因为实际上是团队中的每个人共同做出贡献而不是具体的某一类角色，所以我认为这是一个很重要的改进。

彼此负责，互相扶持，企业是创业者的孩子，投资商应该是孩子的叔叔或阿姨。，自成立以来致力于将最先进的人工智能技术应用到精神健康的数字诊疗服务上，通过建立先进的AI数字疗法体系，为临床患者和广大心理亚健康人群提供高质量、低成本、个性化、全天候的情绪支持、心理治疗和干预方案，为用户提供更科学、高效的精神健康服务。同时我们也在通过研发相应的AI系统去进行用户干预的个性化定制，让每位患者能够真正的从自己的实际情况出发，拥有适合自己的、千人千面的治疗方案，从而保证在有效性同时，提升依从性。

然而，5 代的付费用户无法直接获取 6 代的功能，仍然需要再次付费，引发了大量老用户的不满。Move 可以确保代码的安全、可靠和可验证，以及用户体验的流畅。而根据 C-Eval 给出的信息，MiLM-6B 模型在具体各科目成绩上，在 STEM（科学、技术、工程和数学教育）全部 20 个科目中，计量师、物理、化学、生物等多个项目获得了较高的准确率。微软的人工智能与 Aptos 网络的集成是 Web3 采用和创新的重要里程碑，将降低进入 Web3 探索和开发的障碍，并使更多的人能够参与并受益于去中心化的网络。