叶庭云 成为自己的光

我们可以使用 Gradio 库为我们的模型构建演示。Gradio 允许您完全使用 Python 为任何机器学习模型构建、自定义和共享基于 Web 的演示。使机器学习模型变得可交互和易于使用。

三院院士 Michael I. Jordan 指出：大模型在两个方向仍需 “努力“，补充过度自信问题和逆转诅咒问题

OpenAI 最新发布的从文本生成视频模型 Sora 炸裂登场，它能根据文字指令创造逼真且富有想象力的场景

微软 & CMU - Tag-LLM：将通用大语言模型改用于专业领域

OpenAI 正在推出新一代嵌入模型、新的 GPT-4 Turbo 和审查模型、新的 API 使用管理工具，而且很快就会降低 GPT-3.5 Turbo 的价格。OpenAI 将发布新的模型，降低 GPT-3.5 Turbo 的价格，并为开发人员管理 API 密钥和了解 API 使用情况引入新的方法。两个新的嵌入模型一个更新的 GPT-4 Turbo preview 模型一个更新的 GPT-3.5 Turbo 模型一个更新的文本审查模型。

在大语言模型时代，混合专家模型（MoE）是一种很有前途的架构，用于在扩展模型参数时管理计算成本。然而，传统的 MoE 架构（如 GShard）会激活 N 位专家中的 top-K 专家，但在确保专家专业化（即每位专家获取的知识不重叠且重点突出）方面面临挑战。作为回应，研究者提出了 DeepSeekMoE 架构，以实现终极的专家专业化。

随着人工智能技术的不断进步，2024 年发布 GPT-5 以及近几年内实现 AGI 的预测令人着迷。这些发展的可能性和影响令人难以置信。我们正处于一个激动人心的时刻！我深深地享受着创造所带来的成就感。亲眼目睹自己的作品被他人欣赏，会带来一种无法形容的喜悦和满足感。

随着对话智能体的表现越来越像人，我们必须开发出有效的方法，在不陷入拟人化陷阱的情况下，用高层次的术语描述它们的行为。在本文中，我们强调角色扮演的概念。从角色扮演的角度来看待对话智能体的行为，可以让我们借鉴熟悉的民间心理学术语，而不会把人类的特征强加给事实上缺乏这些特征的语言模型。对话智能体行为的两个重要案例，即（明显的）欺骗和（明显的）自我意识，就是这样处理的。也许，知道基于 LLM 的对话智能体不是有意识的实体，没有自己的议程和自我保护的本能，当他们看起来有这些东西时，那只是角色扮演。

这篇综述探讨了生成式人工智能不断发展的前景，重点关注混合专家（MoE）、多模态学习的变革性影响，以及对通用人工智能（AGI）发展的猜测。它批判性地审视了生成式 AI 的现状和未来轨迹，探讨了谷歌的 Gemini 和预期的 OpenAI Q* 项目等创新如何重塑各个领域的研究重点和应用，包括对生成式 AI 研究分类法的影响分析。它评估了这些技术的计算挑战、可扩展性和对现实世界的影响，同时强调了它们在推动医疗保健、金融和教育等领域取得重大进展方面的潜力。

OpenAI GPT 模型 API 接口新增参数 top_logprobs 和 logprobs

2023 年即将结束，现在是时候回顾今年的重要科学进展了。12 月 13 日，著名科学期刊《Nature》刚刚发布了 2023 年度的十大人物（Nature’s 10）。该评选旨在表彰在科学领域做出重要贡献并引起人们对关键问题关注的个人。今年的《Nature》十大科学人物与以往不同，首次包括了大语言模型（LLM）ChatGPT，这标志着有史以来首次有「计算机程序」入选。《Nature》杂志表示，此举旨在肯定模仿人类语言的人工智能系统在科学发展和进步中所发挥的作用。

在开源模型领域，开源大语言模型展现出了蓬勃的生命力，不仅数量激增，性能也日益优秀。甚至图灵奖获得者Yann LeCun也对此感叹：开源人工智能模型正在超越专有模型的道路上迈进。专有模型在技术性能和创新能力方面展现出非凡的力量，但其闭源的本质成为大语言模型（LLMs）发展的障碍。一些开源模型虽然为从业者和研究者提供了多样化的选择，但大多数仅公开了最终的模型权重或推理代码，导致越来越多的技术报告局限于顶层设计和表面统计。

思维链（CoT）提出者 Jason Wei：关于大语言模型的六个直觉

ChatGPT 助力英文论文翻译和润色

提示调优是一种高效且低成本的方法，它能在无需重新训练模型和更新权重的前提下，将 AI 基础模型适配至新的下游任务。基础模型旨在引领下一波人工智能企业应用的浪潮（未来的人工智能是灵活、可重复使用的人工智能模型，可以应用于几乎任何领域或行业任务这些大型、可重复使用的模型已经在互联网的广泛知识上进行了预训练，使它们更容易定制，用于分析法律合同或检测金融文件中的欺诈行为。Prompt-tuning 是一种高效、低成本的方法，可以将 AI 基础模型快速适配于新的下游任务，而无需重新训练模型和更新权重。

这篇论文提出的问题并不是全新的，而是受到了 Zhu＆Gigerenzer 在 2006 年的研究的启发。论文的研究旨在探讨 ChatGPT 在贝叶斯推理中的数学问题解决能力，并与儿童进行比较。因此，这篇论文的研究是在之前的研究基础上的进一步探索和实验。他们的工作结果表明，儿童有效地使用贝叶斯原理进行推理的能力取决于结构良好的信息表示。相比当前领域的研究状况，本文的思路有新意，因为它使用了一种新的方法来解决贝叶斯推理问题，即使用 ChatGPT 作为解决方案。：贝叶斯推理、ChatGPT、数学问题表示。

Prompt、RAG、微调还是重新训练？选择正确的生成式 AI 的方法指南

在将大型语言模型（LLMs）应用于实际场景之前，确保对齐性已成为一项关键任务。确保对齐性指的是让模型的行为与人类意图相一致。例如，在 GPT-4 发布之前，OpenAI 花了 6 个月的时间迭代对齐 GPT-4。缺乏评估 LLMs 的输出是否符合社会规范、价值观和法规的明确指导。这一障碍阻碍了 LLMs 的系统迭代和部署。为了解决这个问题，这篇论文对评估 LLMs 可信度时需要考虑的关键维度进行了全面的调查。可靠性安全性公平性抗误用性可解释性和推理性遵守社会规范鲁棒性。

智源社区活动，中外人工智能专家共话大语言模型与 AI 创新。《大模型时代》，龙志勇、黄雯 著，中译出版社 2023 年 5 月出版。《为什么伟大不能被计划》，[美]肯尼斯·斯坦利、[美]乔尔·雷曼 著，中译出版社 2023 年 4 月出版。龙志勇，国内首部详细揭秘大语言模型的书籍《大模型时代：ChatGPT 开启通用人工智能浪潮》作者（中译出版社，2023 年 5 月）。

教育是一项对人类身心发展产生影响的社会实践活动，旨在从内在激发人们固有或潜在的素质。因此，我们必须坚持以人为本的教育理念，重点关注个性化、引导式和身心全面发展。EduChat 是华东师范大学计算机科学与技术学院的EduNLP 团队开发的开源教育对话大模型。该项目主要研究以预训练大模型为基底的教育对话大模型相关技术，融合多样化的教育垂直领域数据。

ChatGPT 话题相关和类 ChatGPT 工具 | 优质文章、相关论文、应用、学习资源整理

2023 年 6 月 26 日，百度创始人、董事长兼首席执行官李彦宏出席 “世界互联网大会数字文明尼山对话”，发表了题为《大模型重塑数字世界》的演讲。大模型是当前全球科技创新的焦点，也是全球人工智能竞赛的主战场。李彦宏在演讲中提到：“新的国际竞争战略关键不在于一个国家拥有多少个大模型，而在于有多少原生的 AI 应用程序成功构建在这些模型上，以及这些应用在多大程度上提升了生产效率。如果我们能够参加这场竞赛并获得入场券，中国将拥有更为强大的数字化产业，其中数字经济规模将获得巨大的增长。李彦宏在演讲中还表示，

最近，一项有关 GPT-4 的创造力思维测试火了。来自蒙大拿大学和 UM Western 大学的研究团队发现，GPT-4 在 Torrance 创造性思维测试（TTCT）中的得分直接排在了前 1%。结果表明 OpenAI 的 GPT-4 在托伦斯创造性思维测试（TTCT）中的得分排在前 1%，在流畅性、灵活性和原创性等创造性能力方面与人类相匹配或超过了人类。这项研究会在南俄勒冈大学的创意会议上发表（Conference on Creativity）。

编程也可能是最容易被 AI 技术取代的工作之一，软件的构建方式将产生根本性的转变。今年以来，相信大家都听说过 ChatGPT、New Bing 和 GPT-4。如果你从事写软件相关的业务，这些东西是非常有帮助的。事实上，它们的工作效果非常好，以至于我认为我们正在追踪软件构建方式的根本性转变。这将对几乎所有事情产生剧烈影响。讽刺的是编程也可能是最容易被这些技术取代的工作之一。我们处于一个关键时刻，在资本主义替代我们之前，我们程序员需要理解和适应这些技术。

推出了 GeneGPT，这是一种新颖的方法，教授 LLMs 如何使用 NCBI Web APIs。它在 8 个 GeneTuring 任务上实现了 SOTA 性能，并可以执行链式 API 调用。实验结果表明，数据库实用工具可能比相关网页更优秀，可以增强 LLMs，以忠实地服务于各种生物医学信息需求。大型语言模型工具学习生物医学问答引入了 GeneGPT，这是一种新颖的方法，利用 NCBI Web APIs 来回答生物医学问题。

OpenAI 重磅更新，API 添加函数调用能力，能处理更长上下文，价格又有所降低 …这次更新的主角，在我看来毫无疑问是函数调用功能，过去要么依靠 Prompt Engineering 提供的信息，要么就需要使用 Langchain 这样的框架实现。现在官方提供了更稳定的方式与本地代码或者第三方 API，可以无缝将 GPT 的语言理解和解析能力整合入本地工作流中。在 Chat Completions API 中提供函数调用能力更新更易控制的 gpt-4 和 gpt-3.5-turbo 版本。

功能调用和其他 API 更新。OpenAI 宣布更新，包括更多可控的 API 模型、函数调用能力、更长的上下文和更低的价格。美国时间 6 月 13 日 OpenAI 官网突然发布了 ChatGPT 的最新能力更新。重点如下：新功能：在 Chat Completions API 中添加了新的函数调用能力，能让模型在需要的时候调用函数并生成对应的 JSON 对象作为输出。这让开发人员能够更准确地从模型获取结构化数据，实现从自然语言到 API 调用或数据库查询的转换，也可以用于从文本中有效提取结构化数据。

FusionAI - 好用的 AI 写作伴侣 | 生成增强的 ChatGPT 提示，仅需几秒钟即可提升您的写作水平

今年以来，随着 ChatGPT 的火爆出圈，各行各业愈加关注大型语言模型在垂直领域落地应用的进一步深入。“从 2016 年 AlphaGo 打败了李世石，再到了最近大热的 ChatGPT，我们看到人工智能每隔几年就会给大家带来惊喜。在我国，看病难、看病贵的本质是享受优质医疗服务难且贵。AI 医生，就是优质医疗资源扩容下沉和区域医疗资源均衡布局的重要抓手。人工智能（AI）在医疗行业中取得了重大进展。其中最突出的 AI 工具之一是由 OpenAI 开发的智能对话模型 ChatGPT。

学习笔记 | 基于大模型的优质 Prompt 开发课。课程内容涵盖优质 Prompt 构建方式、优化技巧、场景应用等全栈知识。该课程手把手教授如何构建高质量提示词，掌握大型模型对话技巧和高级用法，以便利用大型语言模型的生成能力。无需技术基础，仅需会打字即可。课程共四节课，包括基础构建方式、优化技巧和应用场景等实践知识。无论甚至没有计算机背景也可以在此课程中学习如何使用大型模型以提高生产效率。

解决 Microsoft Edge Dev 版本中右上角的 bing 按钮消失的问题 让 New Bing 还能阅读分析文档！

现在已经有很多 ChatGPT 的套壳网站，以下分享验明 GPT-4 真身的三个经典问题，帮助你快速区分套壳网站背后到底用的是 GPT-3.5 还是 GPT-4。测试问题 3：Why did Zhou Shuren beat up Lu Xun （鲁迅为什么暴打周树人）GPT-3.5 回复：Yesterday（昨天）GPT-3.5 回复：稀奇古怪的乱编理由。GPT-4 回复：鲁迅和周树人是同一个人。GPT-4 回复：0 只，其他被吓跑了。GPT-4 回复：Past（前天）GPT-3.5 回复：8 只。

倡议书：关于暂停「巨型 AI」 实验的一封公开信

用好 ChatGPT | Prompt 编写模式：如何将思维框架赋予机器

ChatGPT 有哪些 "激动人心的时刻"？以及自己的一些思考

竞赛题目：使用帕金森病患者的蛋白质和肽数据测量来预测疾病的进展竞赛类型：数据挖掘、时间序列、回归预测关键词：时间序列、帕金森进展预测、生物信息、数据分析、机器学习

探索更高效的学习方法可能是有志者共同的追求，用好 ChatGPT，先行于未来。作为一个人工智能大语言模型，ChatGPT 可以在帮助初学者学习和实践机器学习方面发挥重要的作用。提供基础知识：ChatGPT 可以回答关于机器学习的基本问题，例如什么是有监督学习、无监督学习、强化学习等等。初学者可以通过与 ChatGPT 的对话来建立对机器学习的基本了解。解释机器学习算法：ChatGPT 可以解释不同的机器学习算法，例如线性回归、逻辑回归、决策树、神经网络等等。

工程师成长到最后，最重要的到底是什么？

分享论文 Rebuttal, Review 时可能使用的 Prompt，利用 ChatGPT 类工具完善论文，回复论文的 Rebuttal，提高中稿概率。