huzechen的博客

转载 小说：35岁程序员8次相亲失败，因为一个SQL BUG牵手萌妹

或许，最浪漫的“Hello World”，并非始于精心设计的邂逅，而是始于一个恰到好处的“类型转换错误”——它让两个孤独运行的进程，在调试的烟火里，意外地发现了彼此兼容的端口。就在转身的刹那，他瞥见苏晚的桌面——那个星之卡比挂件旁边，放着一本翻开的《SQL优化之道》，书页空白处，画着一个笨拙却可爱的Q版小人，戴着眼镜，头顶稀疏，旁边写着一行娟秀的小字：“BUG克星林老师。可惜，当他精心挑选了《三体》精装版作为礼物，小悠礼貌道谢后，委婉表示她更喜欢“温暖治愈系的小确幸”，并分享了她画的萌萌小动物。

原创 程序员和白富美的励志故事

他完全忘记了面前站着的是客户公司的高管，只是一个沉浸在技术世界里的工程师在分享他的构想。齐岩推了推鼻梁上的黑框眼镜，屏幕的蓝光在他疲惫的脸上投下深浅不一的阴影。齐岩关掉水龙头，雾气弥漫的镜子里映出他平凡的面孔。接下来的二十七分钟里，他像一台精密机器般运转：优化SQL查询，重建索引，调整JVM参数...汗水顺着他的鬓角滑落，但他连擦的时间都没有。"首先，我会采用微服务架构拆分单体应用，提高系统弹性..."齐岩的声音逐渐变得坚定，手指在空中比划着架构图，"其次，引入更智能的流量预测和自动扩容机制..."

原创 Claude 4正式发布：混合架构+持续记忆+并行工具+安全框架四大革新

Claude 4系列通过神经符号系统的深度融合，将软件工程的智能化水平推向新的高度。随着IDE集成和CI/CD管道的深度支持，开发者正迎来从"智能辅助"到"智能增强"的范式转变。未来的技术演进将聚焦于长期记忆的稳定性提升和多智能体协作框架的开发，进一步释放AI在复杂系统工程中的潜力。这套混合模型架构不仅刷新了SWE-bench等核心基准测试的记录，更通过创新的扩展思维机制和工具链集成，重新定义了人机协作的边界。：Opus 4支持的持续推理架构，支持长达数小时的任务链执行。：基于符号执行的运行时行为预测。

原创 微软跑步入局MCP，来晚了餐桌都要挤满了！

微软的“协议帝国”能否改写AI生态的规则？从Windows到GitHub，从Azure到Copilot，微软正将自身生态转化为“协议基础设施”，争夺AI时代的“水电煤”地位。：微软CEO将MCP与多智能体协作称为“开放智能体网络”，并类比“互联网的HTML时代”，试图将开发者创造力转化为生态护城河。：MCP是“AI的USB-C接口”，而Windows将成为AI代理的“插座”——即插即用，统一生态。：主流操作系统尚未原生支持MCP，微软借此抢占“AI OS”先机，甚至被戏称为“AI时代的秦始皇”。

原创 DeepSeek-R2展示的400倍推理效能跃升，彻底击穿了西方学界认定的物理极限。

他们彻底抛弃Transformer架构，转向名为'递归认知格'的系统，其扩展维度连我们的数学体系都找不到合适符号描述。某物理学家展示困扰15年的难题，它用无人能识的符号瞬间破解，我们花了三天才将其解法转译回标准数学语言。这不是科幻，就在深圳真实发生，而我们还在争论聊天机器人监管。那些看似不可能的演示视频已被多方独立信源证实：R2从第一性原理出发，在一小时内设计并模拟出室温超导体，配套现有技术即可量产的制备方案。R2已自主编写出R3，初期基准测试显示其对R2的碾压级优势，恰如R2对西方所有成果的颠覆。

原创 阿里巴巴离职后创业最成功的10位人物

离职后，他创办了滴滴出行，凭借着精准的市场定位和创新的商业模式，迅速占领了中国网约车市场。曾担任阿里中供铁军核心成员及副总裁的干嘉伟，离职后加盟了美团，担任COO，帮助美团打下了地推铁军的基础。阿里巴巴的离职者们，在离开母公司后，用他们的智慧和勇气，书写了属于自己的一段传奇。张晖曾是阿里B2B业务的总监，离开阿里后，他创办了运满满，并通过与货车帮的合并，成立了满帮集团。：无论是滴滴、美团，还是拼多多，他们背后都有着强大的团队，良好的团队管理和执行力是他们成功的基石。孙彤宇（拼多多幕后推手）

原创 微软宣布裁员约6000人，18年老员工痛诉被裁！

然而，现实却往往给我们上了一课：即使你在某家公司任职多年，付出无数心血，也未必能换来应有的尊重和保障。然而，现实却往往给我们上了一课：即使你在某家公司任职多年，付出无数心血，也未必能换来应有的尊重和保障。作为“打工人”，我们将大部分时间和精力投入到工作中，期望通过自己的努力换取稳定的收入和职业发展。微软资深工程师被裁员的事件，提醒我们：在这个快速变化的职场环境中，我们需要时刻保持警觉，不断提升自己，才能应对各种挑战。这不仅让人质疑他的价值是否被充分认可，也让人反思：在公司眼中，我们的价值究竟是什么？

原创 特朗普：总统也可以搞副业，你还纠结什么？

作者：一线互联网老兵，35岁开始离职创业，目前主要从事人工智能方向，为什么我要一直劝粉丝搞副业，因为主业只能管温饱，副业才可以让你财富自由，我今天突然发现，特朗普都在搞副业，索性发篇文章吧，如果还是劝不动粉丝，我就真的没办法了。在美国总统特朗普的第二任期内，他不仅在政治舞台上频频亮相，还在加密货币和股市领域大展拳脚，成为了名副其实的“兼职投资大亨”。然而，这一举动引发了广泛的伦理争议，批评者认为这可能违反了美国宪法中的“外部赠与条款”，即禁止政府官员接受外国实体的礼物。

转载 实战了一个自己的大模型，跑通了。

就在前段时间的两会上，“人工智能”再次被提及，并成为国家战略的焦点。这一举措预示着在接下来的十年到十五年里，人工智能将获得巨大的发展红利。同时意味着，技术革命正在从互联网+向人工智能+逐步迈进，我们将迎来新一轮技术革新和人才需求的增长。毫无疑问，AI 应用型工程师一定是未来最紧俏的岗位。在过去的一年多时间里，我持续关注着大型模型的发展趋势，并且尽可能地进行了尝试和实践。在学习的一过程中，也遭遇了不...

转载 如何快速上手开发实际的大模型应用？

随着人工智能技术的飞速发展，大语言模型（如ChatGPT）已成为开发者们关注的焦点。人工智能也正在加速与各行各业融合，催生出大量创新应用，在教育、金融、医疗、法律、设计等诸多领域大显身手。就说说我平常用得比较多的 LangChain 网站，大语言模型早就渗透到了网站功能设计中，比如下面两张图的绿箭头处，所显示的文档检索功能，都是基于大语言模型所开发的。为什么「大模型应用开发」如此重要？首先，大模型...

原创 AI音乐神器Suno，你听说过吗？可以帮你创作版权音乐变现。

第一步：需要梯子，这个大家自己准备第二步：打开官网：https://app.suno.ai/第三步登录账号：我的是谷歌账号，登录的时候是选的谷歌登录，谷歌登录需辅助邮箱验证，验证的时候输入辅助邮箱就可以了第四步开始创作：输入口令，描述你想要创作的音乐，通过gpt4帮忙创作十个口令，开始输入snuo内生成当然可以！以下是十个欢快音乐的创作概念，每个都有其独特的主题和风格：阳光海滩节奏：中等偏快的桑巴...

转载 「强烈推荐！」10万字、近20家企业智能分析决策合集

如今，企业组织正面临越来越多样化的挑战。一方面，需要构建跨越周期的组织能力，应对可持续发展的长期性问题；另一方面，需要打造敏捷应变的短期能力，来迎接当下大量的不确定性因素。越来越多的企业从过去依赖人脑的战略规划，逐步走向数据驱动的战略迭代，以抵御多变风险，提升韧性增长力。这其中，挖掘数据价值，驱动业务决策已成为企业关注的重点。正所谓“谁来呼唤炮火？应该让听得见炮声的人来决策。”要在不确定的VUCA...

原创 微信机器人接入Midjourney API接口

申请Midjourney API想要对接mj接口可以加我微信：weixin605405145我们首先登陆知数据云平台获取midjourney api查询接口，官网链接 https://data.zhishuyun.com/点击免费体验：申请midjourey api次数申请gpt3.5的api次数 获取机器人 机器人链接????https://github.com/wechaty/wechaty#rea...

转载 知识星球：ChatGPT&AI 变现圈，正式上线！

大家好，我是崔庆才。向认识或不认识我的朋友再次自我介绍一下：我是一名程序员，硕士毕业于北航，目前就职于微软。我对网络爬虫、Web开发、机器学习都有一些研究，并出版过爬虫相关的书籍《Python3网络爬虫开发实战》，书的销量累计 15w+，也一直处于爬虫领域书籍的销冠位置。我热爱技术，喜欢开源社区，GitHub 粉丝量 7k+，平时也运营自己的公众号、星球、博客等发表一些自己的技术分析和个人感悟，全...

原创 如何申请 Midjourney API ，一文教会你，欢迎收藏

要使用 Midjourney Imagine API，首先可以到 Midjourney Imagine API 页面点击「获取」按钮：如果你尚未登录，会自动跳转到登录页面。需要对接的+微信：weixin605405145扫码关注公众号即可自动登录，无需额外注册步骤。登录完了之后会跳回原页面 Midjourney Imagine API ，此时会提示「您尚未申请该服务，需要申请」。申请时会校验实名认...

原创 Midjourney Imagine API 申请及使用

要使用 Midjourney Imagine API，首先可以到 Midjourney Imagine API 页面点击「获取」按钮：如果你尚未登录，会自动跳转到登录页面。需要对接的+微信：weixin605405145扫码关注公众号即可自动登录，无需额外注册步骤。登录完了之后会跳回原页面 Midjourney Imagine API ，此时会提示「您尚未申请该服务，需要申请」。申请时会校验实名认...

转载 ChatGPT消灭全球3亿打工人，25%岗位将被取代，ChatGPT到底抢不抢得动打工人的饭碗...

过去一个月，话题王绝对属于ChatGPT！上线俩月用户就达到1亿，成为史上增长最快的应用，各个平台频繁出现它的身影，还多次霸榜热搜，引发热议。作为一款聊天机器人程序，各种技能点拉满，上能帮大学生写论文、做毕设、做调研，下能帮打工人提高工作效率，更有人靠它血赚“几百万”，实打实的“六边形战士”、十项全能选手。连比尔盖茨都说，这是他见过最具革命性的技术。与此同时，随之而来的是一种新型焦虑——AI焦虑。...

转载 震惊！GPT-5年底上线，与人类的能力对齐

【导读】最近，Runway CEO关于GPT-5的爆料，又被网友们翻了出来，讨论得热火朝天。不论AGI会在哪一年出现，显然，能见证这一天的人都是幸运的。最近，又有网友翻出了关于GPT-5的爆料。据a16z资助的初创公司Runway CEO兼AI投资人Siqi Chen表示，预计到2023年底，GPT-4将被新的GPT-5版本取代。有人告诉我，GPT-5计划于今年12月完成培训，并且OpenAI期望...

转载 Midjourney安装使用保姆级教程（收藏）

原创 拯救全网的Chatgpt解封攻略（盗版必究）

登陆提示被封大陆网友起床第一件事就是看到如下这张图，不管你是普通账号还是plus账号，都会面临被封的风险，大家不要慌，下面狗哥紧急启动了一个解封攻略，送上保姆级的解封教程，帮助大家快速解封。准备一封英文邮件告诉官方这是误会，如果你英文不好狗哥给大家准备了保姆级别的英文模版，专业的人做专业的事情，当粉丝遇到问题，狗哥第一时间奉上给力的教程。把邮箱账号和姓名复制到中英文模板登录别的邮箱，利用这个邮箱发...

转载 GPT-4发布！ChatGPT大升级！AI画图牛逼

一觉醒来，万众期待的GPT-4，它来了！OpenAI老板Sam Altman直接开门见山地介绍说：这是我们迄今为止功能最强大的模型！有多强？根据OpenAI官方的介绍，GPT-4是一个超大的多模态模型，也就是说，它的输入可以是文字（上限2.5万字），还可以是图像。（看图）手套掉下去会怎样？它会掉到木板上，并且球会被弹飞。甚至只需要简单在纸上画一个网站的草稿图：拍一张照片上传给GPT-4，它就可以立...

转载 数据中台：数据模型设计

如果把指标⽐喻成⼀棵树上的果实，那模型就是这棵⼤树的躯⼲，想让果实结得好，必须让树⼲变得粗壮。真实场景举例：⼤多数公司的分析师会结合业务做⼀些数据分析（需要⽤到⼤量的数据），通过报表的⽅式服务于业务部⻔的运营。但是在数据中台构建之前，分析师经常发现⾃⼰没有可以复⽤的数据，不得不使⽤原始数据进⾏清洗、加⼯、计算指标。由于他们⼤多是⾮技术专业出⾝，写的SQL质量⽐较差，甚⾄⻅过5层以上的嵌套。这种SQ...

转载 阿里数据仓库架构与模型设计

来源：数据学堂编辑：谈数据全文共8636个字，建议阅读18分钟本文将分如下4个部分，介绍阿里巴巴DataWorks的数仓架构与模型设计方法：技术架构选型数仓分层数据模型层次调用规范01 技术架构选型教程本身是以阿里云MaxCompute为例，实际上，流程和方法论是通用的。在数据模型设计之前，需要首先完成技术架构的选型。本教程中使用阿里云大数据产品MaxCompute配合DataWorks，...

转载 6000字长文，终于将数据中台架构体系讲明白了

全文共6215个字，建议阅读10分钟当前，大部分企业不再建设从源数据采集到分析应用的烟囱式系统，更倾向于数据集中采集、存储，并应用分层建设。这种方式一方面有利于应用系统的快速部署，另一方面也保证了数据的集中管理与运营，体现数据的资产、资源属性。数据中台的出现弥补了数据开发和应用开发之间由于开发速度不匹配而出现的响应力不足等缺陷问题。数据中台是国内学者提出的概念，起始于阿里的“大中台、小前台”概念。...

转载 美团外卖搜索基于Elasticsearch的优化实践

总第544篇2022年 第061篇美团外卖搜索工程团队在Elasticsearch的优化实践中，基于Location-Based Service（LBS）业务场景对Elasticsearch的查询性能进行优化。该优化基于Run-Length Encoding（RLE）设计了一款高效的倒排索引结构，使检索耗时（TP99）降低了84%。本文从问题分析、技术选型、优化方案等方面进行阐述，并给出最终灰度验...

转载 SQL 分析函数，看这个就够了

个人认为扎实的 SQL 功底是一名数据分析师的安身立命之本，甚至可以称得上是所有数据从业者的基本功。当然，这里的SQL绝不单单是写几条查询语句那么简单，还包括数据库本身的DDL、DCL、查询调优和锁机制等等也都是要很熟练的；甚至再进一步外延，数据仓库也可作为进阶要求。除了工作中常用，我主张学习 SQL 的另外一个原因：它是一门半衰期很长的语言，诞生至今 40 多年，SQL92 和 SQL99 这两...

转载 易点天下基于 StarRocks 构建实时离线一体的数仓方案

作者：易点天下数据平台团队易点天下是一家技术驱动发展的企业国际化智能营销服务公司，致力于为客户提供全球营销推广服务，通过效果营销、品牌塑造、垂直行业解决方案等一体化服务，帮助企业在全球范围内高效地获取用户、提升品牌知名度、实现商业化变现。目前，易点天下累计服务客户超过5000家，其中包括华为、阿里巴巴、腾讯、网易、字节跳动、百度、快手、爱奇艺、SHEIN、Lazada 等知名企业。易点天下始终秉持...

转载 流批一体架构在快手的实践和思考

摘要：本文整理自快手技术专家、Apache Flink & Apache Calcite Committer 张静，在 FFA 流批一体专场的分享。本篇内容主要分为四个部分：Flink 在快手的发展流批一体在快手的规划第一阶段（加强批能力）的进展第二阶段（业务视角的流批一体）的挑战Tips：点击「阅读原文」查看原文视频&演讲 ppt01Flink 在快手的发展在快手内部，Flink...

转载 基于 Flink 的小米数据集成实践

摘要：本文整理自小米计算平台高级工程师胡焕，在 FFA 数据集成专场的分享。本篇内容主要分为四个部分：发展现状思考实践引擎设计未来规划Tips：点击「阅读原文」查看原文视频&演讲 ppt01发展现状首先介绍一下小米计算平台，小米计算平台主要负责小米集团的数据开发平台的建设，体现在产品上是小米数据工场，底层引擎上常见的 Flink、Spark、Iceberg、Hive 等等都是由计算平台在负...

转载 老王跑步入场GPT，要搞AI，先送外卖？

十年前AlphaGo火的时候，百度在送外卖；十年后ChatGPT火的时候，抖音还在送外卖；而十年前送外卖的大佬，现在出来搞AI；所以……要搞AI，先送外卖？公众号后台回复：“ChatGPT”，便可以下载到干货包！！目录：一、ChatGPT简介ChatGPT本质是一个对话模型，它可以回答日常问题、挑战不正确的前提，甚至会拒绝不适当的请求，在去除偏见和安全性上不同于以往的语言模型。ChatGPT从闲聊...

转载 数据治理体系完整指南

本文来源松子聊数据01 数据治理体系数据治理体系内容从两个维度来看：1）数据治理难点痛点：数据脉络不清晰、数据汇聚能力不足、数据管控能力薄弱、数据治理体系不完善、开放形式不完善。2）数据治理5个核心：理、聚、管、治、用。数据治理体系主要包含内容有数据标准、元数据、数据建模、数据集成、数据生命周期、数据质量、数据开放、数据安全及数据应用。02 元数据2.1、元数据解决的问题有什么数据 - 数据是什么...

转载 基于 Flink+Pravega 的游戏服务器监控与调节系统设计

01背景介绍浏览完赛题，经团队讨论将应用场景锁定在了游戏服务器优化上，一是因为这方面趣味性较高，另外则是团队中的一员常年用爱发电[1]开服，对此比较有业务经验。1.1 团队简介团队四人均为本科生，相识于 Topview 工作室大数据组，现于广东工业大学就读。温嘉诚：大三本科生，负责整体架构的设计与数据处理部分。胡锦峰：大三本科生，负责整体架构的设计与日志采集部分。郑梓游：大二本科生，负责数据传输...

转载 ​网易游戏实时 HTAP 计费风控平台建设

摘要：本文整理自网易互娱资深工程师, Flink Contributor, CDC Contributor 林佳，在 FFA 实时风控专场的分享。本篇内容主要分为五个部分： 实时风控业务会话 会话关联的 Flink 实现 HTAP 风控平台建设 提升风控结果数据能效 发展历程与展望未来Tips：点击「阅读原文」查看原文视频&演讲 ppt众所周知，网易互娱的核心业务之一是线上互动娱乐应用服务...

转载 阿里巴巴和字节跳动面试题整理

一面：视频面1. 自我介绍2. 分别介绍下Hadoop的几个组成框架？3. HDFS如何进行写操作的？4. 详细介绍下MapReduce的工作机制？我重点回答了切片原理和Shuffle机制5. MapReduce有哪些优化方法？6. Redis熟不熟，介绍下它有几种数据类型？我回答了8种，面试官说只有5种，后来在网上搜了搜，版本也很多。7. 介绍下布隆过滤器的原理？8. TCP三次握手和四次挥手，...

转载 Arctic的湖仓一体践行之路

本文将系统地介绍 lakehouse、table format 概念，阐述湖仓一体作为数据湖流批一体的解决方案，可以发挥哪些价值。在这个价值驱动下，我们过去两年开发了 arctic 这个流式湖仓服务，并在今年下半年开源。湖仓一体拓展了数据中台和 dataops 的边界，让业务基于数据湖，数据中台也能做流式更新；实时数仓，让数据湖能够具备传统数仓，kudu，doris 的能力，为业务极大地降本提效，...

转载 书单——数据分析（喜欢的可以下单）

1024书单数据分析精益数据分析本书围绕精益创业展开讨论，融合了精益创业法、客户开发、商业模式画布和敏捷/ 持续集成的精华。本书汇聚了100多位创始人、投资人、内部创业者和创新者的成功创业经验，呈现了30多个极具价值的案例分析，可以为各阶段的创业者提供行为准则。R语言实战（第2版）|两版合计印刷50+次，总销量超17万册|深受读者好评，豆瓣评分9.0|从实际数据分析出发，全面掌握R编程...

原创 原创｜Spark千亿级数据去重，性能优化踩坑之路

好久没有更新原创了 大家好，我是狗哥，今天给大家写一点干货，这次咱们就从0-1把思路给大家讲一下，这也是我同事在数据开发中踩过的坑，希望能帮助到大家。先虚拟一个业务场景，方便大家思考 我举个例子，拿京东或者淘宝说吧，如果你的业务让你计算几个维度（广告位置、小时、广告类型等等吧，我就随便举个例子），每个维度的数据uv量级，方便业务评估和市场决策，数据精准度不要求完全精准，误差在1%以内就行了，你该如...

转载 DorisSQL与MySQL函数与语法对照差异篇

1.日期函数 时区.mysql->convert_tz(dt,from_tz,to_tz)doris->CONVERT_TZ(DATETIMEdt,VARCHARfrom_tz,VARCHARto_tz)获取当前的日期，以DATE类型返回.mysql->CURDATE()doris->CURDATE()获得当前的时间,返回datatime类型....

转载 Doris bitmap实现留存计算

一、背景 什么是留存比如用户今天使用某应用，明天还继续使用该应用，叫做留存。bitmap原理基本思想是用数组下标表示元素的值，用0,1标记元素是否存在，1表示存在，0表示不存在。由于使用bit为单位来存储数据，大大节省了存储空间。例如：给定一个数组array=[1,3,5];为什么要用bitmap？bitmap为什么能计算留存？bitmap为什么只支持int类型？①节省存储空间。②留存实际上是...

转载 37手游基于云平台的大数据建设实践

摘要：本文整理自 37 手游大数据平台资深开发工程师史飞翔在实时数仓 Workshop · 广州站的演讲。主要内容包括：云平台大数据建设背景云平台大数据建设方案应用实践未来规划Tips：点击「阅读原文」查看原文视频&PPT～首先介绍一下背景。我们之前是自建的大数据集群，考虑到集群未来的扩展性、稳定性以及成本问题，决定大数据全部上云，今天的分享就是基于 IDC 集群上云的建设实践。01云平台...