杨强教授新番！破解机器学习数据孤岛和数据保护难题

于 2020-06-11 21:30:00 发布
阅读量484 收藏 1
点赞数
原文链接：https://appqtulvsie4217.h5.xiaoeknow.com/v1/course/column/p_5ea7cf19b2081_bpPVA8DB?type=3\x26amp;share_user_id=u_5d551c0adebb6_KhIhPCN1w4\x26amp;share
版权

一只小狐狸带你解锁 炼丹术&NLP 秘籍

移动互联技术这把“温柔刀”，带来巨大便利之余，也将我们的个人数据放进了橱窗，为“推动信息技术发展”而供人调取。

我们都清楚网络“裸奔”的行为很混乱，但你知道到底有多乱吗？真相，可能远比想象中严重。

近日，某银行都会因为“大客户”要求而泄露客户流水，那么在这个高度开放的互联网世界里，存放着我们隐私的安全小屋又能安全到哪里去？

▼ 特斯拉最近曝出因数据保护不力，导致用户隐私泄露的问题。

▼ 今年3月，新浪微博因用户查询接口被恶意调用，5.38亿微博用户数据泄露。

无论是工信部隔三差五曝出的违规收集数据，还是新闻里时时可见的隐私泄露问题，在当前大数据驱动的社会环境下，数据隐私安全成为了全民探讨的重要议题。

信息技术的发展，离不开由我们在智能终端（手机及其他设备等）上产生或推断出的个人数据，如浏览习惯、点击频次等，来推动个性化应用和服务的发展。

尤其在AI领域，这一情况更为明显，依赖于持续的数据感知、收集，并上传至服务端进行深度分析与训练，AI才能迎来蓬勃发展。但底层未经审查、不透明的数据收集和聚合协议，很可能造成严重的数据安全威胁和隐私风险。

要解决这样的困境，仅仅靠传统的机器学习方法已经出现瓶颈。

我们需要一个既满足隐私保护和数据安全，又可实施的解决方案—联邦学习l。

什么是联邦学习

联邦学习希望做到各个企业的自有数据不出本地，而联邦系统可以通过加密机制下的参数交换方式，即在不违反数据隐私法规情况下，建立一个虚拟的共有模型。这个虚拟模型就好像大家把数据聚合在一起建立的最优模型一样。但是在建立虚拟模型的时候，数据本身不移动，也不泄露隐私和影响数据合规，也就是“数据不动，模型动”。这样，建好的模型在各自的区域仅为本地的目标服务。在这样一个联邦机制下， 各个参与者的身份和地位相同，而联邦系统帮助大家建立了“共同富裕”的策略，也就是“风险不增，效益增”。这就是为什么这个体系叫做“联邦学习”。

联邦学习的价值

如何学习联邦学习

首部全面、系统论述联邦学习的中文著作《联邦学习》现已上市，可以作为广大学习者入门和探究联邦学习的第一本书！

本书详细描述了联邦学习如何将分布式机器学习、密码学、基于金融规则的激励机制和博弈论结合起来，以解决分散数据的使用问题。介绍不同种类的面向隐私保护的机器学习解决方案以及技术背景，并描述一些典型的实际问题解决案例。

▼扫码立即获取本书详情▼

本书知识体系


（点击查看大图）

业内顶级阵容，权威专著

  倾情作序  

张钹 / 中国科学院院士，清华大学人工智能研究院院长

  联合力荐  

（按姓氏拼音排序）

高文 / 中国工程院院士，北京大学教授，鹏城实验室主任

李开复 / 创新工场董事长兼CEO

梅宏 / 教授，中国科学院院士，欧洲科学院外籍院士，IEEE Fellow，中国人民解放军军事科学院副院长

肖钢 / 第十三届全国政协经济委员会委员

周志华 / 南京大学人工智能学院院长，欧洲科学院外籍院士，ACM/AAAI/IEEE Fellow

  作者团队  

杨强 / 微众银行的首席人工智能官（CAIO），香港科技大学（HKUST）计算机科学与工程系讲席教授。

刘洋 / 微众银行AI 项目组的高级研究员。

程勇 / 微众银行AI 项目组的高级研究员。

康焱 / 微众银行AI 项目组的高级研究员。

陈天健 / 微众银行AI 项目组的副总经理。

于涵 / 新加坡南洋理工大学（NTU）计算机科学与工程学院助理教授，微众银行特聘顾问。

顶配福利，触手可得

1

加入《联邦学习》图书交流群，享受以下福利：

①与作者团队共同讨论联邦学习技术话题，实时答疑解惑

② 获取来自“微众银行人工智能团队”的第一手技术资料，包含联邦学习前沿研究、多领域应用案例、FATE开源项目实战指导等

③ 第一时间获取杨强教授等多位人工智能顶级专家在线公开课程信息，抢占VIP席位

④ 《联邦学习》第一批新书特价抢购权

▼

添加下方小橘子微信

回复“联邦”进群

2

限时仅需0.1元，你将得到：

  • 抢鲜试读本书第1章全部内容！

  • 获赠10元博文视点学院优惠券

 第一章简介 

本书第1章即将围绕当前人工智能面临的挑战，以及联邦学习可以作为一个有效的解决方案，并介绍联邦学习的分类和发展。同时论述：联邦学习将作为下一代人工智能大规模协作的基础，能迎合技术和社会的需求，承担起人工智能在发展和应用中的重任。

▲ 扫码获取抢先读详情 ▲

送书福利时间

卖萌屋联合电子工业出版社博文视点为各位小伙伴们带来 5本 纸质书《联邦学习》！小夕会从 留言区 中挑选5名 订阅号常读用户 送书一本～（您的每一次支持和鼓励小夕都记在心里????）没有领到书的小伙伴也不要难过，只要多多关注卖萌屋的文章，下一次就有机会获得赠书哦~

可

能

喜

欢

夕小瑶的卖萌屋

_

关注&星标小夕，带你解锁AI秘籍

订阅号主页下方「撩一下」有惊喜哦

▼ 点击阅读原文，获取进入抢先读！

夕小瑶
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
博客
MM 2024 Oral: 大模型带你鉴赏世界名画！同济大学发布
08-30 6815
要求LLMs检索与特定画作的标题和艺术家姓名相关的学习知识，并生成一段仅关注视觉特征的分析，包括：1）整体正式分析，以及2）从特定角度的正式分析，例如颜色、构图和形式，下图展示了LLMs提供的主要分析角度。也就是说，经过精心收集的绘画分析数据微调后的GalleryGPT不仅在绘画分析性能上取得了更好的表现，包括形式分析生成和其他下游任务，而且还保留了其优越的多模态理解能力。（图中红色表示错误分析）这种“识别再分析”的过程高度依赖于识别的准确性，一旦遇到不认识的画作，就容易出错，产生“视觉上的错觉”。
博客
Runway删库跑路，真的run away了！
08-30 6610
Runway的CEO表示：Runway也参与了Stable Diffusion的研究，他们发布Stable Diffusion v1.5的行为并没有构成侵权。但在当时，Runway公司发布Stable Diffusion v1.5模型后，就遭到Stability AI法务团队侵权警告，要求Runway删除Stable Diffusion v1.5。据悉，Runway在Hugging Face上，最火的、也是争议最大的项目，就是2022年上传的Stable Diffusion v1.5。
博客
AI游戏革命！谷歌推出GameNGen，实时生成游戏画面，每秒20帧实时模拟
08-30 873
谷歌的研究人员给出了肯定的答案，他们在研究中，成功在神经网络GameNGen上，自动生成游戏内容，实时运行《Doom》，并达到了与原本游戏内容相同的视觉质量。除了节省成本和时间之外，AI游戏引擎还可以为各种其他领域打开新的大门，这项创新可能会重塑虚拟世界格局，为我们提供对未来世界的一瞥：更加多样化的虚拟生态系统。最令人惊讶的是，他们并没有使用传统的游戏引擎，而是在单张张量处理单元Google Cloud TPU（谷歌定制的AI加速器芯片）上，运行GameNGen。此外，如何有效的训练神经游戏引擎；
博客
英伟达发布财报，意外掉血10000亿，OpenAI拉来新融资输血，将突破1000亿估值
08-30 454
有报道指出，英伟达最新一代GPU——Blackwell芯片的发布因台积电的生产难题而有所延误，但是英伟达已在本季度向其合作伙伴和客户交付了该芯片的样品。财报公布后，英伟达股价在周三收跌2.1%后，经历了剧烈波动，先是上涨超过2%，随后跳水转跌，盘后跌幅一度超过7%，随后再次扩大，跌超8%。今年7月，微软放弃了其在OpenAI董事会的无投票权成员职位，部分原因是为了向正在审查双方关系的监管机构表态。分析师预期为75.5%，英伟达指引为75%至76%，前一季度为78.9%，同比提升12.1个百分点。
博客
国产！首个实时视频交互的功能面世，智谱硬实力炸场KDD顶会
08-30 995
虽然当前，有很多闭源和开源模型声称能做视频理解任务，但多数是在视频的空间建模上表现的还可以，一旦提问涉及到复杂的时序建模，往往就抓瞎了，GPT-4o也不例外。而更重要的是，智谱吹得牛个个都落地了啊，从来不会藏着掖着，发布即上线，发布及开放，这很智谱。在本轮GLM系列的模型升级中，智谱使用了大量模型辅助构造高质量合成数据，并利用PPO有效有效提升模型推理能力，在数学、代码算法题等场景表现显著提升。可以看到，GLM-4-Plus在经典的语言理解、数学、代码等经典测试基准上已经与GPT-4o的表现非常接近了。
博客
今日arXiv最热大模型论文：港大&微软发布AgentGen提高大模型规划能力，8B模型接近GPT-4水平
08-28 1100
目标导向的确定性规划问题被定义为 ，其中 表示 Agent 交互的环境，表示 Agent 需要完成的任务。环境包括动作空间、状态空间和转移函数。任务由定义，表示目标条件，为初始状态。规划问题可用Python或PDDL实现。在PDDL中，域文件定义环境，问题文件定义任务。在Python中（如OpenAI gym），规划问题通常实现为一个类，包含转移函数、奖励函数和初始状态定义。港大和微软联合推出的 AgentGen 框架通过自动生成多样化的环境和任务，显著提升了模型的规划能力。
博客
GPT-6曝光！阉割版「草莓」秋季兑现
08-28 921
OpenAI的Q* 项目，也就是后来在网上沸沸扬扬的Strawberry草莓，终于定档于秋季上线。据The Information爆料，作为GPT-4的下一代，Strawberry很惊艳：拥有极强的推理和数学能力；减少了幻觉问题；能够主动进行“思考”，解决复杂的问题（耗时较长）。根据路透社的报道，早在七月份，OpenAI就已经向美国国家安全局展示过这个模型的技术。OpenAI内部也已经在使用这个新的模型。
博客
突发！扎克伯格发布公开信，曝了个大瓜！马斯克冲在一线吃瓜
08-27 237
信中表示，从2021年起，政府多次向 Meta施压，要求删除COVID-19相关的反面内容，Meta迫于压力删除了，在2020年大选前FBI欺骗Meta拜登儿子Hunter Biden「邮件门」是恶意抹黑，他们降低了事件的热度。人们不仅对信中披露的事实展开了深入讨论，对他在信中所展现的坚定立场和对公司政策的反思表示赞赏，还对马克·扎克伯格的勇气和远见。就在刚刚，Meta的老大马克·扎克伯格发布了一封公开的自白信，给美国众议院司法委员，揭露拜登政府屡次在舆论上的施压和欺骗！桩桩件件，小扎都记着呢！
博客
又一家国产厂商的大模型API官宣免费！还能免费微调，囤卡的哭了
08-27 700
要做到高可用性，微调是绕不开的。，每月99元，可以享受更多的资源，flash模型每个月的微调和推理的额度分别是1000万 token，还有智谱其他大模型GLM-4、GLM-4V的额度等等。的调用同样是在互联网上不存在的知识，因此通用大模型往往在工具调用问题上表现的“很傻”，但其实通过少量的样本去微调一把，这种工具API调用的问题也能得到极大的改善。，都是在互联网上不存在的数据，像销售话术、医疗诊断、端内数据，如果要在这些场景落地，模型要先微调学习相关的行业知识，才能更好的回答用户的问题。
博客
AI终于杀死了Leetcode！网友：面试神器已到位
08-27 316
但是，既然OpenAl已经将结构化的 JSON 响应添加到他们的 4-o Mini 中，我会重新考虑使用他们的模型。LeetCode，这个程序员的“试炼场”，如今也迎来了 AI 的挑战。这个脚本在 24 小时内自主完成了 633 道题目，其中包括 217 道简单题、359 道中等题和 57 道困难题，总共花费了 9 美元，成功率达到了 86%。在解题过程中Claude 实际上不断分析了失败的测试结果，并根据测试结果和当前尝试的代码重新尝试解决问题，从而使它能够成功完成问题。
博客
110万奖金！2024长三角（芜湖）算力算法创新应用大赛报名中！
08-26 296
专注于解决在不完全已知类别集合中进行识别任务，将围绕“智能制造”、 “交通运输”、 “应急管理”、“智慧城市”等领域进行模型训练，考验模型的精度和性能，推动人工智能在处理未知情况方面的能力提升，推动相关技术的发展，为实际应用提供更加强大和可靠的解决方案。让我们在这场大赛中，携手前行，共创辉煌！围绕大模型的技术创新与应用，根据实际需求自由选定一个或多个方向，完成具备创新性、实用性的应用方案，呈现可演示、可落地的应用产品，发掘更多能够解决实际问题的创新方案，共同推动大模型等技术在不同行业的落地实践。
博客
《黑神话：悟空》火了，英伟达赚了
08-22 617
从“游玩第一难是解压”“多家公司放假让员工打游戏”“老外恶补西游记”到“复刻古建筑”“泼天的富贵到了山西”，再到“第一批通关者出现”“结局是be”，关于它的热搜就没有断过，已经卖出超过四百五十万份，最高同时在线人数二百多万，Steam这两天的热销商品一直是它，众多评测机构打出了8.5以上的高分。此外，DLSS 3还引入了光学多帧生成技术，这是DLSS帧生成的关键组成部分。全景光线追踪能准确地模拟整个场景的光线，让玩家“身临其境”，但是对显卡的要求很高，因此一直被网友调侃为“打开它，就闻到了显卡的香气”。
博客
难倒了Midjourney和FLux的问题，被它解了！AI生图的终结者杀出来了
08-22 556
An illustration of a letter pad with the text "Hi, I’m Xi Xiaoyao. I’m a content creator and If you love AI, please follow. From - Xi Xiaoyao". The letter pad is on a wooden. 信笺的插图，上面写着“hi，我是夕小瑶。不过，比较可惜的是，包括Ideogram在内，这些模型能镶嵌的文本仅限于英文，其他语种的渲染，或许还要等很久。
博客
小时级的长视频生成！浙江大学发布MovieDreamer，AI电影时代到来了？
08-21 651
还记得前段时间刷屏朋友圈的Sora吗？它将生成视频的时长从几秒惊人地延长到前所未有的整整一分钟，惊艳了AI视频圈，不少人预言AI生成长达数小时的电影也指日可待。这不，浙江大学带着MovieDreamer走来了，再次刷新了视频生成的极限，将时长推向了小时级。MovieDreamer不仅可以塑造鲜活生动的角色，编织出连贯流畅的故事线，在画面上精雕细琢，每一帧的细节更是拉满。先来欣赏一下MovieDreamer生成的大作：下图是MovieDreamer生成的泰坦尼克号的场景，非常逼真。
博客
谢谢微软，又又又Open了！一口气发布3款Phi-3.5新模型，领先Llama3.1和谷歌同级模型
08-21 925
大家觉得Phi-3.5系列的三兄弟表现如何？虽然不同的基准测试可能让大家对他们的能力有不同的评价，褒贬不一，但不得不说，微软这次确实又开放了一个不错的模型，又OpenAI了不是！据奶茶今早看到的新闻，OpenAI 推出了 GPT-4o 微调功能，每天免费送100万Token，允许开发者为特定用例定制模型～结合今天微软的又一开源，开源和闭源的发展越来越像两条快速延伸平行线，一方面是模型的开放，另一方面是在引导应用方向上的开放。对此，大家怎么看？欢迎在评论区分享你的观点，与我们一起探讨！
博客
阿里推出世界最强的数学模型Qwen2-Math，击败GPT4o、Claude3.5
08-20 941
Qwen2-Math 的基础模型使用Qwen2-1.5B/7B/72B 进行初始化，然后在团队构建的数学专用数据上进行预训练。根据研发团队的评测，其中量最大的数学模型Qwen2-Math-72B-Instruct登顶全服最强，拳打GPT-4o、Claude-3.5-Sonnet，脚踢Gemini-1.5-Pro和Llama-3.1-405B。为了优化现有的模型，团队首先训练了一个基于Qwen2-Math-72B 的数学特定奖励模型，然后将密集的奖励信号与一个指示回答问题是否正确的信号相结合。
博客
率先测了一把阿里「世界最强」数学大模型后，我深吸一口气。。
08-20 701
除了作业帮、猿辅导等传统教培企业一直在拍搜赛道深耕，一些互联网巨头这些年也纷纷入局推出产品，比如阿里的夸克搜索也上线了拍照搜题功能，还有字节的闪电搜题和Gauth（面向海外市场的AI教育产品）。大模型爆火以来，AI教育创企和产品也是多了很多，比如MathGPT、Solvely、Answer.ai等，数学作为大模型需要攻克的场景之一，出现了很多专攻数学的大模型。上周，阿里就发布了一个世界最强数学模型，在math数据集上一骑绝尘，远超各种闭源模型，甚至超过了其他大型开源数学模型。来试试我们最经典的代数题吧。
博客
上海交大发起跨境电商AI全球挑战赛！40万奖金悬赏“AI合规”专家，已启动报名！
08-20 370
本次大赛预设丰富、极具商业价值的赛题体系，对于AI领域从业者，或是计算机学科领域的在校生、毕业生而言，，参赛者获得宝贵的实践经验的同时，也可收获“奖学金”奖励，为进一步学习成长或职业进阶提供“燃料”。而人工智能技术的引入，将大幅降低合规风险识别成本，对审查的准确性和效率也可起到显著的提升效果。诚邀全国乃至全球的顶尖人才，利用人工智能的无限潜能，探索并实践更高质量的跨境电商合规解决方案。与此同时，各国政策法规的复杂多变，也给跨境电商的持续发展带来了更加严峻的挑战。，依靠传统人工审查方式，不仅效率低下，还。
博客
faiss向量数据库测试《三体》全集，这家国产AI加速卡，把性能提了7倍！
08-19 666
Faiss是由Facebook AI Research团队开发的一个开源库，专门用于高效地进行大规模向量的相似性搜索和聚类。它支持对十亿级别的向量进行搜索，是目前较为成熟的近似近邻搜索库之一。Faiss用C++编写，并提供了与Numpy紧密结合的Python接口，不仅支持CPU计算，对一些核心算法还支持GPU计算。海光DCU（Data Center Unit）是一款高效通用的GPGPU加速卡，专为人工智能和科学计算任务设计。它在兼容性、软件生态和市场应用方面展现出卓越的价值。
博客
别等GPT-4o啦，国产「开源版」GPT-4o 来了！支持全模态、无障碍交流
08-19 850
本文介绍了VITA，通过优化开源模型将视频、图像、文本和音频理解整合到一个统一的框架中，并提供了先进的交互体验。VITA通过非唤醒交互和音频中断交互为开源社区开创了新颖的多模态交互方式。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值