大数据与云计算

于 2012-10-29 16:30:54 发布
阅读量2.5w 收藏 11
点赞数 3
分类专栏： 数据库 云计算/物联网
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/broadview2006/article/details/8124906
版权
本文探讨了大数据与云计算之间的紧密联系。大数据关注数据的采集、分析和挖掘，侧重信息的积累；而云计算则聚焦于计算能力，提供IT基础设施支持。二者相互依赖，大数据为云计算提供了应用场景，而云计算为大数据提供了强大的处理能力。
摘要由CSDN通过智能技术生成

近几年来，云计算受到学术界和工业界的热捧，随后，大数据横空出世，更是炙手可热。那么，大数据和云计算之间是什么关系呢？

从整体上看，大数据与云计算是相辅相成的

大数据着眼于“数据”，关注实际业务，提供数据采集分析挖掘，看重的是信息积淀，即数据存储能力。

云计算着眼于“计算”，关注 IT 解决方案，提供 IT 基础架构，看重的是计算能力，即数据处理能力。

没有大数据的信息积淀，则云计算的计算能力再强大，也难以找到用武之地；

没有云计算的处理能力，则大数据的信息积淀再丰富，也终究只是镜花水月。

从技术上看，大数据根植于云计算

云计算关键技术中的海量数据存储技术、海量数据管理技术、MapReduce编程模型，都是大数据技术的基础。

大数据技术与云计算有相同，也有差异

大数据技术与云计算相结合会带来什么？

 

本文节选自《大数据——大价值、大机遇、大变革(全彩)》

李志刚 主编

电子工业出版社出版

 

博文视点
关注
专栏目录
博客
涵盖从Java 5到Java 11所有重要特性，让Java学习不再难！
02-07 4634
曾经，网络上流传着这样一套视频，无数学员通过这套视频学会了Java，进入了软件开发领域~~这套视频就是“Java无难事”。如今，为了方便大家更好地学习，也跟上当前Java发展更新的步伐，作者基于之前的视频内容，做了更新和完善，在广度和深度上进行了扩展，并继承“让Java学习再也不是难事”的思想，推出了新书《Java无难事》。—— 从Java5到Java11 ——Java，这门编程语言界的常青树，凭借着简单性、面向对象、分布式、健壮性、安全性、平台独立与可移植性、多线程、动态性等特点 ，深受程
博客
离开大厂为什么会“返贫”？比《逆行人生》更真实~~
08-16 471
近期热播的电影《逆行人生》讲述了曾经的互联网大厂中层高志垒，因意气用事成为了“家里蹲”，却没想到人生从此“开入逆行道”的故事！电影播出后陷入巨大争议，不少人认为这部电影在消费苦难，刻意把一个人的生活拍得那么无辜、受害~~一个高设定的中产家庭真的能落魄到这种地步吗？抛开电影中主角的具体经历，在现实中，确实有不少离开大厂“返贫”的怪现象！那么，大厂“返贫”到底有哪些不为人知的底层逻辑呢？《大厂之外》作者刘飞老师就此采访了互联网行业的“老炮儿”、见证过很多离开大厂盲目折腾的真实案例的沈浩翔老师，让我们一
博客
首部顶级AI科学家创作的纯正科幻小说，一个元宇宙和AI时代的全新科学幻想！
08-09 389
自2023 年起，深度学习和大模型的浪潮，终于超脱学院里形而上的争论，展示了它大规模改变现实世界的可能性，而改变的方式，可能和我们的想象完全不同。在这个新的时代中，每个个体的“独一无二”不再是与生俱来的，而是需要把握先机，以极大的勇气去开辟的。当平静的生活被诡谲的彗星所打破，当艰难的抉择关系到人类的命运，当虚拟世界成为最后的避风港，在无解的阳谋之下，顶尖的头脑们如何破局？在此背景下，很多事情都会发生变化，人的价值体系和价值评判方式，人和人之间的互动模式，人和人之间的相互关系，都将产生巨大的改变。
博客
如何构建一个大模型？看完你就知道了！
07-29 1045
第 7 章和第 8 章围绕大语言模型的应用和评估开展介绍，包括将大语言模型与外部工具和知 识源进行连接的 LangChain 框架、大语言模型在智能代理及多模态大模型等方面的研究和应用情 况，以及传统的语言模型评估方式、针对大语言模型使用的各类评估方法。例如：提示词：复旦大学有几个校区？强化学习（Reinforcement Learning，RL）阶段根据数十万用户给出的提示词，利用前一阶段训练的奖励模型，给出 SFT 模型对用户提示词补全结果的质量评估，并与语言模型建模目标综合得到更好的效果。
博客
爆火的无人驾驶萝卜快跑，背后有哪些隐忧？
07-16 1293
就在不久前的上海世界人工智能大会上，澳大利亚科学院院士、新南威尔士大学教授托比·沃尔什，在出席“人工智能新进展与社会科学的未来”论坛时指出，要深入研究人工智能发展给人类带来的影响，尤其是在就业方面，并不是所有工作人工智能都做得比人类好，在谋划未来、创意工作和提供情绪价值等方面，人类具有不可取代的优势。不得不说，现在的人工智能技术，特别是那些超大的智能模型，简直就是坐上了火箭，嗖嗖地往前冲，对经济、社会还有咱们的日常生活，影响大得不得了！人工智能的发展必然会带来生产力的提升，对劳动力的替代也是必然的。
博客
人类警惕！AI是个大骗子！
07-12 693
幸运的是，医学界拒绝了辛顿的建议，继续培训新的放射科医生。我认为，如果你是一名放射科医生，你就像那只已经跑到悬崖边缘的郊狼，因为还没有往下看，所以它没有意识到脚下已经没有路了。书中从图灵的梦想开始，谈到人机共存的未来，娓娓道来，深刻且生动有趣。从关于人工智能中的“人工”这一讨论中，我们可以得出一个最终结论，那就是在人类智能中的“人”可能是我们与我们正在制造的能力越来越强的人工制品的机器之间最重要的区别。我对那些人，尤其是从事人工智能和道德规范工作的员工表示同情， 他们似乎受到了不成比例的影响。
博客
大模型时代的基础架构，大模型算力中心建设指南重磅来袭！
07-02 697
在这个例子中，成本为100元的T恤是最畅销商品，成本为80元的T恤是高毛利商品，它们的区别在于前者内在的原料价值创造了最畅销商品，带来了更高的性价比，而后者外在的思想价值创造了高毛利商品。这类商品不会有很强的需求和很大的销售量，但毛利率很高。在最畅销商品和高毛利商品的“挡拆”战术中，一旦客户与最畅销商品发生接触，就是高毛利商品赚取利润的最佳时机，因为客户会将二者进行比较。最畅销商品和高毛利商品并不是两类单独的商品，即新奇商品、流行商品、基本商品和专业化商品中的任何一个都同时包含最畅销商品和高毛利商品。
博客
程序员“计算机之子“的职场反思
06-26 1383
Winter 是我认识的最有传奇性，也最有趣的程序员之一。他在前端工程师领域颇有知名度，是 JavaScript 专家，主要的作品是 Weex 框架。如果在搜索引擎中搜 Winter，会出来一个看似没头没脑的“计算机之子”的称呼。这是因为他的生日是 10 月 24 日，正好是“程序员节”（1024 是 2 的 10 次方）。Winter 从小就用机器码编程了，那个年代还是用打孔纸的。从哈尔滨工程大学毕业后，他加入微软亚洲研究院，后来加入过 “人才辈出”的盛大创新院，又在 2012 年加入了阿里巴巴，职
博客
红队实战宝典之内网渗透测试
06-19 990
本书是以内网攻防中红队的视角编写的，从内网的基础攻击原理出发，讲解红队的攻击思路和主流渗透测试工具的使用方法，旨在帮助安全行业从业人员建立和完善技术知识体系，掌握完整的后渗透流程和攻击手段。由于本书的编写初衷是为具有一定基础的渗透测试工程师和红队人员梳理常用技巧，所以，本书主要通过命令和工具介绍各种内网渗透测试方法，同时分析了一部分工具的工作原理。一场真实的、有目的的网络攻击，通常包括对业务的控制、修改和对数据的获取等，而对业务的攻击，一般都是通过本书介绍的方法拿到权限后展开的。
博客
端午节，来看看这本应景的“龙舟书”吧！
06-11 550
如果你曾经尝试过使用AI工具，但是始终没有找到能够助力自己工作生活的地方，或者只停留于简单的问答，于是就慢慢放下了，那么这本书或许可以帮你看见使用AI工具的真正魅力，让你掌握ChatGPT的高阶玩法，看到它的更多应用场景，真正让它成为为自己赋能的AI助手！比如第四章的编程提效部分，或许你会用AI生成片段代码，但通过龙舟书的案例，你会了解到如何用AI实现一个模块、甚至实现项目级开发的操作逻辑和具体方法。在23年3月，我们也成立了自己的AI社群"AI俱乐部"，也是在这个时期，我们全公司都加入了AI赛道！
博客
100倍增长的背后：华为IPD实施20年
06-03 777
不仅有严谨的理论和方法阐述，更大量剖析了经典商业公司产品的成功案例，阐述了他们成功的背后逻辑是如何反应了IPD的本质，同时也基于大家司空见惯的日常商业案例进行了分析，让读者更容易理解IPD关于产品的业务本质和商业经营的核心。华为坚持IPD变革20多年，不仅构建了产品研发领域的世界级竞争力、更是开启了从此持续变革的序幕，培养了一大批熟知变革方法的干部队伍和企业文化，让华为尝到了变革的甜头，从此华为就开始不断革自己的命、直到今天也未有停止过。华为创始人任正非说过：华为没有成功、只有成长和对常识的遵守。
博客
被众多AI大佬看好的具身智能到底是什么？它凭什么成为下一个AI浪潮？
05-27 1535
通过比较智能体和具身智能，我们不仅能够更好地理解具身智能的独特性和价值，而且看到了一个全新的视角：智能是如何通过与环境的互动来发展和适应的。具身智能理论让我们想起人类自身的特性，我们的智能不仅来源于大脑的思维过程，还深深根植于我们的身体及我们与外部世界的交互。具身智能的核心观点是，认知和智能行为是大脑、身体、环境相互作用的结果，体现了智能体通过物理互动来学习和适应环境的能力。感知与交互：智能体的感知和交互很有规律，而具身智能喜欢与环境实时互动，它的感知和行为是在不断变化的环境中进行的。
博客
数字经济 + 人工智能最大的商业机会不是在互联网上……
05-20 950
因为，今天中国农业已经不仅仅涉及单一的种养殖的事情了，还涉及农业组织、土壤问题、种业研发、种植技术、植保技术、采收技术、品控技术、深加工、营销及IP 打造、全渠道运营、物流供应链、文化赋能、一二三产融合、产业资本、政策配套等，同时还涉及农村产业结构、返乡创业、农民老龄化、新农人培养、产业转型升级等。（2） 家庭农场带动的一二三产融合模式 ：城市周边的乡村，是很难实现规模化的农业的，如果单靠第一产业，很难支撑农业的发展，稳定种地农民的心，要一二三产融合发展，才能在同一片土地上，实现不同商业模式的收益。
博客
亿级流量下通用的高并发架构设计
05-13 930
Proxy收到业务服务的数据库操作请求后，根据请求中的SQL语句进行归类，将属于写操作的请求（如insert/delete/update语句）转发到数据库Master，将属于读操作的请求（如select语句）转发到数据库任意一个Slave，完成读/写分离的路由。数据库承受的高并发请求压力，主要来自读请求。我们可以把数据库按照读/写请求分成专门负责处理写请求的数据库（写库）和专门负责处理读请求的数据库（读库），让所有的写请求都落到写库，写库将写请求处理后的最新数据同步到读库，所有的读请求都从读库中读取数据。
博客
豆瓣8.7分，30000人都在阅读的量化用户体验实操书全面更新！
05-07 563
这些示例中的行为、态度和情感都是可以被度量的。来自不同专业和领域的关注如何提高用户体验的人将会从本书获益，包括可用性和用户体验专业人员、交互设计师、信息架构师、服务设计师、产品设计师、Web 设计师和开发人员、软件开发人员、平面设计师，以及市场营销和市场研究专业人员，还有项目和产品经理等。这本书适用于任何对改进不同类型产品或服务的用户体验感兴趣的人，无论这些产品是消费类产品、计算机系统、应用程序、网站、服务，还是其他任何类型的物品，只要是人使用的产品，就可以度量与使用该产品有关的用户体验。
博客
一本书了解AI的下一个风口：AI Agent
04-28 581
随着技术的飞速发展，我们正站在一个新的转折点上，AI Agent（AI智能体，简称智能体）作为AI技术发展的新风口，正逐渐揭开神秘面纱，预示着一个全新的智能时代到来。它们将不再是被动的执行者，而是我们生活中的主动参与者，可以理解我们的语言，预测我们的需求，并在多个任务中提供个性化的帮助。智能体将不再是单一功能的应用程序，而是能够跨平台、跨任务的智能伙伴，可以根据我们的需求和偏好，提供更精准和更高效的帮助。我们需要制定相应的法律法规，确保智能体技术的发展在伦理和法律的框架内进行，并加强监管，保护用户的权益。
博客
一本书精通推荐算法，轻松搞定入门、面试、进阶
04-16 644
精通推荐算法：核心模块+经典模型+代码详解》一书主要介绍推荐算法技术，覆盖召回、粗排、精排和重排等模块，目的是让读者熟悉推荐算法的全部链路，加深体系化理解，并掌握关键技术细节。它能帮助你掌握推荐算法的整体架构、每个核心模块的知识框架，以及一些工作必备的经典模型，同时，能帮助你深入理解它们的出发点和具体实现方案，在实际工作中融会贯通。同时，推荐系统链路很长，包括召回、粗排、精排和重排等诸多模块，如何掌握整体架构，并深入每个模块理解其细节，就成为一件困难且重要的事。（3）模型经典，代表性强。
博客
一本书了解AI的下一个风口：AI Agent
04-09 667
随着技术的飞速发展，我们正站在一个新的转折点上，AI Agent（AI智能体，简称智能体）作为AI技术发展的新风口，正逐渐揭开神秘面纱，预示着一个全新的智能时代到来。它们将不再是被动的执行者，而是我们生活中的主动参与者，可以理解我们的语言，预测我们的需求，并在多个任务中提供个性化的帮助。智能体将不再是单一功能的应用程序，而是能够跨平台、跨任务的智能伙伴，可以根据我们的需求和偏好，提供更精准和更高效的帮助。我们需要制定相应的法律法规，确保智能体技术的发展在伦理和法律的框架内进行，并加强监管，保护用户的权益。
博客
野心、梦想与科幻——浅谈外星殖民与软件工程
03-26 1091
这本书完美融合价值和创新的软件架构选择，旨在让业务决策者和技术团队成员学会通过协作来清晰地理解自身在战略层面面临的问题，并确定理想的架构制定方法，无论该方法是分布式微服务、模块化良好的单体，还是介于两者之间的粗粒度服务。软件架构专家Vaughn Vernon和Tomasz Jaskuła展示了如何基于需求和目标做出平衡的架构决策，而非盲目跟风，从而聚焦于价值和创新，交付更具可演进性的系统，并避免代价高昂的错误。考虑到新的交付机制和收入模式，现有的产品可能是创新的催化剂，能够带来比昨天更大的价值。
博客
万众期待，催更5年，《码农翻身2》强势来袭！！！
03-19 1326
再比如，对于“编程语言的巅峰”这一节，如果你对基本的数组、条件分支、函数都不了解，就无法领略汇编语言的厉害之处。现在《码农翻身2》终于来了，之所以拖了这么长的时间，主要是因为中间“插播”了另外一本书——《半小时漫画计算机》，该书使用纯漫画的方式来讲解计算机基础知识，这对我来说是一个全新的尝试，花费了我不少的时间和精力。所以，我在写文章的时候也有意把枯燥乏味的技术包装一下，变成好玩有趣的故事，在故事中让主人公不断遇到问题，不断制造悬念，吸引大家看下去，不知不觉就把技术掌握了。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值