![](https://img-blog.csdnimg.cn/20201014180756757.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据产业分析专栏
jiezhu2007
这个作者很懒,什么都没留下…
展开
-
大数据几个思考
1,平台选数据仓库还是hadoop甘特把大数据定义为三个V(高容量,髙速度,多类型),主要讲的是数据量大的问题,传统的数据库在处理结构化,容量有限的数据有非常大的性能优势。碰到数据量大到一定程度,且对实时性要求不高的话,hadoop平台在稳定性方面有很大优势。传统数据仓库普遍存在价格高,稳定性一般的问题。 2,no SQL的含义开源一直争论的No SQL,有不同的...原创 2013-06-01 00:06:51 · 149 阅读 · 0 评论 -
开源软件使用3个level
越来越多的公司,越来越多的个人开始使用开源软件。hadoop ecosystem之所以有今天的繁荣当能是因为搭上了大数据的兴起之风,但是更重要奠基它的是一开始的开源策略。使用开源软件也分多个level。level 1 :会用懂原理,会部署,根据实际业务场景配置参数调优,定位简单的系统级的错误。level 2 :能改可以定位代码级别的错误,能修改开源代码,在开源基础上适配简单的...2014-11-09 15:51:14 · 199 阅读 · 0 评论 -
浅论Hadoop应用工作思路
随着企业对大数据越来越重视,hadoop应用达到了前所未有的高度。今天聊聊hadoop应用的工作思路,我想了下以下几方面,和大家一起讨论: 首先最重要的是建立一支以开发人员为主的团队。Hadoop虽然很火,但是还是在初级阶段,开源的东西存在业务不完全匹配,成熟度低等诸多问题。所以不管是什么公司,什么部门,应该建设一支以开发人员为主的团队。立足于能读懂开源代码,能修改bug,可以根据...2014-11-09 16:21:17 · 126 阅读 · 0 评论 -
搜索简史
搜索简史2016-11-12 朱洁 大数据和云计算技术现在的同学很难想象没有搜索引擎的日子,国内的百度,国外的Google,Bing基本成为互联网的唯一入口,上网的第一件事是搜索一下。 回想整个互联网,关于信息获取,可以分为这么几个阶段: 1)门户网站 20世纪末的时候大家还玩的是门户网站。全世界出名的网站就那么几个,国外Yahoo,国内S...原创 2016-12-03 16:34:16 · 192 阅读 · 0 评论 -
喜大普奔,《大数据架构详解》一书 登陆 当当,京东热卖榜
2016-11-27 朱洁 大数据和云计算技术最近加班太多,“江郎才尽了”,这周不想写博客了,休息下。 讲点高兴的事情,我的新书《大数据架构详解》登陆当当,京东热卖榜。 1、先看当当: 计算机类,新书热卖榜 第七名! 2、京东 大数据和云计算类 热卖榜 第14位(不止新书,统计所有的,刚上架一个月,这个还行。 最后,感谢各...2016-12-04 18:03:47 · 162 阅读 · 0 评论 -
过早优化是万恶之源
Don’t Cut Yourself: Code Optimization as a Double-Edged Sword。中文翻译:过早优化是万恶之源。 代码优化的好处多多,但是这并不意味着所有的代码都需要进行优化,有时过度的优化反而适得其反——费时、费力、不讨好。 “现代计算机科学的鼻祖”Donald Knuth曾说过“过早的优化是万恶之源”,因为:让正确的程序更快,要比让快速...2014-11-22 15:23:44 · 319 阅读 · 0 评论 -
闲聊乐视
2016-12-11 朱洁 大数据和云计算技术1、为什么讨论乐视 乐视这几年一直是新闻话题的中心。上个月乐视手机供应链缺钱的消息传出来,贾老板一封邮件将事件推向高潮,一下子乐视成为了全民话题。 为什么写一写对乐视的看法,锻炼和坚持自己的独立批判思维非常重要,不要人云亦云。也欢迎大家一起讨论。:) 2、乐视现在内部情况到底如何? 乐视最近坏...2016-12-11 15:52:38 · 191 阅读 · 0 评论 -
归来的微软
2015-12-27 朱洁 hadoop技术学习 微软历史上一共3任ceo,很好的将微软分为3个时代。盖茨时代,微软是桌面时代的霸主,当时的微软如日中天,是一个赚钱机器,windows系列桌面占有率超过了90%,微软太成功,以至于被美国政府盯上,上世纪末、本世纪初,曾在其本土遭到了被称为史上最大规模的一场反垄断官司,微软差点被一分为二。进入鲍尔默时代,恰好是互联...2016-01-02 10:02:31 · 171 阅读 · 0 评论 -
BDTC 2016参会感受
2016-12-18 朱洁 大数据和云计算技术中国大数据技术大会(BDTC)的前身是Hadoop中国云计算大会(Hadoop in China,HiC),从08年举办,今年是第9界。2016中国大数据技术大会在12月8日-10日在北京举行,主办单位是计算机学会。 在国内,这个算是大数据领域比较大的会,我也是连续参加这个会。相关的会议报道很多了,我主要讲下个人感...2016-12-22 22:52:13 · 177 阅读 · 0 评论 -
AWS和Oracle的战争
原创 2016-12-22 朱洁 大数据和云计算技术1、云上数据库战争 今年年初,Oracle首席技术官Larry Ellison野心勃勃地将矛头对准了AWS,暗示数据库巨头Oracle会成为云计算领域的领导者。 在今年的AWS re:Invent大会上,AWS首席执行官Andy Jassy对此做出了回击。Jassy在主题演讲中将AWS的能力称为“超能”...2016-12-24 08:06:36 · 693 阅读 · 0 评论 -
闲聊共享单车
2017-01-01 朱洁 大数据和云计算技术2016年现象级产品,首推共享单车。 说起最早推共享单车的是政府,政府从公益出发,十几年也不温不火。 摩拜/ofo推出的无桩共享单车,可以随借随还,车上安装GPS,SIM卡,嵌入式芯片,让一辆单车智能化,用户用手机可以扫描二维码可以随借随还。是一个典型的用新技术解决传统行业的不便利,提升易用性。互联网思维的一...2017-01-01 17:15:11 · 431 阅读 · 0 评论 -
滴滴背后的大数据应用
2017-01-07 朱洁 大数据和云计算技术前言:这是一篇大数据应用文章,不涉及高深技术,适合大数据入门的同学了解大数据能干什么,所有数据/消息全部来源公开网络。 先聊个最近的消息,近年来发展最快的公司滴滴传言裁员,消息真假难辨。网络传言:“滴滴出行可能正在进行成立4年多以来最大规模的一次裁员。有多个信息源对36氪称,最近滴滴正在裁员;甚至有知情人士告知36氪...2017-01-08 15:54:29 · 4080 阅读 · 0 评论 -
探讨微软的混合云
2016-03-06 朱洁 hadoop技术学习AWS坚持公有云,只给五角大楼提供过私有云方案,其他的客户只能使用公有云解决方案。同在西雅图的微软,选择了一条完全不同的道路,首先是结合自己在企业领域长期耕耘的优势,提供了更多的paas,saas服务,其次是重点推动混合云,希望通过不同的策略,来战胜aws。 客户选择混合云的理由会非常多,比如关键数据不能存放在公有...2016-03-13 19:55:37 · 185 阅读 · 0 评论 -
运营商都有哪些数据?
这两年大数据很火,那究竟谁掌握了用户更多的数据?腾讯?百度?不是,是运营商,是移动,联通,电信这些运营商。我们举例来看看运营商都有哪些用户数据。1、位置数据无线是用一个个蜂窝来划分区域的,一个蜂窝叫一个小区,所以只要电话在线,就需要注册到一个个小区中去,知道了小区就知道了用户所在的位置。通过小区切换就能计算出用户移动的轨迹,这个就是用户的位置数据。 2、上网数据用户通过运营商...2014-11-07 21:30:41 · 2327 阅读 · 0 评论 -
大数据应用--实时路况数据
现在手机上装个导航软件,如高德地图,百度地图等等都有实时路况显示,导航和道路规划可以根据实时路况来实施,从而动态躲避拥堵,为出行节省时间,为了显示实时路况就必须有路况数据,今天来说下实时数据的获取方法。一般来说有以下几种典型数据来源获取方法:1、实时路况数据最主要的收集方式,还是浮动车。这个浮动车包括出租车、长途客车、物流车辆等等,其中主力就是在城市市区里活动的出租车。在这些车辆上安装的G...原创 2014-11-07 21:27:22 · 2529 阅读 · 0 评论 -
博客导读
2016-11-06 朱洁 大数据和云计算技术闲来无事,简单整理下博客,方便大家阅读。具体的不解释,自己看。 一、胡扯乱聊 一万小时定律写给自己的2014年中回顾2015年完成的第一本英文原著书写给自己定2015第二次机器革命《大数据架构详解》答疑(一)为什么写《大数据架构详解》这本书书籍推荐:《大数据架构详解》,京东已...2016-11-12 10:21:50 · 151 阅读 · 0 评论 -
IT几个发展趋势总结
1;PC出货量下降百分之七,平板电脑出货挤占了PC的出货。随着穿戴设备发展,职能家电等各种智能的发展。在可以遇见的未来,PC的功能会逐渐弱化,有一天PC会变成专业设备。2;对消费者电子设备来说,硬盘死期将至。硬盘的今天就是磁带的昨天。传统硬盘,速度和体积已经严重不适合消费者电子领域使用。3;随着云计算发展。摩尔定义已经不合时宜,云会释放终端性能增长的压力。一个更快的网络和更丰富的应用才是大...原创 2013-06-05 23:32:52 · 164 阅读 · 0 评论 -
大数据和虚拟化结合是方向
1.一体机是当前大数据的主要方式当前数据库重要的玩家如oracle,ibm,teradata,基本推出一体机解决方案。所谓一体机即软硬件一体化,软件厂商对特定硬件做特定调优,以追求性能最优。一体机对客户的重要价值是,集成度高,性能好,使用和维护简单,缩短工程交付时间。同时一体机由于软硬件绑定在一起,客户无法使用已有的硬件,存在重复投资,投资高的缺点。一体机是目前技术限制下一种选择,短时间...2013-08-10 21:45:17 · 356 阅读 · 0 评论 -
IT发展趋势杂谈
1;PC出货量下降百分之七,平板电脑出货挤占了PC的出货。随着穿戴设备发展,职能家电等各种智能的发展。在可以遇见的未来,PC的功能会逐渐弱化,有一天PC会变成专业设备。2;对消费者电子设备来说,硬盘死期将至。硬盘的今天就是磁带的昨天。传统硬盘,速度和体积已经严重不适合消费者电子领域使用。3;随着云计算发展。摩尔定义已经不合时宜,云会释放终端性能增长的压力。一个更快的网络和更丰富的应用才...2014-03-09 16:08:29 · 92 阅读 · 0 评论 -
大数据争议杂谈
1,平台选数据仓库还是hadoop甘特把大数据定义为三个V(高容量,髙速度,多类型),主要讲的是数据量大的问题,传统的数据库在处理结构化,容量有限的数据有非常大的性能优势。碰到数据量大到一定程度,且对实时性要求不高的话,hadoop平台在稳定性方面有很大优势。传统数据仓库普遍存在价格高,稳定性一般的问题。 2,no SQL的含义开源一直争论的No SQL,有不同的解读,有开始的...2014-03-09 16:10:30 · 166 阅读 · 0 评论 -
大数据十年内会成为屌丝产业
先从马云说起,马云最近几件事很闹心,阿里的股票从最高的119跌倒了81块,跌去了三分之一,年初取消了全员红包搞得民怨沸腾,天猫总裁乔峰被免职,网上传言纷纷,甚至还有小道消息是天猫团队周末不加班导致。经过前面两年吹泡泡之后,淘宝还是要终归回归企业发展的本质来,就是要赚钱。前面我写过一篇文章《泼一泼阿里的冷水,阿里几大隐忧》,我还是维持我当时的看法淘宝仍能估值太高。 为什么说到淘宝,是想说说...2015-03-14 12:32:42 · 173 阅读 · 0 评论 -
量子通讯扫盲
2016-08-20 朱洁 大数据和云计算技术2016年8月16日凌晨1:41,备受瞩目的中国首颗量子科学实验卫星“墨子”在酒泉成功发射升空。中国发射全球首颗量子卫星,这不仅仅是中国迈出构建量子通信网络的第一步,也是一个非常好的用于做远距离纠缠分发和量子隐形传态的基础科学研究的平台,为探索自由空间量子通信技术打下良好的基础。 量子是什么? 量子(quan...原创 2016-10-02 15:58:20 · 214 阅读 · 0 评论 -
"Google X"大起底
2016-09-25 朱洁 大数据和云计算技术“Google X”来源 Google X,是谷歌公司最神秘的一个部门,位于美国旧金山的一处秘密地点,该实验室的机密程度堪比CIA,仅少数几位谷歌高层掌握情况,在其中工作的人,都是谷歌从其他高科技公司、各大高校和科研院所挖过来的顶级专家。“Google X”有一份列举了100项未来高科技创意的清单,其中甚至包括太空电梯。 ...2016-10-02 15:59:56 · 148 阅读 · 0 评论 -
macOS Sierra:Apple统一os体验实质性一步
2016-10-03 朱洁 大数据和云计算技术在6月14日凌晨举行的WWDC2016苹果全球开发者大会上,苹果针对MAC系列电脑发布了全新macOS。直到今天终于全面推送,可以正式使用,我更新尝试了一下,还不错! 关于桌面OS有一个很小的细节可能大家并没在意,那就是苹果终于将沿用了长达15年之久的OS X操作系统正式更名为macOS(最新版系统名称为Sierra)...2016-10-04 14:30:27 · 230 阅读 · 0 评论 -
深度学习的本质探究??
原创 2016-10-07 朱洁 大数据和云计算技术1、人工智能浪潮又起 标志型事件,阿尔法围棋(AlphaGo)战胜李世石。 alphago是一款围棋人工智能程序,由谷歌(Google)旗下DeepMind公司的戴维·西尔弗、艾佳·黄和戴密斯·哈萨比斯与他们的团队开发,这个程序利用“价值网络”去计算局面,用“策略网络”去选择下子。2015年10月阿尔法围...2016-10-16 16:33:20 · 724 阅读 · 0 评论 -
非易失性存储一览
2016-10-16 朱洁 大数据和云计算技术RAM:随机存取存储器(random access memory,RAM)又称作“随机存储器”,是与CPU直接交换数据的内部存储器,也叫主存(内存)。它可以随时读写,而且速度很快,通常作为操作系统或其他正在运行中的程序的临时数据存储媒介。 内存速度非常快,但是同时也有一个特性就是易失性,当电源关闭时RAM不能保留数据。...2016-10-16 16:36:31 · 2428 阅读 · 1 评论 -
为什么写《大数据架构详解》这本书
花了差不多一年半时间,牺牲了每个周末,费了九牛二虎之力,终于完成个人人生的第一本书《大数据架构详解:从数据获取到深度学习》。整个过程其实挺痛苦的,时常想放弃,幸好坚持下来了。 回想这我500天,我常问自己两个问题: 1)我问自己为什么选择去写一本大数据技术的书,是什么让自己坚持?我感觉可能更多的原因是实践大数据架构和技术这么多年,对技术的理解到一定的程度,...2016-10-22 12:36:07 · 296 阅读 · 0 评论 -
计算机系统结构变革在即?
2016-10-23 朱洁 大数据和云计算技术15年6月,intel正式宣布167亿美元收购FPGA生产商Altera。此交易为该公司有史以来涉及金额最大的一次收购案例。167亿美金不是小数目,intel 为啥花这么高的代价收购一家FPGA厂商?对x86架构的计算机系统结构会带来什么影响?看我们慢慢分析。 FPGA是什么? FPGA(Field-Progr...2016-10-23 16:31:54 · 203 阅读 · 0 评论 -
解码混合云
今天聊聊混合云。 一、为什么需要混合云 企业规模的大小不一样,对技术和安全的掌控的力度不一样,所以导致云有多种部署模式。根据部署的方式不同,分为公有云,私有云和混合云等几种。 公有云老大AWS一直对私有云和混合云不是很感冒,认为公有云才是趋势。当前能知道的只有美国中央情报局(CIA)的6亿美元大单,其他鲜见AWS在私有云上有动作。 另一家云大厂,微软一上来就...2017-06-27 21:23:02 · 300 阅读 · 0 评论