大数据计算技术的演变历程、大数据挖掘技术

计算技术演变历程: 1、离线计算Mapreduce:大数据兴趣初期,满足海量数据的离线批处理需求; 2、流式计算Storm:满足电子商务,新闻聚合等、实时监管等实时统计需求,以数据流的驱动来触发计算,时效性高,一般可以达到秒级 3、实时计算Spark:满足海量数据的深度挖掘中机器学习/模...

2017-03-21 09:35:04

阅读数 311

评论数 0

大数据的数据体系、采集、存储技术总结

大数据的数据体系,自底向上包括四个层次: 1 数据采集与清洗层 2 数据加工与汇聚层 3 数据能力与开放层(体现平台即服务PAAS的概念) 4 数据价值与应用层   大数据采集技术:实时与离线采集 实时流处理模式:通过K-V查询接口,以流处理模式,逐条传输、ETL,融合并入库至业...

2017-03-20 17:09:20

阅读数 1218

评论数 0

产品经理之MVP的作用:验证两个假设

MVP即:最小可行产品,它的作用是验证两个假设: 1、价值假设:产品对客户是价值的 2、增长假设:客户愿意为这项需求买单。

2017-03-17 14:19:29

阅读数 144

评论数 0

Route Add命令如何持久存储?

 在命行上加上参数P即可: >route add 135.34.0.0 mask 255.255.0.0 135.34.9.254 -p   -p 与 add 命令共同使用时,指定路由被添加到注册表并在启动 TCP/IP 协议的时候初始化 IP 路由表。默认情况下,...

2017-03-02 10:58:12

阅读数 274

评论数 0

DOM对象转JQuery对象,JQM 动态加载后链接重绘

$.mobile.showPageLoadingMsg();     $.get('getmore.asp?iCount=' +iCount, function(data,status){     document.getElementById("dvDisc&qu...

2017-02-04 13:10:25

阅读数 23

评论数 0

一般处理程序(ashx)默认不存取Session

今天在一般处理程序(ashx)中取Session,发现总是得到null。 百度了一下,原来:一般处理程序(ashx)默认不存取Session。 归纳下ASPX和ASHX的区别: 1、一般处理程序(ashx)默认不存取Session; 2、一般处理程序(ashx)没有用网页模板引擎;  ...

2017-01-09 16:56:40

阅读数 67

评论数 0

RegisterStartupScript(key, script) 等价于body.onload=f(){}里的内容?!

关于RegisterClientScriptBlock和RegisterStartupScript的区别,网上很多贴子是这么解释的: 这两个方法唯一的不同之处在于向“何处”注册脚本块。          RegisterClientScriptBlock(key, script) 在 fo...

2017-01-04 14:34:49

阅读数 17

评论数 0

一中国富人到美国旅游……

一中国富人到美国旅游,用610万人民币换100万美元,在美国吃住花掉10万美元,第二年回国了,因为人民币持续贬值,现在90万美元换回620万人民币。中国人在美国白玩一年还倒挣10万人民币,高高兴兴地回家了! 美国统计局也很高兴,因为GDP增长了   ...

2016-11-21 16:46:42

阅读数 17

评论数 0

那些号称年收入几十万上百万日子过得紧巴巴的并不是装那个什么啊……

网络上经常看到有人说年收入几十万上百万日子过得紧巴巴的  后来我终于想明白了这个道理 挣钱是一种能力,花钱也是一种能力 有些人挣钱能力强,花钱能力却很弱 别人花100元就能办到事,他花10000也办不到 所以收入高也可能生活质量差 而我们一般只关注了一个人的挣钱能力却忽视了一个人用钱的能力好...

2016-09-22 16:05:39

阅读数 58

评论数 0

程序员是一个让人越干越蠢的暗黑职业?!

今天突然发现: 程序员,软件开发是一个让人越干越蠢的暗黑职业啊! 因为编程会让人智商下降……   道理很简单,因为计算机是人发明的,人让计算机来模拟、学习人的思维,这样计算机的思维能力只是人的思维的最低级形式 而程序员的工作却要求人去按计算机程序的思维模式去思考 也就是说,程序员每...

2016-08-20 21:42:02

阅读数 52

评论数 0

添加外键,报ORA-02270: 此列列表的唯一关键字或主键不匹配

原来外键参考的那个列必须是主键!

2016-07-22 14:53:23

阅读数 430

评论数 0

学习笔记:JQuery $(document).ready()

1、$(document).ready(function(){})可以简写成$(function(){}); 2、window.onload不能同时编写多个,如果有多个window.onload方法,只会执行一个 ,而$(document).ready()可以同时编写多个,并且都可以得到执行 ...

2015-12-16 09:31:30

阅读数 14

评论数 0

学习笔记之:REST WEB服务

Rest是英语 Representative State Transfer(表征状态转移)的缩写。 Rest定义了一组体系架构原则,一个基本思想就是把所有Web服务都看做是网络上的资源,这些资源可以被URI来唯一的定位和表示。具体来讲,一个符合REST风格的WEB服务往往都遵从如下4个基本设计...

2015-12-15 16:30:31

阅读数 21

评论数 0

学习笔记之:设计模式之外观模式Facade

Facade: 外表,假象的意思,如: Cracks began to show in his facade of self-confidence.   该模式解决的问题 为了降低复杂性,常常将系统划分为若干个子系统。但是如何做到各个系统之间的通信和相互依赖关系达到最小呢?   解决...

2015-12-13 18:08:16

阅读数 15

评论数 0

Javascript:getElementById 和getElementsByName方法的区别

以前一直没注意到这两个函数的区别: getElementById返回的是一个对象,而getElementsByName返回的是一个对象数组。这是非常合理的,因为在一个文档中,同名的DOM对象可能有好几个,比如Radio对象,Name都是一样的,但ID不同(ID只能唯一)的DOM对象有好几个。...

2015-12-12 22:00:05

阅读数 12

评论数 0

初步了解了下node.js 一点感受

听说Node.JS很久了。今天初步了解了下(真的是很初步),大致看了下安装,Hello word,连接ACCESS Oracle数据库的代码。   初步感觉Node.js 开式模式并不象想象的是一种傻瓜式的框架,所以也产生了疑惑:之前听说Node.js的一大优点是因为采用Javascrip...

2015-12-10 18:57:38

阅读数 12

评论数 0

今天让VB(非VB.NET)的ListBox给坑了!

用VB6做了一个批量处理工具。今天收到用户反馈说文件数超过30000就不执行了。   第一反映是自己是不是在该用long(VB中long是32位整数)的地方误用了Integer(VB6中Integer是16位整数,范围-32768 ~ 32767)溢出错误。花了几小时检查代码,没有发现确切的...

2015-12-09 15:53:22

阅读数 28

评论数 0

不应再将移动开发视为原有开发在手机端的延伸

十几年的程序开发,经历了从PC软件到C/S系统,再到WEB开发(包括B/S)系统。   当移动互联网出现时,我很自然而又有点轻蔑的想,技术上,这不就是WEB向手机端的延伸吗?无非就是改改CSS,适应下小屏,最多,因为智能手机的主流Android 和IPhone下的浏览器对HTML5有了很好的...

2015-12-08 21:35:20

阅读数 13

评论数 0

为什么牛羊不能团结起来消灭虎狼?

为什么牛羊不能团结起来消灭虎狼? 小时候看《动物世界》《人与自然》之类的节目,看到猎食者捕食食草动物,心理总有这样的遗憾和一种对食草动物恨其不争的不平。因为牛羊是天生的懦弱者吗?   以后,渐渐学到了一些科学理论,诸如进化论,也了解了一些经济学原理,发现这一切都是很合理的:生物的竞争既发生在...

2015-12-07 21:05:47

阅读数 25

评论数 0

那些程序员出身的畅销书作家

《火星救援》是最近正在热印的影片,据说好评如潮。影片中有一个情节,主人公(植物学家)使用90年代的火星探测器与地球进行沟通,只能使用有限的几个字母,最终他想到了使用16进制。看到这个情节,不禁会心一笑:作者不愧也是码家出身啊!看看百度百科上这样介绍原著作者的: 安迪·威尔 (Andy Weir...

2015-12-06 22:11:26

阅读数 49

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭