2018年01月_Going_sky

原创 storm

一. 大数据的实时计算框架: Storm 1.Storm是什么? Storm为分布式实时计算提供了一组通用原语,可被用于”流处理”之中,实时处理消息并更新数据库.这是管理列队及工作者集群的另一种方式.Storm也可以被用于”连续计算”,对数据结构做连续查询, 在计算时就将结果以流的形式输出给用户.还可以被用于”分布式RPC”,以并行的方式运行昂贵的运算. Strom可以方便在

2018-01-30 10:05:22 1075

原创 Hadoop HA

一. 为什么需要 HA 和 Federation 1.1单点故障在 Hadoop 2.0 之前，也有若干技术试图解决单点故障的问题，我们在这里做个简短的总结Secondary NameNode: 它不是HA,它是阶段性合并edits和fsimage,以缩短集群启动的时间.当NameNode(以下简称NN)失效时,Secondary并无法立刻提供服务,Secondary NN甚至无法保证

2018-01-25 17:30:06 321

原创 Redis浅谈

1.Redis介绍Reis是一个开源(BSD许可)的,内存中的数据结构存储系统,他可以用作数据库,缓存和消息中间件. 它支持多种类型的数据结构,如字符串(String),散列(hashes),列表(lists), 集合(sets),有序集合(sorted sets)与范围查询,bitmaps， hyperloglogs 和地理空间（geospatial）索引半径查询。 Redis 内置了

2018-01-25 12:49:16 553

原创 cannot delete or update a parent row

当我在mysql删除一个字段时:给我报出,cannot delete or update a parent row后面查了资料, 总结如下: 一:当在Mysql下删除有一个建有外键的表的数据时可能会报此异常，所以可以启动MySql命令行模式，运行如下的sql语句来关闭外键检测：SET FOREIGN_KEY_CHECKS = 0;执行你要的操作后把再把外键检测恢复 SET F

2018-01-24 14:46:19 787

转载 Error configuring application listener of class org.springframework.web.context.ContextLoaderListene

打开工程属性对话框，到Deployment Assembly页面，点击Add选择Jave Build Path Entries把程序用于的Library加入进来根据这几步就可以了

2018-01-24 14:42:27 178

原创事物的理解

MySQL事物: 事物(Transaction):一组SQL语句操作单元,组内所有的SQL语句完成你一个业务逻辑.如果整租成功,意味着全部的SQL都实现.如果其中任何一个失败,意味着整个操作失败. 失败:意味着整个过程没有意义.应当把数据库回到操作前的初始状态. 所以:事物是指逻辑上的一组操作,组成操作的各个单元,要不全成功要不全失败.举个例子: 比如一个下单过程,从个人账户扣除50元

2018-01-24 11:02:16 541

原创推荐系统

序言: - 推荐系统在电子商务领域得到普遍的运用 - 推荐系统本质是销售的一部分 - 在便利店,推荐系统是导购牌，类目货架，是老板娘 - 在超市，推荐系统是导购牌，类目货架，是销售员在电商，推荐系统是什么？不管在便利店,还是超市,或者电商网站,本质上解决两个问题: 1.帮助用户获得想要的商品 A、用户知道自己想要什么商品，在什么位置用户主动的行为

2018-01-22 16:22:19 3438

原创统计学与概率的浅谈

前言: 对于统计学,只是本人的浅谈,还请各位指教. 概率论研究什么呢? 随机现象:不确定性与统计规律性概率论—研究和揭示随机现象的统计规律的科学随机事件机器概率: 特点: 1.可以在相同的条件下重复进行; 2.一次实验之前无法确定具体是哪种结果出现,但能确定所有的可能的结果.概率论: 主要研究随机事件。人们对某些事件发生的可能性高低一般都有直观的认识，所以未经

2018-01-18 17:49:22 6839

原创 SpringBoot解密

啰嗦几句: SpringBoot是为了简化spring应用的创建,运行,调试等而出现的 ,它专注于Spring的应用的开发,而无需过多关注XML的配置, springBoot默认使用Tomcat作为服务器,使用logback提供日志记录SpringBoot提供了一系列的的依赖jar包.可以用maven工具支持,当然也可以用其它熟悉的工具Spring Boot精要: Spring Bo

2018-01-18 16:08:09 519

原创朴素贝叶斯分类算法

本人根据自己所学和网上查资料而总结,因本人水平有限,若有错误,请各位及时指出.介绍:朴素贝叶斯是基于贝叶斯定理与特征条件独立假设的分类方法..最为广泛的两种分类模型是决策模型和朴素贝叶斯模型.和决策模型相比,朴素贝叶斯分类器(NBC)发源古典数学理论,有着坚实的数学基础,以及稳定的分类效率.同时,NBC模型所需估计的参数很少,对缺失数据不太敏感,算法也比较简单.分类问题概述分类一词:顾名思义,把

2018-01-08 17:39:20 349

sky