recover517的博客

要有执行力

排序:
默认
按更新时间
按访问量

学习计划打卡表

虽然本人作为一名php工程师,也会点前端啥的,但是还是觉得学无止境,语言都是相通的,学习别的语言的解决方案,别的语言的算法都可以提升自己的能力,于是在这里写一个学习目标目录,记录自己学习的每一步。 有些下面列举目前为止想要深入,或要学习的部分。 必学 网络通信协议() 计算机底层知...

2018-08-14 20:12:49

阅读数:3

评论数:0

PHP+RabbitMQ尝试

作为教育软件,学生与老师与家长的实时互动变得尤为重要,打算给系统加入一个消息中间件,用于实时通知老师学生正在发生的行为。 准备阶段 服务器:mac (因为是先在本机进行实验性测试) php框架: Yaf MQ: RabbitMQ3.7.7 Publisher: ph...

2018-08-12 14:19:31

阅读数:8

评论数:0

Canvas中判断鼠标对于不规则图形的事件监听

在使用echarts的过程中发现,echarts中的不规则图形,对于鼠标的事件监听是非常的准确的。 以前的我非常愚蠢的以为,任何图形的事件判断只是去判断canvas图形所在的一个近似大小的矩形中进行的判断。 通过现象看本质,echarts中的事件实现并不是我想想的那样。于是去搜索了一下资料...

2018-08-12 10:50:24

阅读数:17

评论数:0

postgres数据同步到elasticsearch

公司的题库系统数据量较大,通常用户会对题目题干进行模糊查询,postgres的like查询效率低下,考虑采用elasticsearch优化查询方案。 参考 https://www.jianshu.com/p/629f698a7c58 环境如下: mac postgres ...

2018-07-22 13:40:51

阅读数:57

评论数:0

postgres导入备份出现'无效的命令\N'

在使用pg_dump对数据库进行备份的时候,到出成默认的格式,导致插入数据时,提示无效的命令\N 解决方法:使用custom格式导出,然后用pg_restore导入。 导出 pg_dump -F custom -U username -d dbname -h host -p port -...

2018-07-18 11:00:16

阅读数:52

评论数:0

大数据学习之路(十三)——HBASE分布式搭建

接下来,我们直接搭建hbase完全分布式 参考 [ http://hbase.apache.org/book.html#fully_dist ] 首先,我们停掉之前搭建的单节点hbase 节点分布配置 服务器 NN JN DN ZK ZKFC RM ...

2018-07-07 16:17:17

阅读数:187

评论数:0

大数据学习之路(十二)——HBASE单节点搭建

现在开始搭建HBASE的单节点 HBASE依赖于Zookeeper,但是不需要担心,我们的单机虽然没有Zookeeper,但是hbase自带了zookeeper。 文档:[http://hbase.apache.org/book.html#quickstart] HBASE的单机文档也是...

2018-07-07 15:16:27

阅读数:100

评论数:0

react-native-image-picker点击拍照崩溃

我们在产品中实现安卓原生下载功能时发现,原来引入的第三方组件react-native-image-picker在使用他的拍照功能的时候直接崩溃了。 其中,在实现原生组件之前是可以用的,于是开始研究两者之间的关系,后来发现,两个module都引用了同一个jar包。 这个是我们添加的依...

2018-07-07 14:49:33

阅读数:72

评论数:0

大数据学习之路(十一)——MapReduce实战(TF-IDF)

本次项目必须在完全部分下执行,单机或者伪分布应该都执行不了,会提示找不到文件。 项目介绍:TF-IDF TF-IDF是一种统计方法,用以评估一字词对于一个文件集或一个语料库中的其中一份文件的重要程度。字词的重要性随着它在文件中出现的次数成正比增加,但同时会随着它在语料库中出现...

2018-07-03 22:20:12

阅读数:35

评论数:0

大数据学习之路(十)——MapReduce实战(PageRank)

这次的项目比较前面的几个会相对复杂点 项目介绍:这是一个统计页面权重值的MapReduce   PageRank通过网络浩瀚的超链接关系来确定一个页面的等级。Google把从A页面到B页面的链接解释为A页面给B页面投票,Google根据投票来源(甚至来源的来源,即链接到A页面的页面)和...

2018-07-01 22:02:04

阅读数:23

评论数:0

大数据学习之路(九)——MapReduce实战(好友推荐 recommendation of friend)

项目介绍:给用户推荐好友,新好友来源你的好友关系网 描述有点抽象,举个栗子:   A是你的好友,B是你的好友,C不是你的好友,但却是A和B的好友,系统推测你们可能是认识的人,于是将C当做你的新好友推荐给你。 数据(明星云集): 小明 老王 如花 林志玲 老王 小明 凤姐 如花...

2018-07-01 15:07:56

阅读数:39

评论数:0

大数据学习之路(八)——MapReduce实战(hot weather top2)

之前的WordCount,比较简单,就只上了代码,接下来稍微复杂一点的项目,将会记录整个项目编写过程的思路 项目介绍:统计每年,每月最热的两天的温度 数据: 1949-10-01 14:21:02 34c 1949-10-02 14:01:02 36c 1950-01-01 11:2...

2018-07-01 11:16:04

阅读数:30

评论数:0

大数据学习之路(七)——学习小结

个人目前学习的总结,如有问题,发现的时候会修正,用于个人回顾,有错误的地方欢迎留言指出 通过前几篇的学习 hadoop单节点伪分布式 hadoop完全分布式 hadoop完全分布式高可用(HA) zookeeper yarn高可用 hdfs MapReduce 了解了hadoop基本...

2018-06-30 19:35:05

阅读数:107

评论数:0

大数据学习之路(六)——MapReduce(simple WordCount)

终于开始写代码了 先从配置idea开发环境开始 参考博文 [ https://blog.csdn.net/u010171031/article/details/53024516 ] 注意,src文件夹下需配置以下文件,我是用伪分布式测试的,电脑有点吃不消 core-site.xm...

2018-06-29 21:22:51

阅读数:22

评论数:0

hadoop问题总汇

1. 在mac伪分布式上运行MapReduce打出的jar包出现如下问题 hadoop jar /path/to/your.jar com.your.mapreduce.class Exception in thread "ma...

2018-06-29 21:00:49

阅读数:19

评论数:0

大数据学习之路(五)——hadoop分布式(yarn)

前几篇讲到的都是关于hdfs的配置与搭建,但是要编写MapReduce,我们还需要搭建yarn 单节点伪分布式配置参考 http://hadoop.apache.org/docs/r2.5.2/hadoop-project-dist/hadoop-common/SingleCluste...

2018-06-29 08:07:57

阅读数:98

评论数:0

生活记录

1. 狗狗拉肚子 配药 1. 强力止泻药 碱式碳酸铋片900mg 一天两次,一次1.5片 2. 益生菌 3. 肠道护理药 硝呋齐特,因为拉出血了,肠粘膜脱落,治疗肠炎(网上据说有狗狗吃死了,慎吃) ...

2018-06-29 07:05:28

阅读数:62

评论数:0

大数据学习之路(四)——hadoop分布式ha(高可用)

拉着狗继续写 现在开始加入zookeeper 参考文章zookeeper https://zookeeper.apache.org/doc/r3.4.12/ 参考文章hadoop ha http://hadoop.apache.org/docs/r2.5.2/hadoop-p...

2018-06-29 06:55:42

阅读数:77

评论数:3

大数据学习之路(三)——hadoop分布式

睡不着觉,拉着狗陪我写博客 开始搭建分布式hdfs环境 参考文章 http://hadoop.apache.org/docs/r2.5.2/hadoop-project-dist/hadoop-common/ClusterSetup.html 建议:为了快速学习,建议同一个网址打开两个...

2018-06-29 06:10:20

阅读数:71

评论数:1

大数据学习之路(二)——hadoop伪分布式

开始搭建hadoop伪分布式 使用机器:macbook pro, jdk我就不说明了,必备 参考文章http://hadoop.apache.org/docs/r2.5.2/hadoop-project-dist/hadoop-common/SingleCluster.html hadoop...

2018-06-28 19:16:59

阅读数:35

评论数:0

提示
确定要删除当前文章?
取消 删除
关闭
关闭