chengxie9142-CSDN博客

转载在EMR上部署storm on yarn的配置步骤

创建好环境之后，剩余的步骤与在本地集群部署相同。注：zookeeper服务地址可以在系统中找到 ssh到副节点可以参考：https://github.com/Yelp/mrjob/wiki/Accessing-Elastic-MapReduce-slave-nodes-via...

2017-07-14 15:35:00 176

转载 parquet文件读写本地测试

根据这里的代码，修改了bug,完善了parquet嵌套型数据的读写，以及hdfs的本地模拟。 package com.test.parquet;import org.apache.hadoop.conf.Configuration;import org.apache.hadoo...

2016-08-19 09:40:00 795

转载 ubuntu定时任务

Linux中，周期执行的任务一般由cron这个守护进程来处理。cron读取一个或多个配置文件，这些配置文件中包含了命令行及其调用时间。cron的配置文件称为“crontab”，是“cron table”的简写。回到顶部 1. cron服务【Ubuntu环境】查看cron状态 ...

2016-08-07 15:57:00 118

转载 jar,war,ear区别（转）

以最终客户的角度来看，JAR文件就是一种封装，他们不需要知道jar文件中有多少个.class文件，每个文件中的功能与作用，同样可以得到他们希望的结果。除jar以外对于J2EE来说还有war和ear。区别见下表： JAR WAR EAR ...

2016-08-06 15:52:00 79

转载 storm配置项

配置项配置说明 storm.zookeeper.servers ZooKeeper服务器列表 storm.zookeeper.port ZooKeeper连接端口 stor...

2016-07-28 16:11:00 46

转载监督学习应用，梯度下降

原博客地址：http://www.cnblogs.com/fxjwind/p/3626173.html Andrew Ng机器学习公开课笔记 -- 线性回归和梯度下降网易公开课，监督学习应用.梯度下降 notes，http://cs229.stanford.edu/notes/cs...

2016-07-22 14:50:00 64

转载 thinkphp入门需要注意的东西

2016-07-20 18:01:00 86

转载 JAVA中HttpClient4.3包的基本常识

HttpClient 4.3和3完全不兼容。所以要注意的地方很多。基本请求的大概步骤； 1、首先，先创建一个客户端。 <pre name="code" class="java"...

2016-07-20 18:01:00 124

转载 Aprior算法的一点个人理解

关联规则挖掘是数据挖掘中十分基础的一部分东西，而aprior算法一般作为关联规则挖掘算法学习的敲门砖。具体的算法细节网上有许多的文章博客可供参考，这里推荐一篇：http://www.open-open.com/lib/view/open1440840966419.html。本人也是通过这篇文章...

2016-07-20 18:01:00 145