- 博客(6)
- 资源 (1)
- 收藏
- 关注
原创 Hadoop集群重启过程记录
1. brain02~04启动zksu - hadoopsudo service zookeeper-server restart2. brain01~03启动JNsudo service hadoop-hdfs-journalnode restart3. brain01上格式化namenodesudo -u hdfs hadoop namenode
2017-03-31 17:12:22 5250
原创 pyspark读取Mysql数据
pyspark读取Mysql数据:样例code 1:from pyspark.sqlimportSQLContextsqlContext = SQLContext(sc)dataframe_mysql = sqlContext.read.format("jdbc").options(url="jdbc:mysql://127.0.0.1:3306/spark_db", driv
2017-03-29 17:50:43 12339
转载 mysql字符串过滤掉HTML标签的函数
CREATE DEFINER=`root`@`%` FUNCTION `strip_tags`($str text) RETURNS text CHARSET utf8 DETERMINISTICBEGIN DECLARE $start, $end INT DEFAULT 1; LOOP SET $start = LOCATE("
2017-03-29 14:33:01 5598
原创 利用CDH进行spark集群部署
1. 规划:master: brain01worker: brain02、brain03、brain042. 准备工作:2.1 安装Java 1.72.2 设置主机名,编辑/etc/hosts2.3 关闭iptables: service iptables stopchkconfig iptables off2.4 关闭selinux,修改文件/etc/
2017-03-23 16:05:44 6771
原创 elasticsearch问题
1. 远程访问不了9200solution:在elasticsearch.yml中设置:network.host: 0.0.0.0http.cors.enabled: truehttp.cors.allow-origin: "*"2. update遇到问题:scripts of type [inline], operation [update] and lang
2017-03-14 13:22:02 803
原创 Java问题
配置好Java环境变量,却出现错误:which: no java in (/sbin:/usr/sbin:/bin:/usr/bin)[root@ctdn04 elasticsearch]# echo $JAVA_HOME/usr/java/jdk1.7.0_67Solution:ln -s /usr/java/jdk1.7.0_67/bin/java /usr/bin
2017-03-14 11:25:45 267
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人