- 博客(12)
- 资源 (10)
- 收藏
- 关注
RSS订阅原创 elasticsearch集群快照使用共享文件系统
安装fuse yum install glib2-devel 安装sshfs ln -sv /usr/local/lib/libfuse.so.2/usr/lib/libfuse.so.2 ldconfig sshfs root@otherNodeIp:/export/servers/elasticsearch-2.1.2/bakup/bakdata/mn
2017-08-23 17:25:29
1282
1
原创 elasticsearch命令大全
创建索引： curl –XPUT 'http://localhost:9200/blog' –d'{ "settings" : { "number_of_shards" : 3, "number_of_replicas" : 1 }}' curl –XPUT 'http://localhost:9200/blog/_mapping/a
2017-08-23 17:18:26
407
转载 elasticsearch配置详解
因为安全问题elasticsearch不让用root用户直接运行，所以要创建新用户第一步：liunx创建新用户 adduser XXX 然后给创建的用户加密码passwd XXX 输入两次密码。第二步：切换刚才创建的用户su XXX 然后执行elasticsearch 会显示Permissiondenied权限不足。第三步：给新建的XXX赋权限，chmod 77
2017-08-23 17:14:19
2232
原创 git常用命令
$ git log --pretty=oneline格式化每行显示log$ git reset --hard HEAD^恢复至上一版本,工作区的文件也会更改$ git reflog查看历史git操作记录$ git diff HEAD -- readme.txt查看工作区与版本库的区别$ git checkout -- readme.txt撤销操作返回暂存区的文件
2017-08-23 16:24:30
181
转载 hive数据导入
（1）、从本地文件系统中导入数据到hive表；（2）、从HDFS上导入数据到Hive表；（3）、从别的表中查询出相应的数据并导入到Hive表中；（4）、在创建表的时候通过从别的表中查询出相应的记录并插入到所创建的表中。我会对每一种数据的导入进行实际的操作，因为纯粹的文字让人看起来很枯燥，而且学起来也很抽象。好了，开始操作！ 一、从本地文件系统中导入数据到Hive表
2017-08-22 16:58:27
264
原创 hive基础操作
新建hive表hive> > > create table xxx_result( > id string, > zzz int, > yyy string) > ROW FORMATDELIMITED > FIELDS TERMINATEDBY '\t' > STORED AS TEXTFILE; hiv
2017-08-22 15:19:27
264
原创 pig-hive-elasticsearch
#!/usr/bin/env bashset -xset -etarget_date=`date -d last-day +%Y-%m-%d`echo 'it works!'echo "target_date = " $target_datehive -hiveconf target_date=$target_date -f preprocess.hqlpig \-use
2017-08-21 16:32:23
527
转载 hadoop-hive
一、UDF1、背景：Hive是基于Hadoop中的MapReduce，提供HQL查询的数据仓库。hive是一个很开放的系统，很多内容都支持用户定制，包括：a）文件格式：Text File，Sequence Fileb）内存中的数据格式： Java Integer/String, hadoop IntWritable/Textc）用户提供的 map/reduce 脚本：不管什么语
2017-08-21 14:23:46
258
原创 mysql登录不上的问题
# /etc/init.d/mysqld stop # mysqld_safe --user=mysql --skip-grant-tables --skip-networking & # mysql -u root mysql mysql> UPDATE user SET Password=PASSWORD(’newpassword’) where USER=’root’
2017-08-07 11:33:25
1445
原创 hadoop配置
1.hadoop-env.sh:修改JAVA_HOME2.core-site.xml配置hdfs的namenode地址与hadoop运行时使用的文件地址name:fs.defaultFS value="dfs://xxxxx"name:hadoop.tmp.dir value="/xxxxx"3.hdfs-site.xmlname:dfs.repl
2017-08-05 20:32:10
276
转载 algorithm negotiation failed
ssh client 报 algorithm negotiation failed的解决方法之一 修改sshd的配置文件 /etc/ssh/sshd_config 在配置文件中添加： Ciphers aes128-cbc,aes192-cbc,aes256-cbc,aes128-ctr,aes192-ctr,aes256-ctr,3des-cbc,arcfour128,arcfouss
2017-08-03 10:56:38
1357
myeclipse2017破解插件
2017-09-21
html5 demo
2017-09-19
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人