2018年12月_Ynzo

12月 11月 06月 05月

原创使用mapreduce 将hdfs中的数据导入到到hbase 中

package hbase;import java.text.SimpleDateFormat;import java.util.Date;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.hbase.client.Put;import org.apache.hadoop.hbase.mapre...

2018-12-10 21:25:12 952

原创 Hadoop集群和Hbabse与Zookeeper 启动与关闭需要注意的问题

1：hadoop、ZooKeeper和HBase之间应该按照顺序启动和关闭：启动Hadoop—>启动ZooKeeper集群 —>启动HBase—>停止HBase—>停止ZooKeeper集群—>停止Hadoop。2：怎么启动zookeeper:启动zookeeper在每台机器上运行 bin/zkServer.sh start查看运行状态:bin...

2018-12-10 21:19:15 2728

原创 crontab命令使用文档

基本格式 :* * * * * command分时日月周命令第1列表示分钟1～59 每分钟用*或者 */1表示第2列表示小时1～23（0表示0点）第3列表示日期1～31第4列表示月份1～12第5列标识号星期0～6（0表示星期天）第6列要运行的命令crontab文件的一些例子：30 21 * * * /usr/local/etc/rc.d/...

2018-12-10 21:11:50 335

原创 solr 初步学习代码笔记

FILTER QUERY（fq）:过滤查询,查询的内容会被缓存。sort：排序fl:字段列表df:默认查询字段(text)只要在text这个查询字段中,都可以查询出来相关的字段。copyfile:若直接写字段而不加字段类型的话，默认从text中取相关的字段。indent ：是否格式化debugQuery:调试查询hl:高亮facet：分组统计类似于sql中的...

2018-12-10 20:47:04 222

原创 zookeeper和kafka的启动和关闭顺序

一定要先启动ZooKeeper 再启动Kafka 顺序不可以改变。先关闭kafka ，再关闭zookeeper。 zookeeper启动：分别在三台机器上执行：zkServer.sh start检查ZooKeeper状态：zkServer.sh status关闭：zkServer.sh stop kafka启动（注意必须在kafka的安装主目录下面执行该命令）...

2018-12-10 20:30:16 11300 2

原创二叉树按层遍历基于图的宽度优先搜索的应用二叉树的序列化和反序列化

：这其实是图的宽度优先搜索的应用。比如这棵树按层遍历的结果为：1 2 3 4 5 6 7 8 也就是一层一层按从左到右的顺序打印，这种遍历的方式是用我们熟悉的队列来实现的，但是在面试中，往往要求面试者在按层打印的时候连同行号相关的信息也打印出来。案例二：这道题的难点是如何该换行？其实只需要2个变量，last和nlast,就可以解决这个问题。假设每一层都做从左到右的...

2018-12-10 20:25:30 331

原创 hive 报错：Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. MetaException(me

创建hive表时报如下错Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. MetaException(message:Got exception: java.net.ConnectException Call From Spark11/192.168.xx.xxxto Spark1:9000 ...

2018-12-09 20:24:03 1130