2019年12月_木凡空

12月 11月 10月 09月

原创查看Zookeeper版本

echo stat|nc localhost 2181

2019-12-27 12:27:50 2869

原创 Spark写数据到HBase

import org.apache.hadoop.hbase.client.{Put, Result}import org.apache.hadoop.hbase.io.ImmutableBytesWritableimport org.apache.hadoop.hbase.mapreduce.TableOutputFormatimport org.apache.hadoop.hbase....

2019-12-11 22:50:11 85

原创 MySQL允许远程登录

1、示例用户名： root 密码：Abcd%123452、允许远程登录grant all privileges on *.* to 'root'@'%' identified by 'Abcd%12345' with grant option;

2019-12-11 16:54:31 81

原创 URL传递中文参数转码问题

一、URL示例 http://111.222.333.444/test/getInfo?name=张三&age=18二、解决中文乱码1、设置request的字符编码方式request.setCharacterEncoding("UTF-8");2、字符串转码String rqName = request.getParameter("name");...

2019-12-11 16:37:32 913

原创 Java带json的post请求

HttpURLConnection conn=null; try{ String strUrl="http://172.18.8.192:8000/trainAndPredict/"; URL url=new URL(strUrl); conn=(HttpURLConnection)url.o...

2019-12-11 12:41:32 306

原创 Hadoop查看snappy压缩文件

hadoop fs -D io.compression.codec.snappy.native=true -text /data/test/part-00000.snappy |head -10

2019-12-10 09:47:10 2529

原创启动和退出hive

一、启动hive hive （在hive的bin目录下执行）二、退出hive （1）quit退出hive，推荐 hive>quit; （2）exit退出hive hive> exit; （exit会影响之前的使用，需要下一句kill掉hadoo...

2019-12-08 19:12:49 25505

原创 firewalld防火墙命令

1.安装防火墙 yum install firewalld firewalld-config2.查看防火墙状态 systemctl status firewalld3.开启防火墙 systemctl start firewalld4.关闭防火墙 systemctl stop firewalld5.设置防火墙开机...

2019-12-08 18:52:40 222

原创提交运行spark程序

#!/bin/bash#当前日期nowDate=`date +%Y%m%d/%H:%M:%S`echo "执行时间：${nowDate}"#当前目录baseDir=$(cd `dirname $0`;pwd)echo "当前目录：${baseDir}"#jar包jar_file=${baseDir}/Test.jarif [ -f ${jar_file} ];then...

2019-12-08 14:20:35 121