大数据
文章平均质量分 54
无情的搬砖机器
不求甚解
展开
-
磁盘I/O、网络I/O性能测试软件
1、磁盘IO可以使用fio:https://www.cnblogs.com/raykuan/p/6914748.html安装的时候百度教程也很多,比较简单下载下来 ./configure,make,make install即可,但是如果下载了高版本的fio需要升级gcc到4.9,或者使用低版本即可2、iperf3安装教程:https://blog.csdn.net/dylloveyou/article/details/83216462...转载 2021-04-15 22:25:20 · 214 阅读 · 0 评论 -
hive表中的分区字段不能以下划线开头
1、创建一个表,设置存储方式为 PARQUETcreate table fct_test_2(id bigint,name string)partitioned by(`age` string)ROW FORMAT DELIMITEDFIELDS TERMINATED BY ','STORED AS PARQUET;这种格式的数据不能直接导入数据:https://blog.csdn.net/yangshaojun1992/article/details/851242872、那我..原创 2021-03-19 22:08:02 · 1189 阅读 · 0 评论 -
2020-12-28 java连接mongodb和Cassandra数据库
mongodb每个数据库之间是相互独立的,需要在单独的数据库中创建一个子账户,用这个子账户连接mongodb数据库:https://blog.csdn.net/qq_35893120/article/details/100142232设置mongodb连接池、超时等https://www.cnblogs.com/jingjxd/p/7522755.htmljava连接mongodb:https://blog.csdn.net/qq_36760753/article/details/81149077?原创 2020-12-28 11:39:48 · 183 阅读 · 0 评论 -
docker 安装Cassandra配置密码
docker run -d --name cassandra -p 9042:9042 -v /data3/soft/cassandra/cassandra.yaml:/etc/cassandra/cassandra.yaml cassandra参考在宿主机设置配置文件:https://lihaiyu.blog.csdn.net/article/details/111503357参考:https://blog.csdn.net/maestro_t/article/details/97538329?u.原创 2020-12-22 12:49:43 · 1004 阅读 · 0 评论 -
docker安装elasticsearch+kibana+密码配置
https://www.cnblogs.com/lwc1st/p/14060309.html转载 2020-12-22 00:29:32 · 1898 阅读 · 0 评论 -
2020-12-11
1、TypeReference的用法用在JasonUtil.toObj中,传入String,然后转换成需要的对象{"a":["张三","李四","王五"]}public class Test111 { public void testTypeReference(){ List<String> list = new ArrayList<>(); lis...原创 2020-12-11 17:50:38 · 204 阅读 · 0 评论 -
hbase入门
基础概念:https://zhuanlan.zhihu.com/p/145551967?utm_source=wechat_session&utm_medium=social&utm_oi=627651160518168576&utm_campaign=shareopn&s_r=0练习上手:https://www.cnblogs.com/mikevictor07/p/4190208.html转载 2020-12-08 19:42:33 · 175 阅读 · 0 评论 -
Timeline Service V2.0 Reader启动失败
参考:https://blog.csdn.net/Happy_Sunshine_Boy/article/details/108092608可用转载 2020-10-09 08:51:26 · 769 阅读 · 0 评论 -
kettle启动找不到java环境变量
java环境变量配置好了,报错,甚至跑到data-integration下去找java路径了,气死参考:https://blog.csdn.net/qmwxw/article/details/93721405编辑spoon.bat添加set JAVA_HOME=D:\software_pos\software2\Java\jdk1.8.0_152 #指定自己的安装路径set PENTAHO_JAVA_HOME=%JAVA_HOME%重新启动,成功...转载 2020-09-17 14:31:12 · 4398 阅读 · 1 评论 -
jdbc连接数据库
1、虚拟机搭建centOS6.8,参考链接。2、navicat下载免安装版即可,参考链接。3、navicat链接数据库:① sql数据库在本机,连接名自己随便起一个就行,如何是localhost表示连接本地的sql服务器和127.0.0.1一样的,sql的默认端口为3306,然后填写自己电脑登录名和密码即可。② sql server在虚拟机上,连接的主机填写虚拟机的ip地址,使用ifconfig查看即可,然后用户名和密码一样填写自己设置的即可。可能会报错,navicatvicat连接..原创 2020-07-16 11:34:36 · 306 阅读 · 0 评论 -
Maven创建项目生成jar包并执行
刚接触java和maven,记录一下入门的学习记录任务:该任务中,如何编写接口类网上比较容易找到,本文主要记录一下使用maven-assembly-plugin插件打包jar并运行部分,项目结构:一、各个文件介绍1、pom.xml文件解析:① maven-assembly-plugin插件主要将项目中用到的所有jar包打包成一个大的jar包,使用的时候需要设置mainClass为main函数所在的包和类,本文中为person.DemoMain。出了maven-assenm..原创 2020-07-12 16:50:14 · 1895 阅读 · 0 评论 -
Maven3种打包方式之一maven-assembly-plugin的使用
https://blog.csdn.net/qq_32736999/article/details/93395246转载 2020-07-13 12:04:03 · 4543 阅读 · 1 评论