![](https://img-blog.csdnimg.cn/20201014180756724.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Bigdata
文章平均质量分 87
Darcy__
这个作者很懒,什么都没留下…
展开
-
大数据impala+hive/kudu性能测试
前一个月,一直在和师兄做实验室的一个项目,没有时间更新。现把第一阶段结果附上,希望能够帮到更多做类似事情的朋友。源码已经上传至[https://github.com/darcy-shimmer/bigdata_phrase1]里面readme包括详细解释。本次测试我们使用TPCDS标准进行。第一阶段我们主要测试hive&kudu导入数据速度以及impala+hive和impala+k...原创 2018-11-11 21:05:50 · 7061 阅读 · 2 评论 -
ubuntu16.04安装mysql8步骤
2018/11/14最近测试平台需要对mysql进行测试,但是tpcds里面生成的查询语句有的语法MySQL5.7不支持,我们只好换成MySQL8。博主先在本地ubuntu16.04进行了安装。先贴官方文档。因为是ubuntu,所以我们选择APT库,把他下载到本地。博主就是/home/darcy/Download/下面。解压:sudo dpkg -i /home/darcy/Dow...原创 2018-11-14 14:20:28 · 3078 阅读 · 0 评论 -
MySQL8导入数据的报错`secure-file-priv``Permission denied``Incorrect integer value`
2018/11/14MySQL8默认已经安装好了,详情可见博主上篇博文博主的准备工作:用TPCDS工具包,生成好数据,创建好MySQL表。接下来就是导入0数据。如果直接导入,首先我们会遇到这样的一个报错secure-file-priv option so it cannot execute this statement...原创 2018-11-14 23:11:42 · 1256 阅读 · 0 评论 -
`MySQL Daemon failed to start`
2018/11/16我们看下MySQL的配置文件vim /etc/my.cnf二不管,先看一。登陆错误文件在var/log/mysqld.logok,我们进去看看。错误在这儿,xxx文件夹不存在,(为啥他默认是这个???),那我们就修改为空:这个意思是导入导出数据就不需要在指定的文件夹里操作了,个人觉得对我们测试来说很方便,就这样改。...原创 2018-11-16 11:41:28 · 312 阅读 · 0 评论 -
Hadoop3.1.1——全分布式安装以及配置
2019/01/03利用实验室的服务器以及一台主机搭建hadoop雏形。步骤1.时间同步2.修改主机名。3.配置静态IP4.添加hadoop用户5.ssh免密登陆设置6.安装配置JDK7.安装Hadoop配置文件时间同步主节点和分节点之间,时间同步很重要。这里是通过控制时区来实现。用date -R查看当前系统时间运行tzselect依次选择Asia China...原创 2019-01-03 15:00:31 · 762 阅读 · 0 评论