大数据
文章平均质量分 60
大数据
flyingant9
每天学习一点
展开
-
日志采集方案和集群flume+kafka+elasticsearch
准备工作:1、服务器三台172.16.xx.17172.16.xx.18172.16.xx.192、更改主机名(可选,本机器主机名太长)vi /etc/hostsvi /etc/systemconfig/network3、安装jdk:jdk-8u131-linux-x64.tar.gz1.8版本,不按照会出现莫名错误、jps无法使用配置/etc/profileexport JAVA_HOME=/usr/java/jdk1.8.0_131export JRE_HOME=JAVAHOME原创 2021-09-24 09:36:36 · 437 阅读 · 0 评论 -
mysql导入导出大批量数据和时间测验
本次需要导出表的数据量在1千万,字段约20个。导出:1、navicat客户端(和服务端在同网段,保证传输效率)导出txt,时间10分钟2、mysql 服务器端,outfile导出txt,时间1分多3、mysql 服务器端,mysqldump导出sql,时间2分多mysqldump -uroot -p --databases dsjj --tables test_xx > E:\test_xx.sql导入:1、mysql 服务器端,load data方法导入txt,时间4分多2原创 2021-09-15 09:33:11 · 1711 阅读 · 0 评论