- 博客(6)
- 收藏
- 关注
原创 mysql批量插入
我试了一下使用本地的idea连接云服务器的mysql,插入10W条语句。发现用了1h+。所以这种方法就根本不行。 参考别人的博客,选择了批量插入。 批量插入500W条数据 单个sql语句保存为txt的大小为60+W 需要使用SQLyog,直接粘贴到linux窗口会死机 SQLyog中单行不能太长,不然会报语法错误。 尝试了下一次插入1000W条,楼主使用的是EverEdit,直接粘贴就会死机。所以...
2019-07-02 19:20:54
150
原创 0.8.2.2 kafka安装
1.githup是上下载kafka 0.8.2.2版本的源码然后生成tgz包放到3台Linux中 2.修改server.properties 第一台主机cm01 broker.id=0 # 相当于zookeeper中的myid,id不能相同 port=9092 # 默认值 host.name=cm01 zookeeper.connect=cm01:2181,cm02:2181,cm03:2181 ...
2019-06-21 14:16:45
438
原创 hbase 1.2-cdh5.8.3安装
1.下载安装 进入该网址archive.cloudera.com.html hbase-1.2.0-cdh5.8.3.tar.gz 解压到/usr/local: tar -zxvf hbase-1.2.0-cdh5.8.3.tar.gz -C /usr/local/hbase 创建目录 mkdir /usr/local/hbase/tmp 创建hbase用户及用户组 groupadd hba...
2019-05-23 23:13:44
446
原创 hadoop2.6.0-cdh5.8.3安装
1.vim /etc/hosts 添加: 192.168.12.51 cm01 192.168.6.92 cm02 192.168.9.54 cm03 2.vim /etc/hostname 改成相应的主机名 在对应机器上执行hostname cm0i (i=1,2,3),是hostname生效 3.配置免密 ssh-keygen ssh-copy-id root@[主机名] ss...
2019-05-23 17:11:28
531
2
原创 spark-1.6.0-cdh5.8.3安装
下载tar包: spark-1.6.0-cdh5.8.3.tar.gz scala-2.11.7.tgz scala安装: 将scala下载到/usr/scala中并解压 在/etc/profile export SCALA_HOME=/usr/scala/scala-2.11.7 并将scala的path添加到环境变量中 进入到/usr/bin目录中并建立软连接:ln -s /usr/scal...
2019-05-23 17:11:21
545
1
原创 CentOS7.2 mysql-5.7.26安装
1.下载地址: https://www.mysql.com/downloads/ 选择community server 点击download 选择版本5.7.26 点击下载 mysql-5.7.26-linux-glibc2.12-x86_64.tar.gz 选择 no thanks 2.安装mysql 将tar包放到/usr/local 中 tar -xvzf mysql-5.7.26-linu...
2019-05-06 18:35:15
1445
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人