性能数据:导入1684472条数据用时42.87s(i5-6300hq,8G内存)
故事:
曾经年少无知,在某度云下载了无数的废弃裤子下来自己整合,大部分格式如下图①
最开始的时候自己写java方法用多线程导入数据库,
后来因为经常出错,又发现navicat有导入功能,转navicat,
后来又因为数据量太大,无奈等不起,
继续上网找方法,发现mysql有LOAD DATA LOCAL INFILE这个方法可以导入数据到数据库,
速度还蛮快的,所以….
LOAD DATA LOCAL INFILE "D:/200.txt"
INTO TABLE wangyi
FIELDS TERMINATED BY ';' ENCLOSED BY '"' LINES TERMINATED BY '\r\n';
这已经是一年多以前的故事了,现在发现ELK更快,性能更好。。