- 博客(3)
- 资源 (5)
- 收藏
- 关注
原创 mysql大量数据快速导入
我遇到的是200g左右的数据,本来需要好几天挂机,在做了优化之后,确实速度提升了很多,但你还是要挂机= .=# 1.不要自动提交SET autocommit=0;SET unique_checks=0;SET foreign_key_checks=0;source xxx;commit; # 注意这一行可以写两行代码,然后挂机# 2.bin_log关闭 + 加快数据刷新到...
2019-07-29 14:07:15 686
原创 python使用jdbc连接hive
At last,I figure it out finally. But I think is not a great idea to use this component to connect hive, it's depend lots of jar package, and you must install jar package with python-java debug REPL(mo...
2019-07-18 16:16:26 4485 10
原创 记一次并发/接口延迟问题的解决思路
博主是做搜索服务的,框架选型tornado,采用单进程+线程部署模式,有一次接口迁移,接了线上大流量请求过来,发现APM日志接口性能明显下降了,然后就开始了疯狂排查。1.接口性能日志,排查APM接口性能监控日志(我部署了这个服务,如果你没有,你在接口层面打文件日志监测接口性能也可以)2.系统层面,排查Linux层面TIME_WAIT的情况,因为一个request进来的时候,一定有个端口跟你ht...
2019-07-08 11:02:28 2823 1
phantomjs自动化测试demo
2018-07-13
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人