1、需要从mysql导出600w数据,程序读取的话由于机房ip限制等原因,最终还是选择sql命令导出:
一、load data local infile "F:\ios2.txt" into table test1(uid);需要先登录到mysql
一般没有权限,可以搜索--secure-file-priv解决;没有亲自尝试
二、mysql -uuser -ppassword -hip -Pport --default-character-set=utf8 -e "use database;select uid from test1 where ****;" >> /data/table0.txt
2、导出文件到本地:
1、ssh相对简单,直接工具操作
2、secureCRT:sudo sz -be /data/a.txt
su rz -be
secureCrt上传文件
sz中的s意为send(发送),告诉客户端,我(服务器)要发送文件 send to cilent,就等同于客户端在下载。
rz中的r意为received(接收),告诉客户端,我(服务器)要接收文件 received by cilent,就等同于客户端在上传
3、单独log4j记录回调日志,方便后续统计:
log4j.logger.com.yy.TestAction=INFO,TestAction
log4j.appender.TestAction = org.apache.log4j.DailyRollingFileAppender
log4j.appender.TestAction.Threshold = INFO
log4j.appender.TestAction.Append = true
log4j.appender.TestAction.BufferedIO = false
log4j.appender.TestAction.File = /data/log/java/TestAction.log
log4j.appender.TestAction.Encoding = UTF-8
log4j.appender.TestAction.layout = org.apache.log4j.PatternLayout
log4j.appender.TestAction.layout.ConversionPattern = [%-5p]%d{ISO8601}, [%t]%-c{1}, %m%n
TestAction的info级别日志,全部记录在文件:/data/log/java/TestAction.log中