linux
strwolf
这个作者很懒,什么都没留下…
展开
-
满足lisheng需求 linux添加环境变量 linux批处理 2016.04.25小结
看了下博客上的日期,有11天没有更新博客了,我觉得这个还是个比较适合我的习惯,还是要坚持下去!对学习知识的记忆非常好!那就从今天开始,重新开始博客!1、昨天重新改了credit_results的字段,增加了一个loan_number字段,然后按照lisheng要求,加强了健壮性,他如果给我loan_number,我就按他给我的loan_number返给他,他如果不给我loan_number,我原创 2016-04-26 09:12:56 · 501 阅读 · 0 评论 -
2017.01.03回顾 less命令 python类 super机制
1、more命令我不知道怎么查询带空格的字串,more +/aaa bbb str.log,这样只能查询到aaa字串,后来运维告诉了我另外一个命令叫less,less类似于vi可以直接进到日志文件中,但是日志文件并未被全部加载到内存中,里面的查找方法也是/aaa bbb,但是支持空格,这点比较好,而且可以自己定位到查找点过后,前后翻动,从这个事情上也可以看出来,有时候自己baidu搜索学习,并没有原创 2017-01-04 10:24:06 · 510 阅读 · 0 评论 -
linux安装cx_Oracle模块
数据库版本为11.2,linux环境64位去http://www.oracle.com/technetwork/topics/linuxx86-64soft-092277.html下载oracle的精简版客户端,instantclient-basic-linux.x64-11.2.0.4.0.zip和instantclient-sdk-linux.x64-11.2.0.4.0.zip,下载需要登录原创 2016-06-06 18:47:53 · 5343 阅读 · 0 评论 -
2016.11.03回顾 more excel交换两列
1、上午一来就是开会,然后我开始找tongdun数据库的问题,然后找到差不多就是吃饭时间了!2、linux more命令查询 more +/关键字 文件名,这种会输出查询点的前两行和后面若干行,还有一个指令好像可以高亮,我记不得了3、excel交换两列,鼠标移动到边框十字处,shift拖动4、听说有个叫金字塔的软件可以股票自动下单,不知道真假5、最后继续看了下uqer的精华帖,了解原创 2016-11-04 09:24:54 · 808 阅读 · 0 评论 -
xlwt sendmail linux/windows风格回车 crontab 软连接 python时间格式化 2016.08.25回顾
昨天主要就是做keyco的需求,一天之中分三个时间点,自动发送邮件,邮件的附件是excel,所以我首先需要学习一个python中写入excel的模块,我使用的是一个叫xlwt的模块,excel的数据来自于SQL查询,最后取出结果,撰写正确的SQL查询语句,MySQLdb,fetchall()方法取到的是一个二元的tuple,表达了一个二维的结果表,然后将结果集写入excel,再以邮件附件的形式把e原创 2016-08-26 11:27:35 · 437 阅读 · 0 评论 -
工作目录 python格式化字符串 logging不输出 linux其他用户执行权限 2016.08.19回顾
今天的工作主要是测试v4 model,发现了一些小BUG,也验证了一些可以使用的机制,总结如下:1、有一个进程工作目录,和脚本所在目录,脚本所在目录写了一个相对路径,但是跑起来的时候,是进程工作目录下去查找,应该是在manage.py下,这一点我需要进一步研究2、SQL中insert into语句的时候,python格式化字符串,对于python中的数值变量值,格式化替代的时候可以用%s,原创 2016-08-19 18:00:48 · 929 阅读 · 0 评论 -
centos安装LAMP composer laravel 2016.08.08回顾
1、昨天早上基本就干了一个事情,就是把重新计算loan_amount和重跑模型合并成了一个接口!做了部分测试,SQL返回结果为空,是可以直接做if判断的,印象中只有一次没成功,原因不明,等下次能复现再说!另外一点就是不用跑一句SQL,关闭重建游标,一个游标可以一直用!2、下午主要的工作的就是在内网centos服务器上部署php的laravel环境,花了整个下午的时间还没弄好,但是部署的事情还是原创 2016-08-09 14:14:08 · 613 阅读 · 0 评论 -
select 1,import,insert into 2016.08.18回顾
昨天主要就是完成了v4 model开发的剩余工作,包括接口内部逻辑,黑名单sql封装成函数,调用顺序控制,结果组合,结果写进数据库等等,搭建好了测试环境,从中也学习了一些小技巧1、连了表,select *,1中的*只能放前面,*放后面就只能每个表单独指定,比如table_name.*,而1就是生成一个value为1的字段,未指定字段名,默认和value相同,而不是group by中的1代表第一原创 2016-08-19 09:44:41 · 461 阅读 · 0 评论 -
lamp部署 find mysql命令行 time() input date iptables 2016.06.12回顾
1、lamp在centos下可以一键部署,参考http://www.centoscn.com/CentosServer/www/2015/0226/4742.html,wget的参数–no-check-certificate是访问https,-O xxxx.zip参数是下载下来后重命名,shell中用通配符,chmod +x *.sh,全部执行权限,./lamp.sh 2>&1 | tee lamp原创 2016-06-13 10:13:33 · 521 阅读 · 0 评论 -
linux重定向 case when嵌套 2016.06.14回顾
1、修改loan_amount逻辑,用sql来写,太累赘,有很多重复的逻辑,只是参数不同,完全可以在数据库中创建function,然后再调用就可以了,但是目前的复杂度,写成sql还是勉强能hold住的,但是我改进了loan_amount部分逻辑的sql,用了case when嵌套,层次比以前打散拿进去的条件清晰多了!在开发数据库上也进行了一定量的测试,再次审计代码发现问题不大。 2、关于openv原创 2016-06-15 09:35:01 · 830 阅读 · 0 评论 -
echarts php linux vim 2016.05.20回顾
这个本来应该是上周五就完成的,但是上周五时间没把握好,从这周起4点就开始着手周总结和周五总结,现在对上周五进行补充回顾。上午处理了风控系统的问题,他妈的,权限又没弄对,应该是运维用root权限去跑过程序生成了root权限的txt,重启后使我没有写入权限,我还以为是自己程序逻辑的问题,然后写日志也没问题,无论是logging和print配合sys.stdout.flush()都可以输出,直接我确实不原创 2016-05-23 09:39:34 · 343 阅读 · 0 评论 -
echarts sys.stdout.flush() 2016.05.19回顾
上午主要看了下echarts,决定用php来作服务端语言,也想重新回顾一下php,回顾了一下jquery,AJAX请求,获取数据,返回到前台,用echarts生成图表然后就是后台缓冲区的问题,python -u这个参数听说是不启动缓冲区,但是我没成功,我觉得是因为python manage.py会多生成一个进程,而子进程没有-u参数,所以失败,后来我综合考虑采用了sys.stdout.flush(原创 2016-05-20 09:36:00 · 937 阅读 · 0 评论 -
centos装pandas 2016.05.06回顾
这个本来应该周五写的,拖了一个周末,现在对周五的工作总计如下:1、周五开始看梯度下降法,有一些前置高数的知识,看了一点,本周要继续功克,目标是最后自己实现一遍logistic算法2、周五还做了一个很重要的事情就是在开发服务器上把trigger服务调通了,记录一下过程,同事已经封装成了相应的类,我只负责调用,需要在centos下安装几个模块,numpypandaspython-L原创 2016-05-09 14:42:05 · 2246 阅读 · 0 评论 -
mysql按字段根据某条件去重 nohup挂后台无法输出日志 系统时间查询 2016.05.18回顾
1、上午主要是做两个老板要的统计,其中要涉及到distinct on按字段去重的用法,我发现mysql居然没有这个语法,mysql按字段去重,可以用group by,但这样就是按照系统某种规则取相同的一条记录,比如说我的需求是按某字段去重,而且取时间最新(自增id最大)的一条,group by就不能满足需求了,好像mysql似乎不能一步到位,要嵌套个子查询比如SELECT * FROM lli.cr原创 2016-05-19 09:38:33 · 1002 阅读 · 0 评论 -
MySQLdb错误 编码问题 linux系统粘贴板 python取环境变量 2016.05.27回顾
1、上午主要是找了要采购的书籍和开会,但是我觉得方向不应该太杂了,就是做好信用评分卡就已经够吃年薪50W的饭了,目前我觉得我的方向还是应该吃死信用评分卡!顺便还下了下信用评分群里面的资料,那些资料也是蛮不错的,可以为我以后自建评分卡做好铺垫! 2、下午开始改以前系统的编码以及研究编码相关问题,首先顺带解决了,import MySQLdb失败的问题,报错为ImportError: libmysqlc原创 2016-05-27 17:48:58 · 396 阅读 · 0 评论 -
python编码问题 极大似然 2016.05.04回顾
1、上午对迁移的数据进行检查,最后终于发现没有错了,可以迁移到生产环境2、对部署到生产环境的程序再次做了测试,发给运维上架3、把loan_amount逻辑以sql方式给到it4、再一次地学习logistic regression推导部分,梯度下降法求解,里面有很多数学概念,我都遗忘了,这一块进度很慢,甚至都在怀疑自己不适合去理解这些算法5、对于那天export PYTHONIOEN原创 2016-05-05 09:36:46 · 554 阅读 · 0 评论 -
nohup后台gbk编码错误 2016.04.29回顾
1、上午浪费时间去听了个培训,老板叫去的,没办法,然而对我这方面来说并没有什么实质性的帮助2、看了一下别人做的数据挖掘、数据分析的案例,我觉得那些才是nb有干货的东西,我未来也是想做一些很有干货,和商业紧密联系的东西!3、下午又想了logistic最后结果值的问题,想了1个来小时吧4、最后的时间,我发现我程序的bug,nohup挂后台,会报错,我发现是python还有一个ioencod原创 2016-05-03 11:42:31 · 1782 阅读 · 0 评论 -
编译安装 mv iptables service 环境变量 xftp nohup 2016.04.27回顾
昨天风控系统已经成功部署在centos上,坐等同事那边ok,就可以测试了,把昨天遇到的新知识总结一下。1、昨天安装django直接跑报错,原来要先安装一个yum install sqlite-devel,然后再重新编译安装python,cd到python源码目录./configuremakemake install 2、直接是运维帮忙编译安装的python,我大概看了下,流程应该是去官原创 2016-04-28 11:10:45 · 482 阅读 · 0 评论 -
2017.08.02回顾 centos安装anaconda/xgboost linux操作系统信息 top内存CPU notebook注释 feature多
1、centos下安装anaconda,参考http://devopspy.com/python/anaconda-centos-7/wget https://repo.continuum.io/archive/Anaconda2-4.3.0-Linux-x86_64.shbash Anaconda2-4.3.0-Linux-x86_64.sh #这一步,bash本来就是默原创 2017-08-02 20:51:25 · 877 阅读 · 0 评论