- 博客(14)
- 资源 (3)
- 收藏
- 关注
RSS订阅原创 linux grep工作常用
本文主要是工作中grep的常见使用：grep -c ‘text’ filename(log指定text行数统计)工作中我们往往要统计日志中某些字符串（一行行）的统计信息， 一般 grep ‘text’ filename | wc -l 其实： grep -c ‘text’ filename 更简单直接统计行数$ grep -c "go" demo_text6When you want do
2017-08-31 20:58:28
3135
原创 linux工作中软件运行安装常见问题
本文主要内容是使用linux软件安装 以及运行时常出现的一些问题，主要如下：sudo apt-get update(Unable to fetch some archives问题)soure . 的区别export LD_LIBRARY_PATH使用(.so文件not found) .bashrcldconfigstring | bash使用（将字符串转为可以执行的bash命令）pip
2017-08-31 20:09:47
4272
原创 linux进程常用命令
本文主要是工作中常用的linux 进程相关的命令：system 内存查看入free -h ,版本查看 lsb_release -a，linux/32、64查看， timestamp to datetimelsof根据端口查杀进程nohup xargs ps，top 常用 （查看指定用户的进程，进程kill）sys 相关lsb_release -a uname -a for all info
2017-08-31 09:11:18
775
2
原创 python MySQLdb使用
本文主要内容python MySQLdb数据库批量插入insert，更新update的：python MySQLdb的使用，写了一个基类让其他的sqldb继承这样比较方便，数据库的ip, port等信息使用json配置文件常见的查找，批量插入更新下面贴出基类代码：# _*_ coding:utf-8 _*_import MySQLdbimport jsonimport codecs# 这
2017-08-30 19:45:59
3760
原创 ubuntu gcc(4.6/5.2)源码安装（version `CXXABI_1.3.8' not found）
本文内容version `CXXABI_1.3.8’ not found (required by …)gcc源码安装，到指定目录由于服务器权限各种问题需要定制gcc开发环境，问题如下：工作需要使用其他部门的C++SDK，他们有自己的编译服务器，但是代码保密原因不能给我服务器权限代码需要上传到他们制定的服务器上面运行，但是不能修改任何于是需要自己源码安装gcc到自己的用户目录下versi
2017-08-30 19:21:39
2191
1
原创 linux工作中常用文件操作命令
本文主要是本人在使用linux的时候操作文件以及目录的常见的命令，主要内容如下：ls 按照时间修改顺序列出文件，以M/G方式(human readable)显示出文件（如ls -lth） ，显示隐藏文件等判断文件是否存在test -f filename && echo “File exists”通配符文件的删除文件的移动（少了以及大量），批量重命名等SecureCRT linux与win1
2017-08-30 13:19:31
1030
1
原创 linux进程监控重启shell脚本
本文主要内容：shell日志date formatshell poll监控重新运行，挂了则重启程序前段时间工作需要使用python+scrapy写了个新闻舆情爬虫系统，服务器上面跑了大概5个月，期间莫名其妙的挂了2~3次。最终决定使用shell一直监控指定的进程，如果没有运行，则重新启动重新。相信监控重新是否运行，如果重新意外挂了，需要对重新重新启动这个场景应该十分常见吧，(下面是shell的
2017-08-30 09:05:49
9212
2
原创 深度学习样本生成data augmentation
在做深度学习图片分类的时候，很多是有些样本不足这个时候我们就会自己生成样本，如opencv对图片旋转，扭曲等等操作。google了一下deep learning data augmentation 发现了github几种开源的的方法主要是使用opencv结合python的PIL库。最终发现Augmentor好用 本文内容如下：传统的opencv结合python的multiprocessing任务
2017-08-29 21:12:43
12360
6
原创 python文件常用操作
python （glob os.path）常用文件操作：python excel 操作python批量重命名目录下（单个或者多个）文件目录以及文件名的一些操作(获取文件名不要扩展名without extension)text 文件的读取例如： 前面测试图片识别的时候需要将测试结果写到excel中 像这样批量重命名文件的话在linux中有很多常用的命令具体看我的bolg直接上代码了#
2017-08-29 14:40:08
574
原创 python scrapy多进程新闻爬虫
3月份的时候，由于工作需要使用python+scrapy框架做了一个新闻舆情的爬虫系统，当时任务比较紧自己也没有搞过爬虫，但最终还是较好的完成了任务，现在把做的大致思路记录分享一下。首先，展示一下部分截图吧： 本文主要内容如下：开发背景开发的大致思路代码框架的介绍开发背景近两年国家对网络的内容监管十分的严格，前一两年被称为“网络直播年”因此出现了有很多直播公司。我们需要第一
2017-08-28 21:16:37
11050
9
原创 python multiprocessing dummy Pool 使用
本文内容：python multiprocessing.dummy Pool多线程、进程任务队列使用http压力测试简单示例工作中有个常用的场景，比如现在需要下载10W张图片，我们不可能写个for循环一张一张的下载吧，又或者是我们做个简单的HTTP压力测试肯定是要使用多个，进程或者线程去做（每个请求handler，会有一个参数（所有的参数生成一个队列））然后把handler和队列map到Poo
2017-08-28 09:39:26
18041
原创 python list常用方法
python有关list的常用方法：list 中if表达式的使用list shift移位list 某一列的删除xrange 使用list翻转reverselist按照lambda排序直接贴代码吧，里面有注释还是比较好理解def lst_condition(): lst = [0, 1, 0, 3] print [a if a else 2 for a in lst]
2017-08-26 19:49:51
5334
转载 CNN卷积神经网络原理简介+代码详解
@author：wepon@blog：http://blog.csdn.net/u012162613/article/details/43225445本文介绍多层感知机算法，特别是详细解读其代码实现，基于Python theano，代码来自：Convolutional Neural Networks (LeNet)。经详细注释的代码和原始代码：放在我的github地
2017-08-22 09:00:59
17281
3
转载 套接字中SO_REUSEPORT和SO_REUSEADDR的区别
http://blog.csdn.net/Yaokai_AssultMaster/article/details/68951150Socket的基本背景在讨论这两个选项的区别时，我们需要知道的是BSD实现是所有socket实现的起源。基本上其他所有的系统某种程度上都参考了BSD socket实现（或者至少是其接口），然后开始了它们自己的独立发展进化。显然，BSD本身也是随着
2017-08-12 16:26:28
1625
Image Processing, Analysis, and Machine Vision, 3rd 中英文两版可以对照看
2018-06-01
FSCaptureSetup80
2016-05-17
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人