Python
零落_World
https://github.com/cdj0311
展开
-
使用Python下载Voxforge语音文件
由于做语音识别需要在使用voxforge的语音文件,但是voxforge文件太多,手工下载肯定不行,可以使用批量下载软件进行下载。而出于好奇,我打算用python自己写一个批量下载脚本,最后虽然能用,但速度不行,而且是单线程的,只能一个文件一个文件的下,就当当作练练手,过一阵再研究多线程的下载。步骤如下:voxforge的English speech files连接为:http://www原创 2014-01-05 14:29:31 · 2224 阅读 · 0 评论 -
golang调用tensorflow/keras训练的模型
1. 安装tensorflow和golang(参考https://tensorflow.google.cn/install/install_go)2. python训练模型,这里以keras example的imdb_cnn.py为例:# coding:utf-8import tensorflow as tffrom keras.models import Sequential...原创 2018-08-17 11:13:21 · 10979 阅读 · 7 评论 -
jieba并行分词
jieba并行分词每次都要重新写,这次记下来。# coding:utf-8import codecsfrom multiprocessing import Poolimport jiebafin = "news.txt"fout = "news.seg"def read_data(): fr = codecs.open(fin, "r", "utf-8") ...原创 2018-07-31 17:25:25 · 3744 阅读 · 0 评论 -
Windows7 下python3和python2同时 安装python3和python2
1、下载python3和python2 进入python官网,链接https://www.python.org/选择Downloads--->Windows,点击进入就可以看到寻找想要的python版本本文选择的是:Python3.5.2,点击后面链接可直接下载,https://www.python.org/ftp/python/3.5.2/python-3.5.2rc1-amd64.exe...转载 2018-04-02 14:14:36 · 271 阅读 · 0 评论 -
python代理ip抓取大众点评
抓大众点评才抓了几页就被屏蔽,找到如下方法解决。第一步:获取代理ip在http://www.xicidaili.com/nn获取代理,命名为proxy_ip.py,代码如下:# coding:utf-8import requestsfrom bs4 import BeautifulSoupimport reimport os.pathuser_agent = 'Mozi原创 2017-12-16 18:04:48 · 18107 阅读 · 0 评论 -
中文分词的python实现-基于HMM算法
隐马尔科夫模型(HMM)模型介绍HMM模型是由一个“五元组”组成:StatusSet: 状态值集合ObservedSet: 观察值集合TransProbMatrix: 转移概率矩阵EmitProbMatrix: 发射概率矩阵InitStatus: 初始状态分布将HMM应用在分词上,要解决的问题是:参数(ObservedSet, TransProbMatrix, Em转载 2017-07-21 12:40:04 · 3823 阅读 · 1 评论 -
python多任务及返回值处理
废话不多说,直接上代码!# coding:utf-8from multiprocessing import Poolimport timedef keywords(title, content, top_n=5): print u'关键词提取...' print title, content, top_n time.sleep(3) return 0,原创 2017-07-07 11:19:11 · 1907 阅读 · 0 评论 -
anaconda4.5在centos7环境下tensorflow-gpu1.10+cuda8.0+cudnn6
pip安装tensorflow1.5以后版本默认需要cuda9支持,但是我的服务器只安装了cuda8+cudnn6,要么用源码安装,要么用anaconda安装,这里记录下用anaconda安装tf。1.conda create -n tensorflow pip python=3.6在anaconda中创建一个新环境(虚拟环境)2.source anaconda/bin/activat...原创 2018-10-15 18:51:16 · 527 阅读 · 0 评论