python
文章平均质量分 61
一只野猪佩奇
这个作者很懒,什么都没留下…
展开
-
jieba分词、多进程进度条显示
jieba安装pip install jieba 详情参考官网项目地址数据集提供一份来自搜狐网的数据集(移动端网页更好爬),这里使用bz2格式保存速度和大小较为均衡,通过pandas读入。df = pd.read_pickle(YOUR_PATH)使用jieba分词要使用不同模式参考官网文档这里给出个示例,对content列进行默认模式中文分词,并去掉标点符号import jieba.posseg as psegdef content100_to_word(line): tr原创 2021-05-07 15:49:40 · 727 阅读 · 0 评论 -
Tensorflow2/Pytorch GPU 安装过程
一、前置条件在正式安装前,需要以下条件:会使用conda创建和激活环境有一张nvidia的显卡,且CUDA compute capabilitiy 不低于3.5.(只要显卡不是很旧应该行)显卡驱动版本大于418.x(此处是2.3版本的需要,具体版本参考官网),不是的话需要去更新,提供一个官网地址。此外如何查看驱动版本两个方法:1.点击nvidia设置查看左下角的系统信息可见版本。2.在dos命令行中通过nvidia-smi可见(如果报错应该是环境变量需要设置)二、创建环境并安装依赖(示例是2.原创 2021-04-27 23:29:53 · 1590 阅读 · 2 评论 -
kaggle如何联网(pip/wget)-- 使用GoogleCloud
在Kaggle上安装第三方库/wget下载在默认情况下,kaggle的Kernel不能使用联网的bash命令,诸如wget、pip等,可能会出现如下错误WARNING: Retrying (Retry(total=4, connect=None, read=None, redirect=None, status=None)) after connection broken by ‘NewConnectionError(’<pip._vendor.urllib3.connection.Veri原创 2021-03-06 19:41:02 · 4913 阅读 · 3 评论 -
解决‘enum‘ has no attribute ‘IntFlag‘/No module enum
No module enum:在python3中已经将其作为标准库,现在pypi的enum只有python2才能安装,但作为代替有enum34内容和标准库是一样的。'enum' has no attribute 'IntFlag',这是因为pypi中enum只python2用的,python3安装会报此错。...原创 2021-02-25 22:18:18 · 285 阅读 · 0 评论 -
微信公众号Python开发(Wechatpy+新浪云SAE应用)
微信公众号Python开发(Wechatpy)前言:微信公众号后台只提供指定条件的指定回复,如果想有聊天、翻译、查询、后台数据库等则需要使用公众号提供的接口开发脚本。开发工具语言选择诸多,Python+Web框架是较为快捷的,这也是我第一个web框架练手项目。准备工作注册两个平台:微信公众号和新浪云(ps:微信订阅号和小程序是不同账号,并且长期不等录会冻结),这里选择新浪云的云应用也可用其他平台的云应用,细节差别看其文档。 关于云平台分类 IaaS(Infrastru原创 2021-02-25 22:11:14 · 1260 阅读 · 0 评论