微信公众号：码奋

原创 Tensorflow2.1-gpu安装后出现 ImportError: DLL load failed: 找不到指定的模块问题Could not find the DLL(s)'msvcp140_1

借鉴添加链接描述这篇博客（感谢），他安装的是cpu版本，而我安装的是gpu版发现通过pip install直接安装Tensorflow2.1后import tensorflow时会出现 ImportError: DLL load failed: 找不到指定的模块问题问题根据提示信息，去微软的官网下载Visual C++即可：微软的官网下载Visual C++根据自己的系统配置选择...

原创 Tensorflow 2.0 !!!! No module named ‘tensorflow.examples.tutorials‘解决办法，有用

Tensorflow 2.0 !!!!在tensorflow的学习中，MNIST 是一个入门级的计算机视觉数据集，当我们开始学习编程时，第一件事往往是学习打印Hello World 。在机器学习入门的领域里，我们会用MNIST 数据集来实验各种模型。MNIST 里包含各种手写数字图片它也包含每一张图片对应的标签， 告诉我们这个是数字几。例如，上面这4 张图片的标签分别是5 、0、4 、1...

原创 Windows安装pycocotools

Windows安装pycocotools

原创 CIFAR10-VGG16

Fitting a VGG-16 network on CIFAR-10 for image classification! We use gradient clipping for faster convergence.来源网络 import tensorflow as tf...

原创 深度卷积生成对抗网络(DCGAN)来生成对抗图像

DCGAN实现深度卷积生成对抗网络(DCGAN)来生成对抗图像图来源网络main.pyimport osimport numpy as npimport tensorflow as tffrom tensorflow import kerasfrom scipy.misc import toimagefrom gen import Generator, Discriminatordef save_result(val_out, val_block_s

原创 百度飞桨PaddlePaddle车牌识别

首先飞桨安装可以通过官网的提示安装通过对7大疫情AI实战案例学习其中包含-手势识别，车牌识别，口罩分类，PaddleSlim模型压缩的学习#导入需要的包import numpy as npimport paddle as paddleimport paddle.fluid as fluidfrom PIL import Imageimport cv2impo...

原创 cifar2数据集：训练一个模型来对飞机airplane和机动车automobile两种图片进行分类

1-2,图片数据建模流程范例一，准备数据训练集有airplane和automobile图片各5000张，测试集有airplane和automobile图片各1000张。import tensorflow as tf from tensorflow.keras import datasets,layers,modelsBATCH_SIZE = 100def load_image(im...

原创 tensorflow2.0 InternalError: 2 root error(s) found. Internal: Blas GEMM launch failed解决办法

在代码最前面加入代码注意 ，这里为tensorflow2.0版本，与第1.0有差距。import osos.environ["CUDA_VISIBLE_DEVICES"] = "0"#原版 config = tf.ConfigProto(allow_soft_placement=True)config = tf.compat.v1.ConfigProto(allow_sof...

原创 titanic数据集的目标是根据乘客信息预测他们在Titanic号撞击冰山沉没后能否生存

一，准备数据titanic数据集的目标是根据乘客信息预测他们在Titanic号撞击冰山沉没后能否生存。结构化数据一般会使用Pandas中的DataFrame进行预处理。字段说明：Survived:0代表死亡，1代表存活【y标签】Pclass:乘客所持票类，有三种值(1,2,3) 【转换成onehot编码】Name:乘客姓名 【舍去】Sex:乘客性别 【转换成bool特征】Age:...

原创 python-pyecharts 数据可视化学习 (数据来源：丁香园)

目录一、数据准备二、疫情地图2.1全国疫情地图2.2湖北省疫情地图三、疫情增长趋势图效果图 一、数据准备爬取丁香园的数据保存import jsonimport reimport requestsimport datetimetoday = datetime.date.today().st...

原创 pandas把csv文件数据按列排序

原本的数据类型凌乱不按照日期排序，不利于数据分析 import pandas as pddf = pd.read_csv('clientinfo-截止2019-1...

原创 polyglot-pyicu 安装

当我们下载完polyglot模块导入模块时from polyglot.text import Text会出现错误如下ModuleNotFoundError: No module named 'icu'直接pip install pyicu -i https://pypi.douban.com/simple/我们可能会遇到这样的一个报错RuntimeError: Pleas...

原创 机器学习、数据建模、数据挖掘分析 特征无量纲化的常见操作方法

在进行特征选择之前，一般会先进行数据无量纲化处理，这样，表征不同属性（单位不同）的各特征之间才有可比性，如2cm 与 0.2kg 你怎么比？无量纲处理方法很多，使用不同的方法，对最终的机器学习模型会产生不同的影响。通常采用的方法就是归一化，Normalization之类的方法。from sklearn.datasets import load_iris #导入IRIS数据集 iris =...

原创 Ubuntu 18.04.3 LTS /Linux给python(anaconda)环境安装mysqlclient

mysqlclient下载地址找到自己对应的版本（.tar.gz 结尾的文件）先执行代码解压tar -zxvf mysqlclient-1.4.6.tar.gz进行解压以后我们要安装gccgcc是build-essential包的一部分，您应该在安装之前先安装它：sudo apt-get install build-essential之后我们进入 mysqlclient-1.4...

原创 Ubuntu 18.04.3 LTS安装MySQL5.7 和设置root用户的密码

一、安装MySQL5.7并修改root用户密码Ctrl+Alt+T进入进入终端，输入命令安装MySQLsudo apt-get install mysql-server等待安装完成以后，即可以进入MySQLsudo vim /etc/mysql/debian.cnf可以看到user和passwrod使用命令在新的终端输入命令进入mysqlmysql -u+用户名...

原创 python通过接口判断公共节假日

通过'http://timor.tech/api/holiday/info/$' + “2018-01-11”接口，来判断该日期是否是公共节假日，排除此类返回结果不把双休日计算在内（接口2020/1/1能用，会失效,请先看看能否使用）def main(): begin = datetime.date(2017,11,27) end = datetime.dat...

原创 使用requests 爬取唯美意境图片

import requestsimport reimport osurl = 'http://image.baidu.com/search/index'date = { 'cl': '2', 'ct': '201326592', 'fp': 'result', 'gsm': '1e', 'ie': 'utf-8...

原创 深度学习，教你使用Tensorflow2.0识别手写数字（上）

课前知识 新版的Tensorflow2.0与原版的Tensorflow有着较大的更新和变动，Tensorflow2.0将Keras作为默认高级API，并舍弃掉其它的API。此外，另外较大的变动的是将用于机器学习的实验和研究平台 Eager execution 设置为默认优先模式, 这样设置的好处是我们不用再像以前一样预先定义静态图，任何的运算在调用之后都可以直接执行。与原版相比，Tenso...

原创 lxml 4.4.1 没有etree的解决办法

腾讯微云资源：https://share.weiyun.com/5Zxr63y或者在博主的资源中可以下载，但是需要积分，我也不会设置为不需要积分报错 DLL load failed网上应该又很多解决办法，但是很少有用，我曾经找到一篇有用的，但是已经记不清方法，这里的办法是把我配置好的lxml文件直接复制到你们的环境·中，直接可以使用。1.找到自己安装python的文...

原创 'utf-8' codec can't decode byte 0xb7 in position 2: invalid start byte

修改encoding='utf8'为encoding='gbk'

原创 python实现Dice系数

维基百科，自由的百科全书跳到导航跳到搜索Disambig gray.svg 关于与“Dice系数”名称相近或相同的条目，请见“Dice”。Dice系数, 根据 Lee Raymond Dice[1] 命名，是一种集合相似度度量函数，通常用于计算两个样本的相似度：{\displaystyle s={\frac {2|X\cap Y|}{|X|+|Y|}}} {\displayst...

原创 TensorFlow各版本下载地址

TensorFlow各版本自主下载地址：cpu版本：pip install 链接：https://pypi.python.org/pypi/tensorflow/2.0.0下载地址链接：https://pypi.org/project/tensorflow/#filesgpu版本：https://pypi.python.org/pypi/tensorflow-gpu/2...

原创 python 'aiohttp' 明明安装成功，但是仍然不能import，运行测报错No module named 'aiohttp'

解决方法：安装aiohttp（1）用anaconda ，在‘enviroments’中查找aiohttp，勾选后安装，仍然失败（2）网站上直接下载库文件：https://repo.continuum.io/pkgs/main/win-64/(3) 下载aiohttp-3.5.4-py37he774522_0.tar.bz2文件（找到自己的对应版本）(4) 下载包放在an...

原创 selenium 爬取淘宝宠物信息

首先获得淘宝页面，并且输入查找信息，得到淘宝宠物的宝贝信息首先要对浏览器对象进行初始化，browser = webdriver.Chrome("D:/Program Files (x86)/Google/Chrome/Application/chromedriver")因为我这里安装在D:/Program Files (x86)/Google/Chrome/Application/c...

原创 Matplotlib可视化

人口金字塔可用于显示由数量排序的组的分布。 或者它也可以用于显示人口的逐级过滤，因为它在下面用于显示有多少人通过营销渠道的每个阶段。# Read datadf = pd.read_csv("https://raw.githubusercontent.com/selva86/datasets/master/email_campaign_funnel.csv")# Draw Plot...

原创 csv的writerow写入的文件会有空行

在打开要写入的文件的时候，末尾加上一句newline=”就够了with open("numEnname.csv","a+",newline='') as csvfile: writer = csv.writer(csvfile,dialect='excel') #先写入columns_name #写入多行用writerows ...

原创 matplotlib图例中文乱码? 标题部分可以通过设置字体属性解决，但是图例不支持设置字体，该如何解决

原创 pyecharts 安装报错 ModuleNotFoundError: No module named 'pyecharts_snapshot'

安装方法pip install pyecharts正常导入import pyecharts报错信息ERROR:lml.utils:failed to import pyecharts_snapshotTraceback (most recent call last): File "D:\Envs\mytest\lib\site-packages\lml\utils.p...

原创 error: [WinError 3] 系统找不到指定的路径。: 'D:\\Program Files (x86)\\Micros oft Visual Studio 14.0\\VC\\Platfo

error: [WinError 3] 系统找不到指定的路径。: 'D:\\Program Files (x86)\\Microsoft Visual Studio 14.0\\VC\\PlatformSDK\\lib' ----------------------------------------Command "c:\python37\python.exe -u -c "im...

原创 Pandas库DataFrame的排序 输出特定某列

# -*- coding:utf-8 -*-import tushare as tsimport pandas as pddf = pd.read_excel('test.xlsx')df1 = df.head(10)#dataframe按索引升序排列,默认即是升序print df1.sort_index()#dataframe按索引降序排列print df1.sort...

原创 pandas处理csv数据基础知识

# -*- coding: utf-8 -*-import pandas#读csv文件data = pandas.read_csv('test.csv')print （data）#返回前n行first_rows = data.head(n=5)print （first_rows）#返回全部列名cols = data.columnsprint （cols）#返...

翻译 Scrapy入门,Spiders

SpidersSpider类定义了如何爬取某个(或某些)网站。包括了爬取的动作(例如:是否跟进链接)以及如何从网页的内容中提取结构化数据(爬取item)。 换句话说，Spider就是您定义爬取的动作及分析某个网页(或者是有些网页)的地方。对spider来说，爬取的循环类似下文: 以初始的URL初始化Request，并设置回调函数。 当该request下载完毕并返回时，将生成respo...

翻译 Scrapy.选择器(Selectors)

选择器(Selectors)当抓取网页时，你做的最常见的任务是从HTML源码中提取数据。现有的一些库可以达到这个目的：BeautifulSoup是在程序员间非常流行的网页分析库，它基于HTML代码的结构来构造一个Python对象， 对不良标记的处理也非常合理，但它有一个缺点：慢。 lxml是一个基于ElementTree(不是Python标准库的一部分)的python化的XML...

原创 使用scrapy框架做爬虫：No module named win32api报错解决办法

python是没有自带访问windows系统API的库的，需要下载。库的名称叫pywin32，可以从网上直接下载。以下链接地址可以下载：http://sourceforge.net/projects/pywin32/files%2Fpywin32/ （下载适合你的Python版本）运行以下代码如果出现ImportError: No module named win32api...

原创 windows系统使用mongodb命令提示不是内部或外部命令

解决方法：1、“我的电脑”，右键点击属性。2、高级系统->环境变量，编辑系统变量PATH。3、在末尾增加“;D:\Program Files\MongoDB\Server\4.0\bin”。（注意 mongodb安装下的目录）注：“;”不能缺省，且为英文状态下的分号。如果是window10系统，新建时候自动换行，可以不加“；”4、重新打开命令窗口，输入命令“mongo”，...

原创 动态爬取 Beautiful Soup爬取豆瓣电影TOP250详情介绍

案例分析首先我们可以看到豆瓣的top250电影排名如图，是把top250所有的分为十页，每页25部电影进行展示​而我要获取的数据是每一部电影的详情介绍，包括演员，剧情，评价，演员的扮演角色等信息首先我们要获取top250的页面信息base_url='https://movie.douban.com/top250'headers = { 'U...

翻译 Python BeautifulSoup

Beautiful Soup是一个用于从HTML和XML文件中提取数据的python库。它与您最喜欢的解析器一起工作，提供导航、搜索和修改解析树的惯用方法。它通常可以节省程序员数小时或数天的工作时间。这些说明用例子说明了 Beautiful Soup 4的所有主要特征。我向您展示了这个库的好处，它是如何工作的，如何使用它，如何让它做您想要做的事情，以及当它违反了您的期望时应该做什么。本文...

原创 python 学习爬取哔哩哔哩今日热门的前100个视频

代码实现我们通过上面的尝试写了段代码，发现B站在一定程度上做了反爬虫操作，所以我们需要先获取headers信息，否则下载下来的视频是空的，然后定义params参数存储JSON数据，然后通过requests.get去获取其参数值信息，用JSON的格式返回到目标网页即可，实现代码如下：def get_json(url): headers = { ...

翻译 python 学习---XPath

XPath即为XML路径语言（XML Path Language），它是一种用来确定XML文档中某部分位置的计算机语言。XPath基于XML的树状结构，提供在数据结构树中找寻节点的能力。起初XPath的提出的初衷是将其作为一个通用的、介于XPointer与XSL间的语法模型。但是XPath很快的被开发者采用来当作小型查询语言。表示法[编辑]最常见的XPath表达式是路径表达式（XPat...

原创 Python学习——三分钟分析目前最火的电视剧

首先，我们先要获取爱奇艺的电视剧排行，网址为http://v.iqiyi.com/index/dianshiju/index.html我们可以看到这些电视剧的排名我们要做的是首先获取网页源代码headers={'User-Agent':'Mozilla/5.0(Macintosh;intelMacOS10_11_4)Applewebkit/537.36(KHTML...