Mr_blueD的博客

爱蓝色的小D先生的博客

我的个人博客

你好,hexo, 再见,CSDN。   hexo个人博客: Blue‘s blog’   

2018-08-06 11:27:35

阅读数 188

评论数 0

Python爬取拉勾网招聘信息存入数据库

先抓包分析我们想要获取的数据,很明显都是动态数据,所以直接到Network下的XHR里去找,这里我们找到具体数据后,就要去寻分析求地址与请求信息了。还有需要提交的表单信息分析完毕之后,我们就可以开始写我们的爬虫项目了。一.编写Itemitem编写比较简单# 拉钩职位信息 class LagouIt...

2018-03-12 23:21:02

阅读数 1512

评论数 2

Python3 +Scrapy 爬取腾讯控股股票信息存入数据库中

目标网站:http://quotes.money.163.com/hkstock/cwsj_00700.html每支股票都有四个数据表找到这四个数据表的信息所在数据名第一条到第三条数据所在其他三个表也是这样子寻找,找到数据后,就可以动手爬取了。于2018\3\17 重写。一.Item# 腾讯控股股...

2018-03-08 11:47:43

阅读数 583

评论数 0

Python3 + Scrapy 爬取豆瓣评分数据存入Mysql与MongoDB数据库。

首先我们先抓包分析一下,可以看到我们想要的每一页的全部数据都在"article"下。而其中每一部的电影的数据可以看到在"info"下。所以我们只要在info下找到自己的目标数据并想好匹配方法即可,本文使用的是xpath,其实也...

2018-02-19 20:34:36

阅读数 1210

评论数 0

Python3 + selenium自动登录QQ空间

使用selenium+Python+webdriver# 登录qq空间 from selenium import webdriver import time browser = webdriver.Chrome() browser.get('https://qzone.qq.com/') bro...

2018-02-18 20:13:18

阅读数 831

评论数 0

Python3爬虫实战(urllib模块)

2018.01.27 。我的第一篇博客。在自学Python的过程中,爬虫是我学的最有趣的一个方面,现在我把学习爬虫的总结展示出来。学Python爬虫中,第一个接触的模块就是urllib,下面我将通过实战教学告诉大家如何使用urllib中的request模块构造爬虫,使用工具为Pycharm。1.R...

2018-01-27 14:39:49

阅读数 3188

评论数 1

matplotlib的legend参数与设置

以下面代码为例 import matplotlib.pyplot as plt from pylab import mpl mpl.rcParams['font.sans-serif'] = ['SimHei'] # 用来显示中文,不然会乱码 x = range(4) y = [120...

2019-03-05 23:17:03

阅读数 64

评论数 0

vscode搭建flask报错解决

参考https://segmentfault.com/a/1190000012149680#3-搭建flask项目,结果报了个莫名其妙的错。   项目文件夹   launch.json { // 使用 IntelliSense 了解相关属性。 // 悬停以查看现有...

2018-08-01 12:36:51

阅读数 763

评论数 0

机器学习之KNN算法

  具体步骤: 计算当前要分类的点与每一个已知分类点的距离。 对结果进行排序。 选取距离最近的k个点。 统计这k个点不同分类出现的频次。 选取频次最高的分类作为当前要分类的点的分类。   以sklearn库自带的iris数据集为例。 获取iris数据集 from sklearn...

2018-07-28 16:17:42

阅读数 116

评论数 0

matplotlib之饼状图

import matplotlib.pyplot as plt labels = 'A', 'B', 'C', 'D' fracs = [35, 20, 45, 10] plt.pie(x=fracs, labels=labels) plt.show() 圆形饼图 import ...

2018-07-27 14:35:02

阅读数 310

评论数 0

matplotlib之条形图

import matplotlib.pyplot as plt import numpy as np N = 5 y = [20, 30, 10, 25, 15] index = np.arange(N) plt.bar(left=index, height=y) plt.show() ...

2018-07-26 18:31:19

阅读数 433

评论数 0

Pandas之iris数据集简单分析

 导出iris数据集 from sklearn import datasets import pandas as np iris_datas = datasets.load_iris() iris_data是一个类似字典的对象。 print(iris_datas.data) # 数...

2018-07-22 11:37:25

阅读数 2583

评论数 2

matplotlib之散点图

  参数 x,y 形如shape(n,)的数组,可选值, s 点的大小(也就是面积)默认20 c 点的颜色或颜色序列,默认蓝色。其它如c = 'r' (red); c = 'g' (green); c = 'k' (black) ; c = 'y'(yellow) marke...

2018-07-21 18:32:41

阅读数 119

评论数 0

django-rest-framework快速入门

Requirementspython3.6django2.0.6工具为pycharmProjectpip install django-rest-framework创建Django项目文件,名为DjangoRestFramework。同步数据库python manage.py migrate创建超...

2018-06-21 16:26:27

阅读数 286

评论数 0

Python3 创建虚拟环境

一:下载virtualenv进入命令行输入pip install virtualenv即可。查看是否下载成功输入virtualenv --version二.虚拟环境的创建与激活创建进入你想创建虚拟环境的文件夹中输入virtualenv env后面的 env 是我的虚拟环境名称,可自取。激活进入en...

2018-04-28 21:10:39

阅读数 140

评论数 0

django + suit 美化admin后台

1.头部信息在 suit/config 里。2.添加,修改和删除以及我的动作在suit/templates/admin/index.html里。

2018-04-05 17:59:26

阅读数 597

评论数 0

Django+boostrap 美化admin后台

工具:Pycharm,Django1.11.9.1.下载django_admin_bootstrappedpip install django-admin-bootstrapped2.打开django项目目录下的settings.py文件,如图添加内容,必须放在django本身的django.co...

2018-04-05 16:11:43

阅读数 2509

评论数 2

Flask Web开发学习之爬坑(六)

在示例7-2,编写config.py代码时在SQLALCHEMY_COMMIT_ON_TEARDOWN = True后面加一句SQLALCHEMY_TRACK_MODIFICATIONS = False将FLASKY_MAIL_SENDER = 'Flasky Admin <...

2018-04-04 15:14:55

阅读数 238

评论数 0

Flask Web开发学习之爬坑(五)

关于第7章 大型程序的结构本章内容是重中之重,是将Flask程序模块化的必经步骤。我的flask项目文件夹名为 FlaskAPP。我的flask程序结构也按照示例7-1来划分。其中的测试模块 tests 忽略不写。1.在FlaskApp下创建app文件夹,config.py 文件与 manage....

2018-04-04 15:10:15

阅读数 170

评论数 0

Flask Web开发学习之爬坑(四)

关于第6章 电子邮件这一章把我坑了好久好久,真的是印象深刻。文章中的示例是通过 goolemail 发送邮件,我把它换成了常用的qq邮箱。本节内容有点多,不过很多都是有用的。示例6-1需要修改app.config['MAIL_SERVER'] = 'smtp.qq.com' ...

2018-04-03 23:26:49

阅读数 177

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭