- 博客(45)
- 资源 (2)
- 收藏
- 关注
RSS订阅原创 解决程序员百分百问题pip终极杀手
批量安装：pip install -r requirements.txt。进入相应目录下 C盘->Users/用户->xxx->新建pip文件夹。升级包：pip install --upgrade 要升级的包名。还是用这个把数据放到pip.int里面就可以了。格式化展示已安装包：pip freeze。卸载包：pip uninstall 包名。
2023-10-08 10:47:02
174
原创 python中的基本数据类型
单个变量赋值与输出Python 中的变量不需要声明。每个变量在使用前都必须赋值，变量赋值以后该变量才会被创建。在 Python 中，变量就是变量，它没有类型，我们所说的"类型"是变量所指的内存中对象的类型。等号（=）用来给变量赋值。等号（=）运算符左边是一个变量名,等号（=）运算符右边是存储在变量中的值。例如：counter = 100 # 整型变量miles = 1000.0 # 浮点型变量name = "runoob" # 字符串pr
2021-02-21 13:47:55
239
原创 重温python简单的语法
一、python简介Python 是一种解释型语言：这意味着开发过程中没有了编译这个环节。类似于php和perl语言Python 是交互语言：这意味着，你可以在一个python提示符>>>后执行代码Python 是面向对象语言：这意味python支持面向对象风格或代码封闭在对象的编程技术Python 是初学者的语言: Python对初级程序员而言，是一种伟大的语言，它支持广泛应用开发，从简单的文字处理到www浏览器再到游戏。Python 发展历史是龟叔在暑假开发出...
2021-02-21 10:44:03
298
原创 唐人街探案最新获取
相信大家都很希望看到今年的唐人街探案3吧，但是吧，电影院那么贵，这时就会有人说：“不可以白嫖吗？”当然可以了，经过我的检索，功夫不负有心人，找到了资源。**只需要关注公众号。虽不说是超清1080p，是迅雷下载链接哦，但是观看不受影响，对于我们来说，白嫖是永远的神。**或者已经关注的可以回复 唐人街探案3继曼谷、纽约之后，东京再出大案。唐人街神探唐仁（王宝强 饰）、秦风（刘昊然 饰）受侦探野田昊（妻夫木聪 饰）的邀请前往破案。“CRIMASTER世界侦探排行榜”中的侦探们闻讯后也齐聚东京，加入
2021-02-13 12:43:10
645
2
原创 爬取某讯天堂的张望弹幕词云生成图
腾讯天堂的张望弹幕词云生成大家好，好久没更新自己的博客了，以后会每天进行更新自己的博客内容，也希望大家会学到更多的知识阅读目录腾讯天堂的张望弹幕词云生成前言好了废话不多说，直接进入今天的主题。一、数据爬取二、使用步骤效果显示前言我们都知道某讯上出了一部电影《天堂的张望》好了废话不多说，直接进入今天的主题。一、数据爬取看图学习知识二、使用步骤代码如下（示例）：从这里我们可以看出此数据为json数据，然后有分布效果，每次加30从5天始。timestamp=255 #为多少秒中
2021-01-19 00:46:02
457
1
原创 Django资源配置
Django资源配置当我们学习过网站开发时都会知道网站上的图片，视频，音频，是从那里来的。这里我们会进行对pythonDjango网站的资源配置进行详细讲解阅读目录Django资源配置前言一、资源集合 STATICFILES_DIRS二、资源部署 STATIC_ROOT2.读入数据总结前言资源文件配置分为静态资源和媒体资源，静态资源的配置方式由配置属性STATIC_URL、STATICFILES_DIRS和STATIC_ROOT进行设置，媒体资源的配置方式由配置属性MEDIA_URL和ME
2020-11-25 22:22:16
205
原创 python爬虫之虚拟环境的使用
Window 下创建python的虚拟环境下载工具 pip install virtualenv创建虚拟环境目录# 注意此命令创建的虚拟环境目录是在当前目录下virtualenv chen使用虚拟环境cd testenv/Scripts activate退出虚拟环境 deactivate.bat指定使用python版本创建虚拟环境 virtualenv -p C:\Users\Administrator\AppData\Local\Programs\Python
2020-11-05 11:01:07
355
原创 python正则表达式基础学习（一）
学习目标：提示：这里可以添加学习目标例如：一周掌握 Java 入门知识学习内容：提示：这里可以添加要学的内容例如：1、 搭建 Java 开发环境2、 掌握 Java 基本语法3、 掌握条件语句4、 掌握循环语句正则表达式动机1.处理文本成为计算机常见工作之一2.对文本内容的搜索提取是一项比较复杂困难的工作3.为了快速方便处理上述问题，正则表达式技术诞生，主要发展为一个被众多语言使用的独立技术 。定义：即高级文本匹配模式，提供了搜索，替代等功能。本质是由一系列特殊符号和字符组成
2020-10-27 07:04:23
394
原创 Python爬虫之scrapy框架360全网图片爬取
Python爬虫之scrapy框架360全网图片爬取在这里先祝贺大家程序员节快乐，在此我也有一个好消息送给大家，本人已开通了微信公众号，我会把资源放在公众号上，还请大家小手动一动，关注过微信公众号，回复1024即可获得python的零基础教学哦。阅读目录Python爬虫之scrapy框架360全网图片爬取前言一、分析网站？二、使用步骤1.引入库2.读入数据总结前言我们先进入今天的主题，我们都知道现在python爬虫的手段越来越多，比如通用爬虫， 模拟登陆，js逆向，app爬虫，自动化爬虫等。
2020-10-24 13:13:06
2026
3
原创 python爬虫之模拟登录（一）
python爬虫之模拟登录这里我们讲解一下，python爬虫必备的模拟登录技能，通过下面的课程希望你们能了解析python爬虫之模拟登录机制与实现原理阅读目录python爬虫之模拟登录前言一、pyhton模拟登录原理二、分析网站1.登录分析2.正式登录分析login文件3.源码分析总结前言随着网站日益更新，我们ptyhon爬虫对网站的负载压力，我们会发现很多网站都做了反爬机制，如模拟登录，js加密，js混淆，css字体，等一系列反爬机制，我们今天主要讲解一下模拟登录一、pyhton模拟登录
2020-10-22 08:00:42
3997
5
原创 Python爬虫之App爬虫视频下载
Python爬虫之App爬虫视频下载提示：例如：第一章 Python 机器学习入门之pandas的使用文章目录Python爬虫之App爬虫视频下载前言一、操作流程二、fidder4抓包1.fidder配置2.模拟器配置3.模拟器证书安装三、fidder4解析视频网站pycharm编写app代码总结前言随着手app的发展逐渐强大，我们手机应用每天的生活也是非常的多。那我们怎么知道他的数据是怎么形成的，通过电脑端如何爬取。相信大家也有这样的问题。下面我将讲解这些操作流程。一、操作流程首先
2020-10-21 06:58:55
359063
7
原创 python爬虫之网站xpth实战
python爬虫之网站xpth实战<font color=#999AAApython爬虫之网站xpth使用提示：写完文章后，目录可以自动生成，如何生成可参考右边的帮助文档阅读目录python爬虫之网站xpth实战前言一、xpath是什么？二、xpath语法三、xpath实战案例1.下载lxml库2.解析网站2.源码总结前言在我认知的爬虫领域有很多爬虫查找信息的语言和库，比如我们爬取网站是会requests请求网页的信息，通过正则，xpath，beautifulsoup，pyquer
2020-10-19 07:45:37
1080
1
原创 python爬虫腾讯招聘职位之Scrapy实战
系列文章目录python爬虫腾讯招聘职位之Scrapy实战提前准备插件安装：pip install scrapy这里是运行成功的截图python install Twisted这里是运行成功的截图阅读目录系列文章目录前言一、编写Tenxun.py爬虫文件二、在item.py列表里进行设置数据表三、在pipelines.py列表里进行设置数据表四、在settings.py文件里配置爬虫五、运行爬虫总结前言随着我们对爬虫的了解，以前我们用requests可以请求进行解析网页可以
2020-10-18 09:34:43
4456
1
原创 python之Django的model数据类型详解
阅读目录一、创建django项目和创建app名称创建Django项目 创建app名称二、在models.py创建数据表 三、配置setting.py文件 四、models数据表导入sqlite前言Model是Django表示数据的模式，这里说明一下，django可以不需要指定数据库，因为pythont自带sqlite数据库，Django也支持各种主流的数据库存，顺便说一下sqlite。提示：以下是本篇文章正文内容，下面案例可供参考一、创建Django项目和app...
2020-10-17 10:46:06
4007
2
原创 Django 数据迁移导入导出
Django数据迁移导入导出提示：写完文章后，目录可以自动生成，如何生成可参考右边的帮助文档文章目录系列文章目录 前言 一、pandas是什么？ 二、使用步骤 1.引入库 2.读入数据 总结前言本文主要讲数据库的迁移方法，包含不同数据库，如 SQLite3, MySQL, PostgreSQL 之间数据迁移方案，以及数据在不同机器上迁移方案提示：以下是本篇文章正文内容，下面案例可供参考一、简单的数据导出与导入（简单的迁移）python...
2020-10-16 19:06:53
396
原创 Django公共模板的使用
在Djagno中继承和引用模板是两种概念，引用：是把整个html文件代码复制。继承：只是继承其中一段代码的样式。引用这个是 base.html中引用 footer.html文件中的代码 <div class="panel-footer"> {% include 'footer.html' %} </div>这个是 footer.html文件进行页脚的设置，利用{% block footer%}{% endblock %}进行封装。
2020-10-09 22:12:06
5490
原创 Scrapy爬取起点网小说应用ItemLoader类
第一步刚开始我们先创建项目，在控制台输出：scrapy startproject qidihot_itemloader当我们控制台返回这个 ，说明你创建成功了。下面进行第二步在这个文件夹里新建我们的.py文件 ，文件名为 qidihot_itemloader下面先在items.py里进行变量的声明。# -*- coding: utf-8 -*-# Define here the models for your scraped items## See documentation in:
2020-09-29 20:41:25
333
原创 -bash: ssh-copy-id: command not found
解决方法:yum -y install openssh-clients
2020-09-15 23:28:05
362
原创 hadoop搭建教程之安装虚拟机
搭建前的准备操作第一步安装好虚拟机VM软件进行新建虚拟机选择稍后进行安装 下一步选择对应的系统版本 下一步选持路径和虚拟机命名 下一步点击自定义配件进行先择镜像点击完成...
2020-08-10 21:00:39
187
原创 python爬虫之js逆向安装execjs
在命令行中输入 pip install PyExecJS 即可使用 引用 import execjs
2020-07-28 11:28:36
4105
原创 ptyhon爬虫之模拟网络登录cookie
这里写目录标题代码登录登录参数发送登录请求POST 使用cookiejar保存带着cookie请求网址代码展示代码登录这个是我们登录的网址https://www.yaozh.com/login打开F12进行勾选这个勾上的作用：在登录之后还可以存放上个网页的数据首先我们先进行登录登录参数这里就是我们想要的参数发送登录请求POST 使用cookiejar保存cook_jar=cookiejar.CookieJar()# 定义有添加 cook功能的处理器cook_hanlder=urll
2020-06-18 07:42:58
255
原创 Scrapy第一个网络爬虫
Scrapy入门创建自己的项目用cmd检查一下自己是否有scrapy模块:pip list在Terminal中进行命令创建scrapy项目编写自己的代码在spiders中编写自己的爬 虫文 件下面为qidian_hot_spider.py源代码使用Terminal进行命令运行使用下面命令进行把数据存入hot.csv中创建自己的项目用cmd检查一下自己是否有scrapy模块:pip list在Terminal中进行命令创建scrapy项目编写自己的代码在spiders中编写自己的爬 虫文 件
2020-05-31 19:16:37
112
原创 python爬虫之自动化爬取网页
以下为公开源码from selenium import webdriverfrom selenium.webdriver.chrome.options import Optionsimport timefrom bs4 import BeautifulSoupurl='https://movie.douban.com/'chrome_optins=Options()chrome_optins.add_argument('lan=zh_CN.utf-8')UserAgent='Mozilla/
2020-05-27 19:27:03
1188
原创 爬虫高级之header表头加Host和Upgrade-Insecure-Requests: 1
在爬取51jb时遇到的问题1.爬出的数据是重复的2.数据显示不正确解决方法headers = { "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/83.0.4103.61 Safari/537.36", "Host":"search.51job.com", "Upgrade
2020-05-24 18:16:47
3692
原创 python前端Django指南之Hello worldl输出
1.创建Django项目python manage.py startapp +项目名ptyhon manage.py startapp index2.添加setting,py属性部分代码 增加 ‘index’3.创建templates文件夹再创建和编辑index.html文件index.html源代码<!doctype html><html lang="en"><head> <meta charset="UTF-8">
2020-05-24 00:42:24
77146
原创 傻瓜式安装Django搭建web开发环境
1.首先用anaconda Prompt先打开此应用，如果没有可以先到网站自行下载：https://www.anaconda.com/distribution/2.安装pycharm及IDE如果没有可以自行上到网站下载：https://www.jetbrains.com/pycharm/download/#section=windows3.安装Django输入命令：conda list可以查看是否存在Django存在可以更新版本：conda update Django如果不存在，进行安装 c
2020-05-18 22:24:24
280
原创 python爬虫之表头伪装
表头请求法import urllib.requestdef load_baidu(): url="http://www.baidu.com" #添加表头 header={ "User-Agent":"Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/78.0.3904.108 Safari/537.36" } #添加代理 p
2020-05-13 07:13:06
914
原创 ptyhon爬虫之代理ip
代理ip进行防问代理免费ip网址：https://www.zdaye.com/FreeIPList.htmlimport urllib.requestdef create_proxy_handler(): url="http://www.baidu.com" proxy={ "http":"http://39.137.107.98:8080" } #创建处理器 proxy_handler=urllib.request.ProxyHandler
2020-05-13 07:10:33
276
原创 python爬虫之伪装浏览器User-agnet设置
在我们python爬虫里有一个User-agent之说 ：可以使们的编出的程序以人的操作进行在网页上抓捕例如我们的百度url"https://www.baidu.com/"箭头所指的就是我们python常用的表头，这就是伪装的第一步下面开始进行代码讲解import urllib.requestdef load_baidu(): url="http://www.baidu.com" #添加表头 header={ "User-Agent":"Mozilla/5
2020-05-10 09:54:02
477
原创 python爬虫之古诗词分类爬取加存储
python网站进价爬取分析网站分析数据写入文件原代码人生苦短 我用python分析网站目标网站的url=“https://www.gushiwen.org/shiju/xiejing.aspx”对网站的目录进行简单的分析，这个是各古诗的分类标题。def get_div_text(html_text): soup=BeautifulSoup(html_text,'html.par...
2020-05-05 10:26:44
17383
原创 MySql-8.0.18-winx64 安装与配置
首先我们去官网下载MySql-8.0.18-winx64版本https://dev.mysql.com/downloads/mysql/[mysqld]# 设置3306端口port=3306# 设置mysql的安装目录basedir=D:\Program Files\mysql-8.0.16-winx64# 设置mysql数据库的数据的存放目录datadir=D:\Program ...
2020-05-02 15:44:39
451
原创 Centos安装python3
此次是以离线安装为主python3链接：https://www.python.org/ftp/python/3.6.5/Python-3.6.5.tgz我们先用ｌｓ查看一下是否有安装包好进行ｔａｂ填充命令tar -zxvf Python-3.5.0(1).tgz 这个是我们解压命令打到Ｐ时直接ｔａｂ键补齐就好了解压成功可以看到桌面上有一个文件然后我们进入文件中进行编译./con...
2020-04-21 11:41:51
87
原创 员工管理系统之添加修改删除操作
#显示系统的欢迎信息print('-'*20,'欢迎使用员工管理系统','-'*20)#创建一个列表，用来保存员工的信息emps=['孙悟空\t18\t男\t花果山']#创建一个死循环while True: print('请选择要做的操作') print('\t1.查询员工') print('\t2.添加员工') print('\t3.删除员工') ...
2020-04-20 12:08:50
2169
原创 列表方法的详解
列表方法的详解append():向列表的最后添加一个元素# 列表的方法stus = ['孙悟空','猪八戒','沙和尚','唐僧']print('原列表：',stus)stus.append('孙悟空')print('修改后列表：',stus)insert(x,y):向列表的指定位置插入一个元素参数：x.要插入的位置y.要插入的元素# 列表的方法stus = ['孙悟空...
2020-04-20 10:20:14
1632
原创 python列表专项学习之修改列表
修改列表中的元素赋值修改列表stus = ['孙悟空','猪八戒','沙和尚','唐僧','蜘蛛精','白骨精']print("修改前：",stus)stus[0] = 'sunwukong'stus[2] = '哈哈'print('修改后：',stus)通过切片来修改列表stus = ['孙悟空','猪八戒','沙和尚','唐僧','蜘蛛精','白骨精']print...
2020-04-17 23:41:34
314
原创 python列表专项学习
列表可以==+== 号拼接也能 ==*==号重复# + 和 *# +可以将两个列表拼接为一个列表my_list = [1,2,3] + [4,5,6]# * 可以将列表重复指定的次数my_list = [1,2,3] * 5# print(my_list)in 和 not in 区别in用来检查指定元素是否存在于列表中如果存在，返回True，否则返回Falsenot ...
2020-04-17 22:10:41
153
原创 flask Object of type 'Decimal' is not JSON serializable问题解决
先进行简单的pip安装然后在项目设置中：
2020-04-17 20:37:06
710
原创 python爬虫之json实战
python爬虫之json实战【导读】记录学习爬虫的过程【主题】python爬虫之json实战【分析】1.先进行目标网站分析2.再用BeautifulSoup进行解析网页3.寻找json图片数据3.进行图片存储【注意】代码要层次分明，简洁明要，尽量多用print查看数据对错。【代码】import json import requestsimport osfrom bs4...
2020-03-20 09:56:55
478
vmware15.zip
2020-07-30
master.rar
2020-01-07
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人