- 博客(7)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 Flask之入门笔记
文章目录Flask学习笔记Flask基本使用1、flask入门2、读取配置文件3、获取前端传来的信息4、route中获取参数传入视图函数自定义转换器类5、反向解析6、返回json响应7、试图函数传参8、abort函数9、上传照片cookie和sessioncookiesession Flask学习笔记 Flask基本使用 1、flask入门 from flask import Flask # 决定网页寻找静态资源的网址是static_url_path # app = Flask(__name__,stat
2020-11-10 21:24:22
223
原创 爬虫案例~全网搜索
爬虫案例 全网搜索–百度 1. 确定客户需求： 爬取百度搜索有关钢结构工程的公司的联系人和联系方式并保存到csv格式 2. 选择技术路线： 因为百度的反爬机制，爬取的内容全是js源代码，意思就是百度的动态数据都是js渲染出来的，通过requests爬虫则会非常复杂。 因此选用selenium作为主要的爬取工具。 3. 爬取步骤： 1. 登录百度url https://www.baidu.com 输入钢结构工程，搜索 2. 用selenium定位到每个搜索结果并提取对应的url 3. 翻页，再一次第二步操
2020-11-04 21:42:54
1185
原创 selenium使用及技巧
selenium基本使用 bro = webdriver.Chrome(executable_path='./chromedriver') 加载浏览器驱动 bro.get('https://www.baidu.com') 打开网页 定位 bro.find_element_by_xpath() 常用 … 不一一列举，在pycharm中输入find则会弹出提示 selenium基本函数 """ #可以利用time库，设置等待时间，以防页面未完全加载就开始进行操作，造成错误 import time time
2020-11-04 21:39:35
153
原创 爬虫之模拟登陆处理cookie
爬虫模拟登陆 1、识别验证码 如果登陆时需要输入验证码，则需要识别该验证码 我用的是云打码平台 图鉴：http://www.ttshitu.com/ 自己琢磨了开发文档 import base64 def code_ver(b_img, typeid=3): """识别验证码""" # 开发文档给的HTML的api接口 url = 'http://api.ttshitu.com/base64' data = { 'username':'************
2020-10-23 21:05:06
258
原创 爬虫学习--对requests的基本使用和网页解析
爬虫 爬虫操作 requests库 需要下载 pip install requests 导入模块 import requests requests 提交请求的方式有两种 get和post 使用哪种方式请求需要查看network抓包的信息 下图中， Request URL是发送请求的地址 Request Method是请求该链接的方式，此处用get方法请求百度网页 Response Headers是发送请求后将会回应的信息 响应头中，查看Content-Type，文中是text/html 则回应的
2020-10-22 10:49:23
526
原创 dailyfresh总结Django
django项目总结 1、setting文件配置 2、模型 2.1 模型字段 DecimalField模型类的参数有两个 1、max_digits 整数部分的长度 2、decimal_places 小数部分的长度(保留的小数位数) 比如：666666.66 ototal = models.DecimalField(max_digits=6,decimal_places=2) # 订单总价格 2.2 引用其他应用的模型 例如goods字段，引用了商品应用的GoodsInfo模型类 格式：应用名
2020-10-18 10:09:55
575
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人