- 博客(10)
- 收藏
- 关注
RSS订阅原创 运用python中的selenium自动登录126或者163邮箱
#问题，在定位过程中，直接定位是定位不到的，因为它是动态的，每次刷新都有变化，所以是都定位不到，所以要先切换到iframe登录模块，才能定位分析。#首先是登录页面#切换到登录页面#进行定位最后是代码#导入selenium，导入时间表from selenium import webdriverimport time#读取Chromedriver路径，或者加入到环境变量中driv...
2019-08-13 19:22:42
556
原创 淘宝页面登录报错定位错误（小杜笔记）
直接代码#导入软件包from selenium import webdriverimport time#打开工具的绝对路径driver=webdriver.Chrome(r'F:\du\chromedriver_win32\chromedriver.exe')#获取网址driver.get('https://login.taobao.com/member/login.jhtml?sp...
2019-08-03 10:44:04
978
原创 selenium+python+chromedriver.exe爬取登录QQ邮箱
这是笔者面试的一道题，回到家中自己去撸代码。#导入所需要的包from selenium import webdriverfrom selenium.webdriver.common import action_chainsimport time#读取工具路径driver=webdriver.Chrome('F:\du\chromedriver_win32\chromedriver.ex...
2019-08-02 21:29:32
996
原创 爬虫基础
爬虫基于B/S模式的数据采集技术B-------->浏览器 S------->服务器爬虫的基本结构网络请求 ----->浏览器请求服务器的网页网页解析 ----->目标数据爬取----->爬取驱动逻辑数据保存以上网址代表的意义协议 主页网址 目标资源地址 传递参数HTTP协议HTTP：是互联网上应用最为广泛的一种网络...
2019-07-26 14:38:50
176
1
翻译 怎么设置TensorFlow自动分配设备
#初始化信息，#如果指定的设备不存在，允许TensorFlow自动分配设备# init session# 1.记录设备指派情况: tf.ConfigProto(log_device_placement=True)# 设置tf.ConfigProto()# 中参数log_device_placement = True, 可以获取到operations和Tensor# 被指派到哪个设备(...
2019-06-25 15:21:10
615
2
原创 win7系统解决import cv2不报错的方法（小杜总结）
一 如果出现import CV2 报没有cv2.cv2的错误：原因： 1没有安装OpenCV，解决安装pip install python-opencv2版本不对应因为我是python3.7+win7+64位，所以需要3.7的，下载地址：https://mirrors.tuna.tsinghua.edu.cn/pypi/web/simple/opencv-python/二 如果出...
2019-06-25 11:05:32
1288
1
原创 新手爬取51job，智联，boss网站职位信息总结和代码（小杜总结）
爬取要求：（1） 使用合适的数据保存手段保存爬取数据（2） 记每条数据的爬取时间（3） 实现数据的增量爬取（4） 实现同时基于关键字和页面 URL 的去重元数据说明：一 统一注意事项或建议1 写代码时认真一些，不要因为个别的单词空格错误，过多浪费时间2 写一步做一步,每解析一步，输出来验证一下（因为代码量小的话，好检查一下，代码量大的话，不是不能解决，只是会太多的浪费时间）...
2019-06-24 09:44:14
1612
2
原创 python中用OpenCV填充不规则点集合（小杜总结）
大家好，不多说，直接上代码。#导入包和文件import cv2import numpy as npimport matplotlib.pyplot as plt#为了画出轮廓from imutils import contours# 绘图展示函数，画出图像def cv_show(name,img): cv2.imshow(name, img) cv2.waitKe...
2019-06-21 22:51:21
2288
4
原创 win7安装scrapy中的坑(小杜笔记）
####scarpy安装出现的问题，安装时会出现个这个问题安装visualcppbuildtools_full.exe（链接）####安装上面这个软件会出现win7系统环境配置过低的情况解决方案：https://www.microsoft.com/zh-CN/download/details.aspx?id=48137解决window7系统问题( scrapy安装中)####以上问...
2019-06-19 08:50:02
190
2
原创 win7安装TensorFlow-GPU总结（小杜笔记）
1 首先CPU的计算能力必须大于3.0NVIDA CUDA显卡计算能力对应表 - 小新识图 - CSDN博客https://blog.csdn.net/huixingshao/article/details/822157031.1看版本对应2安装cudahttps://developer.nvidia.com/cuda-toolkit-archive3安装cudnn（此处以cuda8...
2019-06-18 08:47:00
1074
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人