Datewhale爬虫学习活动打卡——Task0环境安装

前言

受疫情影响,教培行业颓靡,上班也没以前那么忙了。半年前主要学的是java,最近半年主要使用的是c++和python,由于还没上手过什么python项目,于是参加了这个活动练练手。可以用github和CSDN打卡,懒得用github了,遂打开了好久没有打开的markdown编辑器,翻了下之前学编程认识的小伙伴们的博客,倍感怀念。
这个学习活动是根据他人开源在github上的爬虫知识进行自学的,8天完成爬虫知识的学习。看了一下群里的打卡,还是大学生和研究生多,社畜默默流下了眼泪。
废话到此为止,今天是第一天Task00,完成环境的搭建。

优化访问github的速度

开源的资料链接:
Python爬虫编程实践
一开始就遇到了一件烦人的事,github的访问速度太慢了,于是参考了大神的做法,修改本地hosts文件,具体方法请去大神的文章里学习:
GitHub访问速度慢的一种优化方法

安装Anaconda

什么是anaconda?
Anaconda下载地址
Anaconda安装教程
完成。
在这里插入图片描述

安装ChromeDriver

Selenium与ChromeDriver
Selenium 1是一个支持多种浏览器的浏览器自动化测试工具,通过使用它我们能够直接在浏览器中运行我们的测试,模拟用户的手动操作(通过注入js来实现)。
Selenium 2(WebDriver),它在上一代Selenium的基础上集成了WebDriver,而WebDriver是利用浏览器的原生API来进行浏览器操作的,从而获得了速度和稳定性的提升,我们可以使用Python来访问WebDriver API。
ChromeDriver是Chrome浏览器提供的驱动程序,是Chrome浏览器和selenium 2的桥梁,要想使用selenium 2来控制Chrome浏览器必须正确安装ChromeDriver。
ChromeDriver下载链接:
ChromeDriver Mirror
ChromeDriver安装教程:
selenium 安装与 chromedriver安装
安装完之后运行测试代码,结果正确,完成。
在这里插入图片描述
在这里插入图片描述
至此爬虫环境的搭建算是完成了,下一个阶段的学习是学习html和request,get的知识,算是小有基础吧,这次要了解的更深入一些。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值