20190609初识爬虫第一天

最新推荐文章于 2024-05-01 08:54:07 发布
最新推荐文章于 2024-05-01 08:54:07 发布
阅读量177 收藏
点赞数
分类专栏： 触电爬虫 文章标签： 菜鸟
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_45163110/article/details/91382592
版权

1、爬虫与python

爬虫的定义

通过模拟用户浏览行为来自动获取Web数据的程序，也是搜索引擎的基础。
网络爬虫的分类
所谓的深网爬虫，就是需要登录后才能查看网页信息的网站，
获取数据的两种方式
接下来学了一些python的基础知识，上手写句子，出现了一些问题
a是数值型列表，b是字符串，利用list函数将b转换为列表，但是a与b却不能直接进行连接操作
会如此报错
但是若直接一开始将c设置为字符串，元素和list(b)一样，a与c便可以连接
不知是为什么？
还有太久没用pycharm了，直接enter以为会运行，啥反应也没有，怀疑自己几分钟哈哈，忘记点运行了
书上第二章就开始讲html和css相关知识了，完全从0开始，在学表单的时候还出了些问题，
按书上的代码，运行效果却不同

我的运行结果
书上的运行结果
不知道为什么，这是第二个疑问
还有，就是设置html页面的背景色时，总是整个页面一个色，丑丑的，有没有办法分块呢？
就是这样子
这些就是2019年6月9号的学习内容，希望我能加油坚持呀！

那些时光12345
关注
专栏目录
pycharm禁用pytest
jacke121的专栏
09-08 3357
run的快捷键是alt+shift+f10 比如可以设置快捷键为Ctrl+f1 将代码中的test替换掉 之所以会出现上面这种情况，实际上是因为Pycharm误认你的脚本文件是用来测试的。导致这样的结果，可能是你脚本中的test字样太多了，所以替换掉test即可。 同时按住 CTRL 和 R 两个键，进入字符替换模式，将test替换成其他字符串。上面的输入框输入test，下面的输入框输入你想要替换的字符串，然后按输入框右边的Replace all 就可以完成替换了。 ...
requests-html库初识 + 无资料解BUG之 I/O error : encoder error，Python爬虫第30例
梦想橡皮擦，专栏100例写作模式先行者，现象级专栏 《Python 爬虫 100 例》作者、《滚雪球学 Python 专栏》原创者
09-05 1万+
这篇博客解决了一个BUG，恭喜你发现了 encoding error : input conversion failed due to input error, bytes 0x81 0xE3 0xD3 0xAA
Ubuntu 一键安装搜狗输入法！全网唯一！
Linux猿
05-27 4233
sudo apt install im-config fcitx im-config -n fcitx wget -P /tmp/ https://ime.sogoucdn.com/dl/index/1612260778/sogoupinyin_2.4.0.3469_amd64.deb sudo apt install -y /tmp/sogoupinyin_2.4.0.3469_amd64.deb ctrl + space 切换到搜狗输入法即可使用。
Fiddler安装以及安全证书问题解决
LGX_TvT的博客
10-23 5万+
1.安装： Filddler官网：点击打开链接 我安装的是filddler4：点击打开链接 直接下载文件，然后一路下一步就可以了 1.下载文件： 2.安装文件一路下一步即可 3.安装完成后打开软件出现： 接着安装完成后来说说遇到的坑——Filddler安全证书安装 安装证书失败的解决： 1、首先确保安装的 Fiddler 是较新的版
解决移动端浏览器下拉显示“网页由xxx提供，QQ浏览器X5内核提供技术支持”
蓝色之恋love的博客
09-27 3570
对于移动端的浏览器（这里以QQ浏览器为例）下拉的时候会出现“网页由xxx提供，QQ浏览器X5内核提供技术支持“ 这里的解决办法 <!-- 在文件的public/index.html文件夹中 --> <style> html,body{ height: 100%; overflow: hidden; -webkit-overflow-scrolling: touch; } </style>
TextView 文本超出屏幕自动滚动 文本处于最底部
ン昔年昔日昔时ソ
06-12 3028
今天搞了一个Textview文本超出一屏文本显示的问题，在网上搜索了好多办法，最后中和了下。xml布局文件：&lt;TextView android:id="@+id/timerText" android:layout_width="match_parent" android:layout_height="wrap_content" /&gt; &lt;Scro...
2024年Python最新Python爬虫入门教程：初识爬虫_程序员爬虫教学
2401_84584609的博客
05-01 1291
模拟浏览器，发送请求，获取响应网络爬虫，英文名为Spider,又称为网页蜘蛛，网络机器人，在数据分析应用中，更多的将爬虫称为数据采集程序，是一种按照一定的规则，自动地抓取网络信息的程序或者脚本。原则上,只要是客户端(浏览器)能做的事情，爬虫都能够做爬虫也只能获取客户端(浏览器)所展示出来的数据网络中的数据可以是由web服务器【Nginx/Apache】，数据库服务【MySQL/Redis/MongoDB】，索引库，大数据，视频/图片库，云存储【阿里云的OSS】等提供的，最主要的来源是Web服务器。
万字博文教你爬虫必备-＞Selenium【详解篇】（初篇）
热门推荐
孤寒者的博客
08-05 53万+
万字博文教你爬虫必备-＞Selenium【详解篇】（初篇）
从零开始【第一天】 爬虫师工资30k月薪真高！！！
python高级爬虫工程师
10-14 1759
python爬虫师 工资真高30k月薪 你喜欢高工资吗？ 如果你喜欢，那么我记录的这些内容会适合你。如果你不喜欢，就不要浪费时间看了。 从零开始3个月可以成为高手吗？ 每个人的学习路径不一样，从零开始成为高手的时间会有差别。今天是第一写文章，但前面几天做了调查了解。 python爬虫方面的文章很多，90%不适合我这样的新手，和看天书感觉差不多。买了一套课程（网络培训原价收费5980元），看了几集，不是我需要的，放弃。 从新开始规划学习路径和学习内容中，在写文章之前，有了一个想法，在学习实践过程中，用文章记录
爬虫并发及应用
weixin_54104072的博客
11-26 1152
HLSHLS（HTTP Live Streaming）是一种流媒体传输协议，最初由苹果公司开发并推出。它是一种基于HTTP的流媒体传输协议，旨在提供高质量的实时流媒体传输和适应不同网络条件的能力。HLS技术主要用于在互联网上实时传输音频和视频内容，通常用于直播活动、视频点播等场景。媒体分片（Media Segmentation）：源视频或音频内容首先被分割成短小的媒体分片，通常每个分片持续几秒到十几秒不等。自适应码率（Adaptive Bitrate）
20190610初识爬虫第二天
weixin_45163110的博客
06-11 121
1、关于审查元素 既可以在网页上右击，点击“检查”，也可以直接按F12键 所谓审查元素，可以看下面这个链接。 审查元素
浅谈个人主页头部下拉变大的思路
weixin_30367945的博客
07-08 200
其实就是在ViewController上先放一个image，就是你想要下拉的时候放大的，然后再放置一个tableView ，并设置 .tableHeaderView=headView 背景为透明色，并且headView的高度比image的高度小点以免在下拉的时候 出现白色不衔接的状态， 如果想要在头部在添加一个签名，个人头像什么的 都可以放在headView上 并且不随着背景图片的...
抖音aop的下拉词怎么去掉？＜h1＞抖音下拉词＜h1＞
weixin_48224256的博客
04-18 3261
想处理掉，要看什么词语，首先查询这个主词下面所有下拉词的指数。根据排名，如果你要去掉的那个比较低。那么容易写，因为你只需要找做抖音下拉的，上去一个词，就可以了，把你要去掉的那个词顶掉！就行了，如果不是最低。最高，那就相对比较难。你要同时刷其他词，最终让他指数最低，就行了。他就容易被踢出去！ ...
Git常用命令
ArkShen的专栏
06-24 229
创建远程库    登陆GitHub，在右上角找到“new repository”按钮，创建一个新的仓库从远程库克隆    将github上的项目，克隆到本地一份git clone git@github.com:账号名/项目名.git从远程库获取到本地git pull将本地提交远程库git push origin master提示：每次提交前，需要先获取，解决冲突后再次提交文件管理本地仓库分为三部分...
016-删除列表框、下拉菜单的选项
ppwwp的专栏
03-14 1400
删除列表框，下拉菜单的选项有两种方法： 利用HTMLSelectElement对象的remove()方法删除选项。 直接将指定选项赋值为null即可。 对HTMLSelectElement对象而言，它提供了如下方法用于删除选项。 remove(long index)：删除指定索引处的选项。 上面方法中的index是需要删除选项所在的索引值。如果该索引值比下拉列表中选项的最大索引值还大，或者...
抖音上热门必选软件
weixin_44254533的博客
12-26 3624
HELLO，大家好 今天给大家带来的是一款抖音上人们的必备软件，你还在为你的几次浏览量而发愁吗，不要发愁，你只要下载了这款软件，保你很快拥有大量粉丝，实现人生梦想，走上幸福之路，好了，废话不多说了，大家跟上车吧。 软件名称：InShot 软件大小：25.6MB 软件类型：视频编辑类APP 选择视频，将图片导入软件里（右下角多选按钮） 进入编辑区，画布可以调整视频比例，这里使用用1:1的正方形。选...
PullToRefresh上拉加载下拉刷新
kaisengao的博客
07-28 430
@Override protected void onCreate(Bundle savedInstanceState) { super.onCreate(savedInstanceState); setContentView(R.layout.activity_grid); ShowNet(); gv = (PullToRe
安全-密码相关技术学习路线导图
10-14
安全-密码相关技术学习路线导图
Selenium工具用于web应用程序的端到端自动化测试
最新发布
10-14
内容概要：此文阐述了软件测试的重要性和多种类型的测试方式，并特别讲解如何利用 Selenium 这款 Web 应用测试工具实施自动化测试，从环境搭建，测试代码书写再到具体测试执行，涵盖了全面的操作演示。 适用人群：软件开发人员以及QA/QC人员。 使用场景及目标：对于进行web应用的自动化、端到端测试时可以借鉴本文提供的Selenium自动化流程，达到减少人工劳动、降低bug发生的目的。 阅读建议：本文介绍了理论与实战并重，推荐在读过概念部分后跟着实战操作一遍。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值