学习笔记：网络机器人1.前端入门

最新推荐文章于 2024-04-30 17:15:06 发布

Python学习中的进阶者

最新推荐文章于 2024-04-30 17:15:06 发布

阅读量160

点赞数

分类专栏：网络机器人文章标签：网络

本文链接：https://blog.csdn.net/weixin_42850424/article/details/106920871

版权

网络机器人专栏收录该内容

11 篇文章 0 订阅

订阅专栏

网络爬虫是在互联网按照一定规则去爬取人类需要的信息的程序。主要是通过对URL的请求来实现。
最大的网络是万维网www，
我们的爬虫只是参与其中很小的一部分
爬虫本质上就是HTTP客户端请求。

爬虫怎么做？
1.找到URL
2.构造请求包（headers，cookies，data）
3.发送请求，接收响应
4.数据清洗，提取需要信息

爬虫工具
1.发起请求 requests
2.处理响应 bs4 xpath re
3.存储数据本地存储，数据库存储

pip install requests

pip install bs4

网页三剑客
HTML CSS JavaScript

需要掌握的页面调试器
1.CTRL+F调出搜索框，可以写搜索语法
2.network选项卡抓包
3.左上角小箭头可以定位元素

<!DOCTYPE html>
<html lang="en">
<head>
    <meta charset="UTF-8">
    <title>这是测试</title>
    <link href="index-style.css" rel="stylesheet">
    <style type = "text/css">
        p{
            color:red;
        }
    </style>
</head>
<body>
    <h1>这是一个大标题</h1>
    <p>这是一个段落</p>
    <img src="1.png">
</body>
</html>

<!DOCTYPE html>
<html lang="en">
<head>
    <meta charset="UTF-8">
    <title>这是测试</title>
    <link href="index-style.css" rel="stylesheet">
    <script src="index.js"></script>
</head>
<body>
    <h1>这是一个大标题</h1>
    <p id = "welcome-line">这是一个段落</p>
    <a class = "link" href="//makerbean.com">每颗豆官网</a>
    <img src="1.png">
</body>
</html>

index-style.css

p{
    color:red;
    }

#welcome-line{
    color:blue;
    }

.link{
    color:green;
    }

index.js

var alertText = "Hello World";
alert(alertText);

Python学习中的进阶者

关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
学习笔记：网络机器人1.前端入门

爬虫是在互联网是执行的程序。最大的网络是万维网www，我们的爬虫只是参与其中很小的一部分爬虫本质上就是HTTP客户端请求。爬虫怎么做？1.找到URL2.构造请求包（headers，cookies，data）3.发送请求，接收响应4.数据清洗，提取需要信息爬虫工具1.发起请求 requests2.处理响应 bs4 xpath re3.存储数据本地存储，数据库存储pip install requestspip install bs4网页三剑客HTML CSS JavaScr
复制链接

扫一扫