- 博客(3)
- 收藏
- 关注
原创 一般的网站反爬策略及应对
反爬机制和破解方法汇总一什么是爬虫和反爬虫?爬虫:使用任何技术手段,批量获取网站信息的一种方式。反爬虫:使用任何技术手段,阻止别人批量获取自己网站信息的一种方式。二 Headers and referer 反爬机制*headers进行反爬是最常见的反爬虫策略。*还有一些网站会对 Referer (上级链接)进行检测(机器行为不太可能通过链接跳转实现)从而实现爬虫。headers 知识补充***host:提供了主机名及端口号Referer 提供给服务器客户端从那个页面链接过来的信息..
2020-07-22 21:04:18
960
原创 k8s简单部署
关闭防火墙:$ systemctl stop firewalld$ systemctl disable firewalld关闭selinux:$ sed -i 's/enforcing/disabled/' /etc/selinux/config$ setenforce 0关闭swap:$ swapoff -a $ 临时$ vi /etc/fstab $ 永久添加主机名...
2020-04-27 11:57:12
195
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人