利用搜索引擎进行资源收集
充分利用搜索引擎,利用搜索引擎进行资源收集
海燕技术栈
既然巅峰留不住,那就重走来时路
展开
-
利用搜索引擎进行资源搜集第三课时
本篇文章是前面两篇文章的总结应用,所以没搭好搜索环境的朋友请先看第一篇文章。本篇文章的搜索结果是基于谷歌浏览器的。浏览器中能搜索出来的资源都是合法资源,大家可以放心食用。1、 学会分析一些网站的链接,然后利用site+inutl组合进行搜索以石墨文档为例石墨的链接可以分成两部分,用蓝色框代表的是域名部分,而docs是链接中的关键词。多分析几个石墨就会发现,所有的石墨链接几乎都遵从这个模板。...原创 2019-04-09 09:05:06 · 400 阅读 · 0 评论 -
htmlunit设置支持js和 ajax
免责声明:不要拿爬虫在法律边缘试探简单的说,就是进行如下设置:webclient.getOptions().setUseInsecureSSL(true);// 禁用css ,一般来说 css没啥用webclient.getOptions().setCssEnabled(false);webclient.getOptions().setThrowExceptionOnFailingSta...原创 2019-01-07 11:34:47 · 3004 阅读 · 1 评论 -
利用搜索引擎进行资源搜集第二课时
这是一篇搜索进阶篇文章本篇文章的内容包括以下四个方面谷歌高级语法深入探索、利用谷歌进行科学上网、利用chrome浏览器分析网站接口的方法以及简单爬虫分析。大家利用搜索引擎一般干嘛呢?谷歌搜索引擎作为黑客必用的一个浏览器,自然会有很多比较厉害的特点。让我们来探讨一下谷歌搜索引擎到底能干些啥。了解谷歌高级语法上一篇内容中,我们初步探索了搜索引擎的语法。这一篇,我们同样以例子的方式来深入了解。...原创 2019-04-02 09:20:36 · 1282 阅读 · 3 评论 -
利用搜索引擎进行资源搜集第一课时
这是一篇搜索入门的文章本篇文章的环境是Win10,其他操作系统情况类似如果使用的不是谷歌浏览器,建议使用谷歌浏览器(Chrome)如果家里面的浏览器本身就是这个图标,那么恭喜你,你已经有了初步的搜索条件。如果不是这个图标,请按照下面的方法下载安装:下载地址:https://www.google.cn/chrome/在您当前浏览器的地址栏输入上面的网址,然后按下回车键就好了进入到官网,以I...原创 2019-04-01 14:38:19 · 995 阅读 · 0 评论 -
谷歌搜索语句实例(持续更新)
1、搜索mobi类型免费下载的电子书网站intitle:mobi下载2、初步查找某位同学的信息site:xxx.edu.cn intext:名字原创 2019-03-28 13:16:12 · 8594 阅读 · 0 评论