说到爬虫,你想到了什么?
是不是想着,这是开发人员写的代码,生成一个软件,然后执行,就去访问某些网站,从网站上获取特定的信息,然后把这些信息存储下来。
如果你是这么想的,是不是觉得‘爬虫’很高大上,自己不懂得写代码,想从网站上搞点数据下来,就会很难呢?
那今天,我就教你一招软件测试行业内的小知识,不写代码,速度、效率比写代码还高的办法,认真学习下吧!
首先,确认你要爬取的网站。如,我想了解前沿技术,我想爬取 腾讯云沙龙 视频,
然后,你要确认,想要爬取的信息。我想要获取页面中课题的基本信息,如,标题、类型、开课时间、课程状态等。
作为一个测试人员,或者有一定网络知识基础的同学,肯定就会想到,我可以通过浏览器的 F12,看下页面接口请求信息,因为,接口主要就是用来传递数据的,我要的信息,很可能在某个接口中,就会有。