- 博客(3)
- 收藏
- 关注
原创 Python Notebook 爬虫实践案例分享3/yieldwatch
这一个爬虫任务我们需要登录网站输入一个东西,并且查看我们是否可以得到回复,并且我们需要采集下来所有得到回复的代码。这里我们没有使用爬虫,我们使用了API的程序。需要注意的是:我们在使用API的时候有些时候会遇到很多奇怪的返回,我们一定要注意API的程序的正确使用,并且我们需要处理API回复的很多不同的情况。99%的情况API的回复都是有一定数量的回复,我们需要多提交几次申请。
2022-10-31 10:13:27
111
原创 Python Notebook 爬虫实践案例分享2/Dappa
然后点击下方的 Smart Contract的按钮,你会看到一共有多少个Smart Contract,然后在这个的基础上我们需要把展示出来的所有Smart Contract都爬取出来。然后关于如何寻找这个按钮,现在版本的selenium没有了根据class选择的function但是我们可以用多种选择的方法,只不过这个代码使用的时候我们需要自己来选择class的形式。这里面因为上面提到的问题,所以我选择一个比较笨的方法,反复去尝试点击这个按钮,如果没有的话,我们就进行下一步。如果没有,记录没有。
2022-10-31 09:42:43
203
原创 Python Notebook 爬虫实践案例分享1/bscscan
是日,申东华教授电邮告吾爬取bscscan以及dappradar的BEP-20 Tokens以及Top Blockchain Dapps的相关数据以供研究之用,吾当时希望可以成为教授研究助理,因此硬着头皮接下了这个工作,但彼时我还没有开始过一次爬虫的练习,但是在简历上已经说了我是会用爬虫的。然后老师需要我提取那个打开之后的页面的链接,我的做法是:所有的超链接文本在原来界面的源代码上面都是具有超链接的地址的,于是我不需要打开这个超链接就可以看到这个链接。这样之后我们就得到了这个问题的答案。
2022-10-21 07:44:22
509
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人