“ValueError: Missing scheme in request url: xxxxxx”的终极解决方法：删除错误的url地址

问题：ValueError: Missing scheme in request url:xxxxx，如下图：

分析：出现了错误的url地址，如’javascript:;’, ‘javascript:void(0);’，如下图：

上图是我的url地址列表（尚未补成绝对地址，请忽略此点），可见地址中有很多’javascript:;’, 'javascript:void(0);'等错误url地址。

解决：只要删除掉这些错误地址即可，我用的是列表减法来删除：list1=list(set(list1) - set(list2)),其中list2为错误url列表。代码如下：

 errorsite = ['javascript:;', 'javascript:void(0);'] # 错误url列表
 site = list(set(site) - set(errorsite)) # 减去错误url列表

运行结果：如下图，可见url列表中已没有错误地址。且运行代码不再报“ValueError: Missing scheme in request url: xxxxxx”