builtwith模块是Python里的网站技术信息查询工具,开发团队来自于澳大利亚。利用该网站所提供的功能,你可以查询出某网站背后是由哪些技术来支持的,比如操作系统的类型、所采用的访问量统计服务、采用的发布平台、广告平台、语言框架、聚合功能、页面文档信息、网站编码及操作系统信息等等。可帮助更深一层次了解该网站的运营情况。但builtwith模块是在 Python2 环境下开发的,Python3 的语法和 Python2 有一些区别,所以 builtwith 不能在 Python3 下直接使用,我们修改部分代码就可以在Python3下使用builtwith了。
首先,在命令行窗口下安装cherdet模块和builtwith模块
但是,这时候import chardet可以,import builtwith会有语法报错,这是因为builtwith模块下_ _ init _ _ .py 文件(在Lib下site-packages里的builtwith找到)里的部分语法规则是按照Python2写的,在Python3环境下需要修改。
比如模块导入:要改成
import sys
import os
import re
import json
import urllib.request #Python 2里的urllib2替换
import urllib.error
import chardet
比如print语句要加()
比如Exception as e:
修改后保存,在import builtwith就可以正常使用了。
此外,上面的修改过程也可以通过文件读写修改。