PSL判定域名后缀是否是合法注册域名

最新推荐文章于 2021-01-29 00:42:59 发布
最新推荐文章于 2021-01-29 00:42:59 发布
阅读量344 收藏
点赞数
分类专栏： python 域名 文章标签： 域名 域名后缀 PLS public suffix list python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_42280274/article/details/88709068
版权

判定域名后缀是否是合法注册域名

在做有关流量中域名聚类的事情，需要进行数据过滤。做实验过程中的小探索，如何利用PSL(public suffix list)判断域名后缀是否合法，即是注册域名。
发现有两个python的包，用两个包做出来效果完全相同,即在同一数据集滤除相同的不合法域名

#1.
from publicsuffix import PublicSuffixList
import codecs
psl_file = codecs.open('/home/wangqiang/public_suffix_list.dat', encoding='utf8')#需要实现下载好github中的PSL列表
psl = PublicSuff
最低0.47元/天 解锁文章
0000Oliver
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
psl:基于公共后缀列表JavaScript域名解析器
04-28
psl（公共后缀列表） psl是基于的JavaScript域名解析器。 该实现是的进行测试的，并由提供。 提供的跨浏览器测试 什么是公共后缀列表？ 公共后缀列表是跨供应商的一项举措，旨在提供准确的域名后缀列表。 公共后缀列表是Mozilla项目的一项计划，但作为社区资源进行维护。 它可以在任何软件中使用，但最初是为了满足浏览器制造商的需求而创建的。 “公共后缀”是Internet用户可以直接注册名称的名称。 公共后缀的一些示例是“ .com”，“。co.uk”和“ pvt.k12.wy.us”。 公共后缀列表是所有已知公共后缀的列表。 资料来源： ： 安装 Node.js npm install --save psl 浏览器 下载psl.min.js并将其包含在脚本标签中。 < script src =" psl.min.js " > </ script > 该脚本
mlf slf psl_不解析PSL的公共后缀查找
weixin_26722031的博客
08-31 1112
mlf slf pslDuring my work at SSE (I was working on the security-first DNS provider deSEC), I was facing the need for quickly looking up the so-called Public Suffix for a given domain name. If the doma...
域名小知识：Public Suffix List
weixin_34174105的博客
08-01 1140
Webkit 中，通过 document.domain，可以将 domain 设置到最后一级(最后一个点之后的内容)。由于域名最后实际上有一个 .(例如https://imququ.com. 可以正常访问)， 所以甚至可以将document.domain 设置为空字符串。 根据 HTML5 文档的描述：在 JavaScript 中通过 document....
python3 模块 public缀_Python publicsuffixlist包_程序模块 - PyPI - Python中文网
weixin_39818631的博客
01-29 490
publicsuffixlistPublic Suffix Listpython 2.5+/3.x的解析器实现。支持idn(unicode或punycoded)。支持python2.5+和python 3.x与内置psl和更新程序脚本一起提供。用纯python编写。没有库依赖项。安装publicsuffixlist可以通过pip或pip3安装。$ sudo pip install publicsu...
所有域名后缀
Ambulong的博客
01-22 6727
http://www.iana.org/domains/root/db
publicsuffix-ruby：基于公共后缀列表的Ruby域名解析器
02-05
Ruby的公共后缀 PublicSuffix是基于的Ruby域名解析器。 链接 要求 PublicSuffix需要Ruby> = 2.3 。 对于较旧版本的Ruby，请使用早期版本。 安装 您可以手动安装gem： gem install public_suffix 或使用Bundler并将...
psl:Mozilla的公共后缀列表的本地Rust库
03-10
该库使用Mozilla的“可靠地确定域名的后缀。 它将列表编译为本地Rust代码，以实现最终的速度和正确性。 维护人员可以单独完成此列表的编译，因此板条箱仍然可以非常快速地进行编译。 此板条箱甚至在std库上也没有...
PSL691U线路保护测控装置说明书
04-01
PSL691U线路保护测控装置是一款应用于电力系统保护测控领域的高精度装置。它具备的功能和特性包括但不限于以下几点： 1. 保护功能：PSL691U具备多种保护功能，能够对线路进行快速、可靠的故障检测和隔离。这些保护...
基于PSL/Sugar语言的RISC模块验证
08-05
《基于PSL/Sugar语言的RISC模块验证》 RISC（Reduced Instruction Set Computer）处理器因其精简的指令集和流水线结构，在嵌入式系统领域广泛应用。然而，RISC处理器的验证工作由于其复杂性和多样性，传统Co-...
有效的域名后缀列表
weixin_33888907的博客
11-15 8059
# Version 2016060300, Last Updated Fri Jun 3 07:07:01 2016 UTCAAAAARPABBABBOTTABBVIEABOGADOABUDHABIACACADEMYACCENTUREACCOUNTANTACCOUNTANTSACOACTIVEACTORADADACADSADULTAEAEGAEROAET...
ModuleNotFoundError: No module named ‘sklearn.externals.joblib‘
weixin_42280274的博客
07-12 9942
原来的代码为： from sklearn.externals.joblib.parallel import Parallel, delayed 报错原因是sklearning新版本移除joblib 解决方法为另外安装包： conda install joblib 代码改为： from joblib.parallel import Parallel,delayed 参考： sklearn.externals.joblib导入问题 ...
python 字典深拷贝
weixin_42280274的博客
07-07 4885
用到了字典拷贝 ，直接使用dict1 = dict2 出现错误，这种方式修改dict2 dict1也会随之改变。 拷贝有三种方式： 直接赋值：其实就是对象的引用（别名）。 浅拷贝(copy)：拷贝父对象，不会拷贝对象的内部的子对象。在源对象上操作新对象可能会受影响。 深拷贝(deepcopy)： copy 模块的 deepcopy 方法，完全拷贝了父对象及其子对象。在源对象上操作新对象不受影响。 import copy dict2 = copy.deepcopy(dict1) ...
Python3 dpkt包解析DNS数据包
weixin_42280274的博客
10-21 2190
从网卡直接抓包，只过滤端口53，过滤出dpkt.ip.IP类和dpkt.udp.UDP类。提取DNS包的各种信息储存为字典格式。代码如下。 import pcap import dpkt import socket # RR types DNS_A = 1 DNS_NS = 2 DNS_CNAME = 5 DNS_SOA = 6 DNS_NULL = 10 DNS_PTR = 12 DNS_HINFO = 13 DNS_MX = 15 DNS_TXT = 16 DNS_AAAA = 28 DNS_SRV
教女朋友学 python——24点游戏
weixin_42280274的博客
10-14 2060
前言 女朋友一个编程小白，最近在学python，从零开始，作为男朋友的我当然不能坐视不管。帮助完成一下她的作业，顺便记录一下。我自己的python也是边学边用，基础很不扎实，就当是自己复习python，把握一些细节。 题目： 用python编写24点小游戏。 要求：用键盘输入四个数字，每个在1-10（包含）之间，判断是否可以通过±*/运算得到24，并输出运算过程，结果越简洁越好。 思路 只有四个数字，最简单粗暴的方法就是枚举法。 1.列出四个数字所有可能的排列组合。（数字可能重复，所以要去重） 2.四个数
教女朋友学 python——加减数学竖式
weixin_42280274的博客
10-17 1715
女朋友的编程作业，适合零基础的同学。 题目 思路 运算是简单的数学竖式，计算并没有困难，题目考察点在于python的格式化输出。 python中的格式化输出主要使用format方法。 实现代码 print('请输入两个整数：') ## 输出 a = int(input()) ## 输入 b = int(input()) ## 输入 while(1): print('请输入两个整数的运算方式（+或-）：') ## 输出 y = input() ## 输入 if y=='+':
python 利用包 解析指定DNS域名的ip
weixin_42280274的博客
01-06 1039
查阅资料和自己尝试之后总结两种方法，一种是利用socket包中getaddrinfo，第二种是利用dnspython包的方法解析 import socket from dns import resolver import dns import dns.rdtypes.IN.A import dns.rdtypes.IN.AAAA def get_ip_list(domain): # 获取域名解析出的IP列表socket ip_list = [] try: addrs = socket.get
python -abc模块
weixin_42280274的博客
10-12 917
python -abc模块学习总结 python 没有提供抽象类与抽象方法。ABC（Abstract Base Class）模块提供了在Python中定义抽象类的方法。 abc模块有以下两个主要功能： 某种情况下，判定某个对象的类型，如： isinstance(a, MyABC), issubclass（a, MyABC） 强制子类必须实现某些方法，即ABC类的派生类 abc.ABC 辅助类 ，可以不用关心元类的概念，直接继承就有了ABCMeta元类，使用时注意元类冲突。 abc.ABCMeta 该类用来定
利用python服务 构建局域网传输大型文件
weixin_42280274的博客
10-13 269
python -m http.server 8888 可以构建简单局域网，用于同一个办公室传输几十G的大型文件。 1.电脑安装python 2.命令行切换到文件所在目录 3.直接输入命令python -m http.server 8888 4.此时局域网另一台电脑可以直接访问ip：8888来下载所需文件 （查看IP ipconfig 命令） ...
什么是zsl什么是psl
最新发布
07-04
ZSL (Zero-Shot Learning) 和 PSL (Probabilistic Soft Logic) 都是机器学习和人工智能领域的概念。 1. **ZSL（零-shot learning）**： ZSL 是一种计算机视觉和自然语言处理中的迁移学习方法。在传统的监督学习中，模型通常依赖于大量的标注数据进行训练。然而，在ZSL情况下，我们没有直接见过某些类别的实例（比如从未见过的新物种），但仍然能够根据描述或类别的上下文知识来进行预测。这是通过将图像特征映射到一个与之相关的文本空间，利用已有的类别标签的描述信息来推断新类别的属性。 2. **PSL（Probabilistic Soft Logic）**： PSL 是一种基于概率的推理框架，主要用于表示和推理复杂的关系网络。它是Soft Computing的一部分，特别适用于处理不确定性和模糊性的问题。不同于传统的逻辑规则系统，PSL使用概率理论来量化信念，并允许规则之间的冲突和平行性。它提供了一种统一的方式表达领域知识，例如在推荐系统、知识图谱等领域中用来建模用户行为和实体间的复杂关系。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值