先说一下这个需求,需要判断某个域名是否在黑名单中。黑名单中的域名一旦设置,其下任何级的域名都认为是在黑名单中。
如黑名单中加入a.com,则a.com、www.a.com、1.2.3.a.com等都算进入黑名单。
如黑名单中加入com,则所有com域名都算进入黑名单。下面出现的域名如带*都为违法域名
一开始我使用了like去做查询,如我要做判断的域名是www.a.com。SQL语句如下:
数据量少的情况下速度很快,我测试了一下10W黑名单时,大概在200毫秒左右。
虽然黑名单一般不会有这么多,但是我有研究的兴趣,所以就继续思考。
接下来想到的办法,10W黑名单时,耗时1-3毫秒左右。
我在表中加入了hash字段,设为索引,这里直接用了md5对域名进行处理。
然后在php中在查询前对域名进行处理。因为域名是用.来分割一段一段的,所以我把每一段的md5都计算出来,最终进行in查询。由于域名的一段一段不会太多,所以并不需要担心性能问题。
比如域名是www.baidu.com,那么我将com、baidu.com、www.baidu.com分别md5,最终代入in查询条件中。
代码如下:
最终结果: