ip库处理

最新推荐文章于 2024-04-18 16:33:28 发布
最新推荐文章于 2024-04-18 16:33:28 发布
阅读量595 收藏
点赞数
分类专栏： 其他
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u011750989/article/details/49929749
版权

原始的纯真ip库有两个问题

1、地区没有拆分国家省市区县，需要程序二次拆分

2、有一些不规范数据，即学校网吧之类的，排重手工整理


程序里的ipdata  xuexiao.csv可见http://download.csdn.net/detail/u011750989/9283149

package com.java.ipku;


import java.io.BufferedReader;
import java.io.BufferedWriter;
import java.io.FileNotFoundException;
import java.io.FileReader;
import java.io.FileWriter;
import java.io.IOException;
import java.util.HashMap;
import java.util.Map;
import java.util.regex.Matcher;
import java.util.regex.Pattern;


public class IpUtil {
	
	static String[] provinces={"北京市","天津市","上海市","重庆市","河北省","山西省","辽宁省","吉林省","黑龙江省","江苏省","浙江省","安徽省","福建省","江西省","山东省","河南省","湖北省","湖南省","广东省","海南省","四川省","贵州省","云南省","陕西省","甘肃省","青海省","台湾省","内蒙古","广西","西藏","宁夏","新疆","香港","澳门"};
	static String[] directcitys={"北京市","天津市","上海市","重庆市"};
	
	static String[] xinjiang_key={"地区","州","市"};
	//内蒙
	static String[] nm_key={"盟","市"};
	//海南
	static String[] hn_key={"市","县"};
	static String[] other_key={"市","州"};

	public static void startSplitRegion(String region,Area area)
	{
		String country1="";
		String  province1="";
		String  city1="";
		String  subcity1="";
		//String region=ia.getRegion();
		//匹配省得到国家，ip库没有中国
		int is_china=0;
		for (String province:provinces)
		{
			Pattern pat = Pattern.compile("^"+province);
			Matcher mat = pat.matcher(region);
			
	  if (mat.find())
	  {
		//  ia.setCountry("中国");
		//  ia.setProvince(province);
		  is_china=1;
		//  System.out.println("country:"+"中国");
		 // System.out.println("province:"+province);
		  country1="中国";
		  province1=province;
		  
		  int is_drcity=0;
		  String excludeProvince=region.substring(province.length());
		  String subcity="";
		  
			for (String directcity:directcitys)
			{
				 pat = Pattern.compile("^"+directcity);
				 mat = pat.matcher(region);
				 if (mat.find())
				 {
					 is_drcity=1;
						//ia.setCity(directcity);
				//	  System.out.println("directcity:"+directcity);
				//	  System.out.println("区:"+  excludeProvince);
					  city1=directcity;
					  subcity1=excludeProvince;
						break;
				 }
				
			
			}
			if ( excludeProvince.length()>0 && is_drcity==0)
			{
				if (province.equals("新疆"))
				{
					for (String xk:xinjiang_key)
					{
						int inx=excludeProvince.indexOf(xk);
						if (inx>0)
						{
						//	ia.setCity(excludeProvince.substring(0,inx+1));
							//ia.setSubcity(excludeProvince.substring(inx+1));
					//		System.out.println("city:"+excludeProvince.substring(0,inx+1));
						//	System.out.println("Subcity:"+excludeProvince.substring(inx+1));
							city1=excludeProvince.substring(0,inx+1);
							subcity1=excludeProvince.substring(inx+1);
							
							break;
						}
					}
				}
				else if (province.equals("内蒙古"))
				{
					for (String nk:nm_key)
					{
						int inx=excludeProvince.indexOf(nk);
						if (inx>0)
						{
						//	System.out.println("city:"+excludeProvince.substring(0,inx+1));
						//	System.out.println("Subcity:"+excludeProvince.substring(inx+1));
							city1=excludeProvince.substring(0,inx+1);
							subcity1=excludeProvince.substring(inx+1);
							
							break;
						}
					}
				}
				else if (province.equals("海南省"))
				{
					for (String hn:hn_key)
					{
						int inx=excludeProvince.indexOf(hn);
						if (inx>0)
						{
							//System.out.println("city:"+excludeProvince.substring(0,inx+1));
						//	System.out.println("Subcity:"+excludeProvince.substring(inx+1));
							city1=excludeProvince.substring(0,inx+1);
							subcity1=excludeProvince.substring(inx+1);
							
							break;
						}
					}
				}
				else
				{
					for (String ok:other_key)
					{
						int inx=excludeProvince.indexOf(ok);
						if (inx>0)
						{
						//	System.out.println("city:"+excludeProvince.substring(0,inx+1));
						//	System.out.println("Subcity:"+excludeProvince.substring(inx+1));
							city1=excludeProvince.substring(0,inx+1);
							subcity1=excludeProvince.substring(inx+1);
							
							break;
						}
					}
				}
				
			}
			
			break;
	  }
	
			
		}
		
		if (is_china==0)
		 {
			//吉林市长春市 类似这种有12条记录，统一置为中国
			if (region.contains("大学") || region.contains("网吧") || region.contains("学院") || region.contains("市"))
				//System.out.println("Country:"+"中国");
				country1="中国";
			else 
				//System.out.println("Country:"+region);
				country1=region;
		 }
	//	return country1+"\t"+province1+"\t"+city1+"\t"+subcity1+"\t";
		if (city1.contains("大学") || city1.contains("网吧"))
			city1="";
		if (subcity1.contains("大学") || subcity1.contains("网吧") || subcity1.contains("宿舍"))
			subcity1="";
		
		area.setCountry1(country1);
		area.setProvince1(province1);
		area.setCity1(city1);
		area.setSubcity1(subcity1);
		
	}
	
	public static void initxuexiao(HashMap<String,Area> areamaps)
	{
		BufferedReader br=null;
		try {
			 br=new BufferedReader(new FileReader("D:\\xuexiao.csv"));
			 String line="";
			 while((line=br.readLine())!=null)
			 {
				 String[] datas=line.split(",");
				 Area area=new Area();
				 area.setCountry1(datas[1]);
				 area.setProvince1(datas[2]);
				 area.setCity1(datas[3]);
				 area.setSubcity1(datas[4]);
				 areamaps.put(datas[0], area);
				 
			 }
			
		} catch (FileNotFoundException e) {
			// TODO Auto-generated catch block
			e.printStackTrace();
		} catch (IOException e) {
			// TODO Auto-generated catch block
			e.printStackTrace();
		}
		finally
		{
			try {
				br.close();
			} catch (IOException e) {
				// TODO Auto-generated catch block
				e.printStackTrace();
			}
		}
		
	}
	
	public static void main(String[] args) throws IOException
	{
	//startSplitRegion1("甘肃省兰州市");
		BufferedReader br=new BufferedReader(new FileReader("D:\\IPData.txt"));
		BufferedWriter bw=new BufferedWriter(new FileWriter("D:\\ipku.txt"));
		String line="";
		int i=0;
		HashMap<String,Area> areamaps=new HashMap<String,Area>(500);
		initxuexiao(areamaps);
		while ((line=br.readLine())!=null)
		{
			String[] datas=line.split("\t");
			Area area=new Area();
			if (areamaps.containsKey(datas[2]))
			{
				area=areamaps.get(datas[2]);
				
			}
			else
			startSplitRegion(datas[2],area);
			
		//	System.out.println("country:"+area.getCountry1()+" province:"+area.getProvince1()+"city:"+area.getCity1()+
	//				"subcity:"+area.getSubcity1());
			bw.write(datas[0]+"\t"+datas[1]+"\t"+area.getCountry1()+"\t"+area.getProvince1()
			+"\t"+area.getCity1()+"\t"+area.getSubcity1()+"\t"+datas[2]
					);
			bw.newLine();
		//	i++;
	//		if (i>100)
		//		break;
		}
		br.close();
		bw.close();
	}

}

package com.java.ipku;

public class Area {
	public String getCountry1() {
		return country1;
	}
	public void setCountry1(String country1) {
		this.country1 = country1;
	}
	public String getProvince1() {
		return province1;
	}
	public void setProvince1(String province1) {
		this.province1 = province1;
	}
	public String getCity1() {
		return city1;
	}
	public void setCity1(String city1) {
		this.city1 = city1;
	}
	public String getSubcity1() {
		return subcity1;
	}
	public void setSubcity1(String subcity1) {
		this.subcity1 = subcity1;
	}
	private String country1="";
	private String province1="";
	private String city1="";
	private String subcity1="";

}



young-ming
关注
专栏目录
python ip地址处理_python中处理IP地址
weixin_31255215的博客
03-01 2083
python中处理IP地址IPy - 提供了一些有用的类和函数来处理ipv6和ipv4地址和网络APIIPy库包含类IP，使用它你可以方便处理对大部分格式的ipv6和ipv4网络和地址的格式化和处理。它的接口借鉴了Perl的NET::IP模块，但是实现上采用了不同的方法。它没有实现non-CIDR网络掩码，所以打算使用0xffffff0f格式网络掩码的无法使用。>>> from ...
Ipinstall软件工具-可视对讲
Watchmen0320的博客
09-16 2952
Ipinstall软件工具操作说明 安居宝Ipinstall软件工具是用于联网型对讲系统中网络设备的属性及参数修改，该设备在系统中是否能正常运行，其属性和参数的设置起着决定性的作用， 然而设备的属性、参数设置是否能成功地设置好，则关系着Ipinstall软件工具的正确操作与否。 文件提取： 链接：https://pan.baidu.com/s/1ACiP7AEgKR8FZ...
安居宝门禁使用说明书
06-08
很详细的使用说明。
用installscript获取本机IP.rar
12-09
用installscript获取本机IP的脚本实现。包括一个setup.rul和一个函数。我通过测试完全成功，希望能够给大家带来帮助。
Python3 IP 处理库 IPy
极客点儿
09-24 2367
一、安装 pip install IPy 二、使用 1. IP基本使用 >>> from IPy import IP >>> ip = IP('192.168.1.0/30') >>> [i for i in ip] [IP('192.168.1.0'), IP('192.168.1.1'), IP('192.168.1.2'), IP('192.168.1.3')] >>> ip.len() 4 2. IP版本 >>&
利用纯真ip库搭建ip查询服务
qq_40734247的博客
12-10 4531
前言： 前段时间听过了纯真ip数据库，只知道是一个qqwry.dat文件，里面有一些网友收集的数据，可以用来查询ip的大致位置，即ip定位。正好，我最近在一个项目里面看到了这个数据库，它就是将qqwry.dat集成到springboot项目里面，做成一个查询服务来使用的。所以，我也想来试试，但是我不是直接使用qqwry.dat这个文件。我换一种方式，我才用将qqwry.dat中的ip数据导入mysql数据库中，通过数据库的查询来提供ip位置查询功能。 gitee代码地址： 纯真ip库服务搭建 数据准备 首先
中国IP库(2023年最新版-包含港澳台地区)
昊虹AI笔记
09-28 4112
中国IP库(2022年最新版-包含港澳台地区)
IP地址库资源整理
arnold66的专栏
02-27 3576
安全搞了十几年， 常用的数据资源主要包含IP地址库、威胁情报库、漏洞资源库，各类安全产品成熟后都不免会引入这些数据库做数据丰富拓展或检测。但是由于这些资源的收集都是阶段性的工作，并没有记录下来各类资源的地址，导致每次换工作或长时间不用后都忘记资源地址，而且有些资源站过了一个阶段后会逐渐停更。因此为了记录和随时更新各类资源站的情况而写下次文章，同时也希望能为一些志同道合的同志们提供参考。本文主要介绍一些免费的IP地址库资源。
IPInstaller_v2.0.1.2_130702.exe
02-06
IP摄像机搜索软件，网络摄像机，可以通过IP地址来找到摄像机，不适应海康大华等大品牌厂家的摄像机。
IP Installer
02-23
IP Installer IP设置工具
IPInstaller_2.0.0.2
06-07
三星网络摄像机搜索及IP设置软件，可方便查询在线网络摄像机
IPInstaller_v2.0.1.2_130723.exe
05-08
三星网络摄像机IP搜索工具
国内IP库 使用ip段存储
12-26
此外，国内IP库也有助于遵守国家和地区的数据隐私法规，因为有些数据处理活动需要对国内和国外的IP进行区分。例如，在处理用户数据时，企业可能需要遵守中国的网络安全法，这就需要明确识别并区别处理中国境内的IP...
python中ipaddress库用法详解
IT之一小佬的博客
09-21 6058
python中ipaddress库用法详解
ipaddress库：Python中网络地址的处理
李元静
05-18 4544
目录前言地址 前言 ipaddress库提供了处理IPv4与IPv6网络地址的类。这些类支持验证，查找网络上的地址和主机，以及其他常见的操作。 本篇，将详细介绍Python中ipaddress库的使用规则。 地址 一般来说，我们使用ipaddress库是通过ip_address()函数构建一个地址对象。它会返回一个IPv4Address或IPv6Address实例。实例如下： import ipaddress import binascii addresses = [ '121.63.3.59',
IP地址库使用整理（Linux C）
最新发布
m0_51514815的博客
04-18 2046
Ip2region为开源项目，github地址：https://github.com/lionsoul2014/ip2region。目前最新已更新到了v2.0版本，ip2region v2.0是一个离线IP地址定位库和IP定位数据管理框架，10微秒级别的查询效率，并提供了众多主流编程语言的 xdb 数据生成和查询客户端实现。数据聚合了一些知名ip到地名查询提供商的数据，经测试着实比经典的纯真IP定位准确一些。多查询客户端的支持。
Xilinx Vivado IP库
04-06
Xilinx Vivado IP库是Xilinx公司为FPGA（Field-Programmable Gate Array）开发者提供的一款集成化设计工具，它包含了大量的预先设计并优化的IP（ Intellectual Property）核，这些IP核覆盖了多种功能领域，如接口、...
Java处理IP工具类：转换与掩码操作
这个工具类是基于Apache Commons Lang库的，提供了一套简洁的API来进行IP操作。 1. **long类型IP转为字符串IP** 工具类中的`getIpFromLong`方法接收一个long类型的IP地址，并将其转换为"xx.xx.xx.xx"格式的字符串...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值