MySQL存储IP的一些总结
最近需要将所有IPv4保存到数据库,但是表结构设计的有点不合理,现在保存了7600万左右的数据,已经使用30G空间,使用如下命令统计:USE information_schema;
SELECT TABLE_SCHEMA, SUM(DATA_LENGTH)/1024/1024/1024 FROM TABLES GROUP BY TABLE_SCHEMA;
这里将单位换算成G,最后结果如下:
显然数据结构不合理,参考了一些别人的方法,可以将IP地址存储为32位的无符号整数,具体可以看这里:MySQL如何有效的存储IP地址及字符串IP和数值之间如何转换,至于在SQLAlchemy如何保存32位无符号整数,可以参考这篇文章:How to define an unsigned integer in SQLAlchemy
同时时间保存为时间戳,这样也可以节省很多空间,使用SQLAlchemy如何设置timestamp,可以参考这篇文章:SqlAlchemy TIMESTAMP 'on update' extra
最后模型代码如下:#!/usr/bin/env python
# -*- coding: UTF-8 -*-
from sqlalchemy import text
from sqlalchemy.sql import func
from sqlalchemy.dialects.mysql import INTEGER
from . import db
# IP地址相关信息
class IPAddress(db.Model):
__tablename__ = 'ip_address'
id = db.Column(db.Integer, primary_key=True)
ip = db.Column(INTEGER(unsigned=True), unique=True)
created_time = db.Column(db.TIMESTAMP(timezone=True), nullable=False, server_default=func.now())
updated_time = db.Column(db.TIMESTAMP(timezone=True), nullable=False,
server_default=text('CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP'))
参考资料:
黄兵个人博客原创