文章内容

2020/9/28 14:59:49,作 者: 黄兵

MySQL存储IP的一些总结

最近需要将所有IPv4保存到数据库,但是表结构设计的有点不合理,现在保存了7600万左右的数据,已经使用30G空间,使用如下命令统计:

USE information_schema;

SELECT TABLE_SCHEMA, SUM(DATA_LENGTH)/1024/1024/1024 FROM TABLES GROUP BY TABLE_SCHEMA;

这里将单位换算成G,最后结果如下:

显然数据结构不合理,参考了一些别人的方法,可以将IP地址存储为32位的无符号整数,具体可以看这里:MySQL如何有效的存储IP地址及字符串IP和数值之间如何转换,至于在SQLAlchemy如何保存32位无符号整数,可以参考这篇文章:How to define an unsigned integer in SQLAlchemy

同时时间保存为时间戳,这样也可以节省很多空间,使用SQLAlchemy如何设置timestamp,可以参考这篇文章:SqlAlchemy TIMESTAMP 'on update' extra


最后模型代码如下:

#!/usr/bin/env python
# -*- coding: UTF-8 -*-

from sqlalchemy import text
from sqlalchemy.sql import func
from sqlalchemy.dialects.mysql import INTEGER

from . import db

# IP地址相关信息
class IPAddress(db.Model):
    __tablename__ = 'ip_address'
    id = db.Column(db.Integer, primary_key=True)
    ip = db.Column(INTEGER(unsigned=True), unique=True)
    created_time = db.Column(db.TIMESTAMP(timezone=True), nullable=False, server_default=func.now())
    updated_time = db.Column(db.TIMESTAMP(timezone=True), nullable=False,
                             server_default=text('CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP'))


参考资料:

1、MySQL如何有效的存储IP地址及字符串IP和数值之间如何转换

2、在MySQL中巧存IP地址信息

3、How to define an unsigned integer in SQLAlchemy

4、【MySQL】查看数据库所占空间大小

5、SqlAlchemy TIMESTAMP 'on update' extra


黄兵个人博客原创

转载请注明出处:黄兵个人博客 - MySQL存储IP的一些总结

分享到:

发表评论

评论列表

user-ico

陈俊 on 回复 有用(0

简单易懂

游客ugN^ on 2020-09-29 15:03:13

博主回复:感谢鼓励!