文章内容
2020/9/28 14:59:49,作 者: 黄兵
MySQL存储IP的一些总结
最近需要将所有IPv4保存到数据库,但是表结构设计的有点不合理,现在保存了7600万左右的数据,已经使用30G空间,使用如下命令统计:
USE information_schema; SELECT TABLE_SCHEMA, SUM(DATA_LENGTH)/1024/1024/1024 FROM TABLES GROUP BY TABLE_SCHEMA;
这里将单位换算成G,最后结果如下:
显然数据结构不合理,参考了一些别人的方法,可以将IP地址存储为32位的无符号整数,具体可以看这里:MySQL如何有效的存储IP地址及字符串IP和数值之间如何转换,至于在SQLAlchemy如何保存32位无符号整数,可以参考这篇文章:How to define an unsigned integer in SQLAlchemy
同时时间保存为时间戳,这样也可以节省很多空间,使用SQLAlchemy如何设置timestamp,可以参考这篇文章:SqlAlchemy TIMESTAMP 'on update' extra
最后模型代码如下:
#!/usr/bin/env python # -*- coding: UTF-8 -*- from sqlalchemy import text from sqlalchemy.sql import func from sqlalchemy.dialects.mysql import INTEGER from . import db # IP地址相关信息 class IPAddress(db.Model): __tablename__ = 'ip_address' id = db.Column(db.Integer, primary_key=True) ip = db.Column(INTEGER(unsigned=True), unique=True) created_time = db.Column(db.TIMESTAMP(timezone=True), nullable=False, server_default=func.now()) updated_time = db.Column(db.TIMESTAMP(timezone=True), nullable=False, server_default=text('CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP'))
参考资料:
1、MySQL如何有效的存储IP地址及字符串IP和数值之间如何转换
3、How to define an unsigned integer in SQLAlchemy
5、SqlAlchemy TIMESTAMP 'on update' extra
黄兵个人博客原创
转载请注明出处:黄兵个人博客 - MySQL存储IP的一些总结
陈俊 on 回复 有用(0)
简单易懂
游客ugN^ on 2020-09-29 15:03:13
博主回复:感谢鼓励!