原生建表SQL与SQLAlchemy Table映射

init.sql
CREATE TABLE department
(
  id          int          NOT NULL AUTO_INCREMENT PRIMARY KEY COMMENT '主键id',
  name        varchar(32)  NOT NULL DEFAULT '' COMMENT '部门名字',
  parent_id   bigint       NOT NULL DEFAULT 0 COMMENT '部门父节点',
  delete_flag tinyint      NOT NULL DEFAULT 0 COMMENT '删除标识',
  modify_time int UNSIGNED NOT NULL DEFAULT 0 COMMENT '修改时间',
  create_time int UNSIGNED NOT NULL DEFAULT 0 COMMENT '创建时间'
)
  ENGINE innodb
  CHARSET utf8mb4 COMMENT '部门列表';
Python代码实现
"""
实现从建表sql语句到 SqlAlchemy Table的映射
"""
import re
import sqlalchemy as sa

TYPE_RELATION = {
    'varchar': sa.String,
    'int': sa.Integer,
    'smallint': sa.SmallInteger,
    'tinyint': sa.SmallInteger,
    'bigint': sa.BigInteger,
    'text': sa.TEXT
}


def extract_pure_field(sql_file):
    """去除多余空格,空行, 注释 配置 等"""
    content = ''
    with open(sql_file, mode='r') as fileObj:

        for line, data in enumerate(fileObj):

            line_text = data.strip()

            if re.match('^--.*|^set .*', line_text) is None:
                # 多个空格变为一个空格
                line_text_after = re.sub(' +', ' ', line_text)

                content += line_text_after

    return content


def parse_table_sql(sql_file):

    tables_dict = {}

    content = extract_pure_field(sql_file)

    content = content.replace('\r', '').replace('\n', '')

    tables = [table for table in content.split(';') if table.lower().strip().startswith('create')]
    for table_sql in tables:

        table_name = re.findall('table(.*?)\(', table_sql.lower())[0].strip()
        fields = re.findall('(\(.*\))', table_sql)[0].split(',')

        fields_list = []
        for field in fields:

            field_sp = field.strip().split(' ')
            field_name = field_sp[0].strip()

            if len(field_sp) < 2:
                continue

            if field_name.lower() == 'unique' or field_name.lower() == 'key':
                continue

            field_type = field_sp[1].split('(')[0].strip().lower()

            comment = ''
            primary_key = False
            for idx, sp in enumerate(field_sp):

                sp_lower = sp.lower().strip()

                if sp_lower == 'comment':
                    comment = field_sp[idx + 1]

                elif sp_lower == 'primary':
                    primary_key = True

            fields_list.append(
                {
                    'name': field_name,
                    'type': field_type,
                    'comment': comment,
                    'primary_key': primary_key
                }
            )

        tables_dict[table_name] = {
            'fields': fields_list,
            'table_sql': table_sql
        }

    return tables_dict


class ModelMetaclass(type):
    """元类控制Model属性读写
    """

    def __getattr__(cls, item):

        if item.endswith('sa') and hasattr(cls, '__tables__'):

            return getattr(cls, '__tables__')[item]

    def __setattr__(self, key, value):

        raise Exception('class Model not allow to be set attr')


class Model(metaclass=ModelMetaclass):

    __tables__ = {}
    __metadata__ = sa.MetaData()

    @classmethod
    def append(cls, table_sa: sa.Table):

        cls.__tables__[str(table_sa.name) + '_sa'] = table_sa


if __name__ == '__main__':

    file = './init.sql'
    tables_dict = parse_table_sql(file)

    for name, table_info in tables_dict.items():

        columns = []
        columns_list = table_info['fields']
        for c in columns_list:

            column = sa.Column(c['name'], TYPE_RELATION[c['type']], primary_key=c['primary_key'], comment=c['comment'])

            columns.append(column)

        table = sa.Table(name, Model.__metadata__, *columns)
        table.sql = table_info['table_sql']

        Model.append(table)

    print(type(Model.department_sa))
    print(Model.department_sa.sql)

out:
<class 'sqlalchemy.sql.schema.Table'>
CREATE TABLE department(id int NOT NULL AUTO_INCREMENT PRIMARY KEY COMMENT '主键id',name varchar(32) NOT NULL DEFAULT '' COMMENT '部门名字',parent_id bigint NOT NULL DEFAULT 0 COMMENT '部门父节点',delete_flag tinyint NOT NULL DEFAULT 0 COMMENT '删除标识',modify_time int UNSIGNED NOT NULL DEFAULT 0 COMMENT '修改时间',create_time int UNSIGNED NOT NULL DEFAULT 0 COMMENT '创建时间')ENGINE innodbCHARSET utf8mb4 COMMENT '部门列表'

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 214,504评论 6 496
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 91,434评论 3 389
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 160,089评论 0 349
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 57,378评论 1 288
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 66,472评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,506评论 1 292
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,519评论 3 413
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,292评论 0 270
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,738评论 1 307
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,022评论 2 329
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,194评论 1 342
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,873评论 5 338
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,536评论 3 322
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,162评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,413评论 1 268
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,075评论 2 365
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,080评论 2 352

推荐阅读更多精彩内容