数据中台的表设计
从本篇开始将详细的讲解数据中台的整个设计和执行的过程,首先要考虑的就是关于模块的设计,先从数据库表开始
规则
数据中台的数据收集和指标是要归属于一个规则下的,这个规则是不同业务的执行,比如:视频数据的采集、公司上班打卡数据的采集、用户购买产品数据的采集。
所以要设计出规则表:d_rule
CREATE TABLE `d_rule` (
`id` bigint NOT NULL COMMENT 'id',
`rule_describe` varchar(256) CHARACTER SET utf8mb4 COLLATE utf8mb4_0900_ai_ci DEFAULT NULL COMMENT '规则描述',
`rule_name` varchar(256) CHARACTER SET utf8mb4 COLLATE utf8mb4_0900_ai_ci DEFAULT NULL COMMENT '规则名字',
`rule_type` tinyint NOT NULL DEFAULT '1' COMMENT '规则类型 1收集 2 查询',
`rule_version_id` bigint NOT NULL COMMENT '如果需要规则变更,直接创建一个新规则,将版本号递增',
`status` int DEFAULT '1' COMMENT '状态 1:启用 0:禁用',
`edit_time` datetime DEFAULT NULL COMMENT '编辑时间',
`create_time` datetime DEFAULT NULL COMMENT '创建时间',
PRIMARY KEY (`id`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_0900_ai_ci COMMENT='规则表';
而本项目的数据中台的业务是视频数据采集,以视频数据采集为例,规则表中的数据:
id | rule_describe | rule_name | rule_type | rule_version_id | status | edit_time | create_time |
---|---|---|---|---|---|---|---|
1 | 视频数据 | video_data | 1 | 1 | 1 | 2025-07-31 10:01:00 | 2025-07-31 10:01:00 |
指标
当知道了规则的概念后,接下来就是要介绍项目中的核心概念:指标
指标表:d_metric