广西移动深度运营平台数据建模设计文档

广西移动深度运营平台 Project数据建模设计文档SDP-21Doc. Version 1.0Page 1 of 30广西移动广西移动 深度运营平台深度运营平台 Project 数据建模设计文档数据建模设计文档Current Version: 1.0Owner:Date Last Updated:2007-12-20Last Updated By: Author: LI Bo YuanDate Created: 2007-12-20Approved By: Approval Date: 广西移动深度运营平台 Project数据建模设计文档SDP-21Doc. Version 1.0Page 2 of 30Revision HistoryVersion NumberDate UpdatedRevision AuthorBrief Description of Changes1.02007-12-20Li Bo YuanCreate Revision 数据建模设计文档 ConfidentialVersion 1.0Page 3 of 30 Table of Contents1数据建模设计介绍数据建模设计介绍 .41.1数据建模设计原则数据建模设计原则.41.1.1ODS 数据的主要功能模块.51.1.2ODS 数据模型设计原则 .61.1.3ODS 数据模型设计步骤 .61.2数据建模命名规范数据建模命名规范.71.3简写、缩写规则和简写列表样例简写、缩写规则和简写列表样例.81.4简写列表样例简写列表样例.82ODS 模型说明模型说明.102.1ODS 数据模型数据模型 .102.2ODS SUBJECT AREA说明说明.102.3ODS 数据库表的说明数据库表的说明.112.4ODS 数据传输周期数据传输周期 .222.5ODS 唯一索引与索引分布情况唯一索引与索引分布情况 .24 数据建模设计文档 ConfidentialVersion 1.0Page 4 of 30 1 数据建模设计介绍数据建模设计介绍在数据仓库/商业智能的项目中，主要涉及的任务和它们之间的关系如下图所示。数据建模在其中比较重要，是数据映射、以及以后的 ETL 和前端的开发工作的基础。在这一章就对广西移动深度运营项目中的数据建模设计做一个介绍。1.1数据建模设计原则数据建模设计原则本项目的系统架构如下图所示，需要本项目数据建模的模块是 ods 和 Data Mart。Understand DataUnderstand Analysis RequirementUnderstand Business Data ProfilingData Modeling Data MappingData CleansingETL MappingETL Build & DeployFront-End MappingFront-End Build & Deploy关注的领域 数据建模设计文档 ConfidentialVersion 1.0Page 5 of 30 数据模型的设计是一个迭代、调优的过程，是平衡业务需求、已有的数据、系统的性能等因素的过程。这个过程中采用的一些设计原则，是接下来开展各期项目的一个参考。1.1.1 ODS 数据的主要功能模块数据的主要功能模块ods 的数据有不同的功能，因此分为不同的模块。在本期项目中，ods 内部的数据，按照它们的功能可以分为如下的几块：数据挖掘部分所需要的月汇总数据，包含统一数据图，与客户画像营销系统所需的数据对 KPI 指标项所需汇总的支持所需数据广西移动业务主数据China Mobile gx System of Record企业维度总线BUS&主数据汇总的 KPI 数据项第三方的数据源（来自华为飞信平台）等应用数据数据挖掘项数据准备区 数据建模设计文档 ConfidentialVersion 1.0Page 6 of 30 1.1.2 ODS 数据模型设计原则数据模型设计原则ODS 系统的特征，要求在设计数据模型时，要坚持 2 个基本的出发点：1.面向主题的、集成的、可变的、当前的细节数据集合。2.用于支持企业对即时性、操作性、集成的全体信息的需求ODS 的数据特征，要求数据模型坚持如下的 2 个要点：1.在业务系统与数据仓库系统之间形成一个隔离层2.转移一部分业务系统细节查询功能3.完成数据仓库中不能完成的一些功能基于以上原则设计的 ODS 模型，从不同的角度来讲，也有一些缺点：对于业务用户来说，这个模型与业务系统的模型差不多查询的性能会因为多个 join 受影响.保存周期时间短，不利于历史查询1.1.3 ODS 数据模型设计步骤数据模型设计步骤ODS 数据模型的设计步骤，借鉴数据仓库之父 Bill Inmon 的方法。根据广西移动的具体状况，具体的大步骤有 2 个。第一个步骤是建立业务实体之间的关系；第二步是根据 ODS 的特殊需求，进行调优的过程；具体如下：建立描述基本业务关系的 ER 模型o根据本期项目范围的数据需要确定主题域. o在主题域中确定需要的实体.o确定实体之间的关系 o增加属性. o确认模型的结构.o确认模型的内容.基于基本的 ER 模型，根据 ODS 的特征，增强模型o分析需求增加需要的数据增加时间因素，确定数据传输周期增加时间因素，确定数据保存周期增加时间因素、确定数据增量全量传输增加导出的数据确定数据的粒度o系统性能需求汇总数据合并实体如果对一个业务流程总体进行分析，将多个实体字段组合成一个实体 （如 Order 流程）如果数据量太大，数据分区 （如 partition） 数据建模设计文档 ConfidentialVersion 1.0Page 7 of 30 1.2数据建模命名规范数据建模命名规范数据模型中的对象的命名规范，以 SGM 已有的规范为标准：数据模型的对象命名采用英文，基于如下原则：格式 : XX_NAME_YYY （如无必要，前缀、后缀可无）XX: 前缀Name: 有意义的单词或简称YY: 后缀数据库表名称采用英文大写，多个单词之间使用下划线连接字段名称采用英文小写，多个单词之间使用下划线连接一些主要的前缀，列表如下：TMMaster Data TABLETTTransaction Data TableTRRELATIONSHIP TABLETAAGGREGATION TABLETCCODE LIST TABLETIInterface TableTSSystem administration TableTLLog TableTGStaGing TableTDDIMENSION TABLETFFACT TABLETUUser Maintained TablePKPRIMARY KEYFKForeign KeyAKALTERNATIVE KEYUKUNIQUE KEYCKCheck ConstraintsINIndexJBJobSQSEQUENCEVWVIEWMVMATERIALIZED VIEWFNFunctionSPSTORED PROCEDURE后缀有：HISHistory Data Table这些对象在以后的项目过程中，可以进一步地丰富和优化。 数据建模设计文档 ConfidentialVersion 1.0Page 8 of 30 1.3简写、缩写规则和简写列表样例简写、缩写规则和简写列表样例简写、缩写各个系统、项目和个人都不一样。这里是一个推荐方案，以后的项目过程中，可以进一步地丰富和优化。模型中的对象可以用英文的全称、简写或缩写。如果采用简写或缩写时，可以参考下面的规范。用以下的步骤来生成词汇的简写: 删除不必要的元音字母删除所有不是开头的元音字母如果“Y“ 在一个词的开头或结尾，需保留如果“E“在一个词的结尾并使词发音为”s”, 需保留。例如：piece删除不必要的辅音，例如双辅音如有可能，把词的前缀和后缀替代掉简写规则在一个业务方面或整个企业中简写尽量保持是唯一的。来达到这种唯一的目标，建立并维护一个词汇简写清单和它们的定义。避免用一个简写来代表两个不同的词汇或两个不同的简写来代表同一个词。一些常用的词组可以有简写。例如：有效日期 Effective Date 可以简化为effdt。企业现有的简写，即使不符合规则也可以使用。 使用简写的前提是读者可以不用数据字典就能理解。当类别词（“name” 和“date”）是被用做类别词的时候才可以简化。当它们用与列名称的其它地方，不需简化。 (举例：name_suffix_txt)。缩写是在一个企业、行业中能够被普遍理解和接受的。缩写绝大多数是从标准的业务或行业的用途中来的。例如：MBA 是指 “Masters of Business Administration”，NYSE 是指 “New York Stock Exchange”, ATM 是指“automated teller machine”。当缩写比全名用得更广泛的时候，尽量用缩写。例如：IBM 要比全称 International Business Machines 用得更为普遍。缩写是由业务惯用语中每个重要的词汇的第一个字母组成的。缩写通常是为组织、产品、业务主题的名字创造的。例如：IBM缩写可能有多种意义。如果一个缩写有多种涵义，它的定义必须通过上下文来表达清楚。如果缩写的定义不能从上下文中表达清楚，就不能使用它。主题和限定词可以用来组成上下文。例如：ATM 在银行业中指自动取款机，在网络通讯业中指一种通讯的协议。用 ATM_DEPOSITS_MTD_QTY 要比用ATM_SALES_MTD_QTY 的涵义更为清楚。1.4简写列表样例简写列表样例有 2 类单词需要简写，一种是经常使用的字段，在 ERWin 模型中成为 Class 的那一部分；另一类就是普通的单词。这 2 类单词的简写，Ralph Kimball 在他的书 The Data Warehouse Life Cycle Toolkit 中给出样例列表，推荐使用。SGM 可以基于这个列表，逐渐积累完善成为一个较适用和完备的列表。Class 简写 （Ralph Kimball 推荐）Category Class Word Abbreviation Measurement amount amnt Label code codeChronology date dateDescription description desc Label identifier id Label indicator ind Label name name 数据建模设计文档 ConfidentialVersion 1.0Page 9 of 30 Label number num Measurement quantity qty Measurement rate rateDescription text txt Chronology time tm普通单词的简写样表：（Ralph Kimball 推荐） 数据建模设计文档 ConfidentialVersion 1.0Page 10 of 30 2 ODS 模型说明模型说明2.1 ODS数据模型数据模型2.2 ODS Subject Area说明说明Subject Area Name01-1 01XX 系列接口表数据来源：来自 boss 客户管理接口对照主要描述：描述了客户、集团客户、vip 客户、用户账本、用户关系、用户积分、信用等信息接口文档：01-客户管理接口对照 new.xls01-2 05xx 系列表数据来源：boss 话费清单主要描述：包含 GSM 通话清单、漫游清单、短信清单等各类计费帐务接口文档：05-计费帐务接口对照.xls01-3 06xx 系列表数据来源：来自 boss主要描述：各类业务的网间结算清单 包含全球通与神州行语音国内清单、短信结算清单、国际漫游结算清单、呼叫转移结算清单等接口文档：BOSS 接口映射06-网间结算.xls01-4 08xx 系列表数据来源：来自 boss 系列接口主要描述：主要包含各类表的基础数据记录，包含客户、集团、证件、所有制、入网方式、品牌、账本、科目等接口文档：08-参数配置与计算原则.xls01-6 40 xx 系列表数据来源：来自 飞信平台数据接口主要描述：记录了飞信平台的日活跃明细数据、月活跃明细数据、用户功能开通与关闭、飞信用户登陆与好友信息等。接口文档：经营分析系统下发飞信数据的接口内容.doc 数据建模设计文档 ConfidentialVersion 1.0Page 11 of 30 01-7 98xxx 系列表数据来源：来自广西经营分析彩铃平台主要描述：描述了来自彩铃平台的个人信息、个人信息库、彩铃信息库、集团彩铃信息、业务类的数据、音乐盒的数据、音乐盒成员的数据、sp 信息、日志类的(彩铃的开通取消数据、彩铃下载数据、彩铃变更数据、彩铃业务话单、彩铃 diy 上传数据)接口文档：彩铃平台接口实施细则(基于 B0 版本).doc01-9 99xxx 系列表数据来源：来自 misc 数据主要描述：包含了来自 MISC 平台与 sp 有关的业务接口、包含梦网用户、sp 类的业务、1862 业务日志、sso 业务日志、wwwportal 日志、WTBSPORTAL 日志类、运行日志类(服务定购请求消息、服务定购响应消息、鉴权批价消息)、参数类的。接口文档：DSMP 平台接口实施细则 060803(包含详细的sp 代码分类).doc01-10 10 xxx 系列表数据来源：来自 boss 系统其他的经营业务的数据主要描述：描述了集团中个人账单、异常类的话单、营业厅的受理业务信息、大客户经理促销方面的月汇总、用户密码功能设置。接口文档：10-其他经营分析系统需要的数据.xls巡检模型数据来源：来自 wap 与梦网短信的信息汇总信息主要描述：主要对巡检记录 wap 访日日志信息、梦网短信的日汇总信息接口文档：wap 日志 梦网短信日志2.3 ODS 数据库表的说明数据库表的说明Subject Area NameTable NameTable Comment01-1 01XX 系列接口表01001来自接口 客户关系 -01001 客户 更新时间 （每日 0 点-1 点 30 全量提供） 数据建模设计文档 ConfidentialVersion 1.0Page 12 of 30 01-1 01XX 系列接口表01002来自接口 客户管理 01002 集团客户更新时间 （每日 0 点全量提供）01-1 01XX 系列接口表01003来自于 boss 01003 客户关系定义BOSS1.5 （每日 0 点全量提供） 01-1 01XX 系列接口表01004来自于 boss 接口表 01004 大客户BOSS1.5 （每日 0 点全量提供） 01-1 01XX 系列接口表01007来自于 boss 01007 用户BOSS1.5 （每日全量提供） 01-1 01XX 系列接口表01019来自于 boss 01019 帐本BOSS1.5 （每日增量提供） 01-1 01XX 系列接口表01020来自于 boss 01020 用户-套餐关系BOSS1.5 （每日全量提供） 01-1 01XX 系列接口表01022来自接口表 01022 用户积分累计BOSS1.5 （每日全量提供） 01-1 01XX 系列接口表01032来自于 boss 接口表 01032 用户-功能关系历史表每日根据 expire_date 增量提供数据质量问题取不到唯一索引只能在程序中进行避免 数据建模设计文档 ConfidentialVersion 1.0Page 13 of 30 01-1 01XX 系列接口表01036来自于 boss 接口表 01036每月提供数据01-2 05xx 系列表05001来自于 boss 接口的 05001GSM 清单 该表可以区分 SP 类型 通过对端号码解析 7 位编码 后两位即可区分每半个小时提供一次 数据_增量传输，平台这边处理每天一次01-2 05xx 系列表05002来自 boss 接口表 05002GPRS 国际漫游清单BOSS1.5 （每半小时提供） 01-2 05xx 系列表05003来自于 boss 接口表 05003 移动梦网短信清单BOSS1.5 （每半小时提供）01-2 05xx 系列表05004来自于 boss 05004 移动梦网 WAP 清单BOSS1.5 （每半小时提供） 01-2 05xx 系列表05005来自于 boss 05005 普通短信清单BOSS1.5 （每半小时提供） 01-2 05xx 系列表05007来自于 boss 接口表 05007 智能网神州行短信清单BOSS1.5 （每半小时提供） 01-2 05xx 系列表05009来自 boss 05009 智能网 VPMN 清单（每半小时提供） 数据建模设计文档 ConfidentialVersion 1.0Page 14 of 30 01-2 05xx 系列表05010来自于 boss 05010 神州行梦网短信清单BOSS1.5 （每半小时提供） 01-2 05xx 系列表05011来自 boss 05011 神州行互联短信清单BOSS1.5 （每半小时提供） 01-2 05xx 系列表05016来自于 boss 05016 联通互联短信清单BOSS1.5 （每半小时提供） 01-2 05xx 系列表05017来自于 bos 05017WLAN 清单BOSS1.5 （每半小时提供) 增量提供01-2 05xx 系列表05018来自于 bos 05018BOSS1.5 （每半小时提供） 01-2 05xx 系列表05021来自于 bos 05021 用户明细帐单BOSS1.5 （每日提供） 01-2 05xx 系列表05034来自于 bos 05034 促销定购信息表BOSS1.5 （每日根据 create_date 增量提供） 01-2 05xx 系列表05036来自 boss 05036 智能网帐单BOSS1.5 （接口同 1.0，暂时未变，每日 2 点根据条件判断提供)增量提供 数据建模设计文档 ConfidentialVersion 1.0Page 15 of 30 01-2 05xx 系列表05038来自 boss 05038 用户月帐单BOSS1.5 （每月提供）01-2 05xx 系列表05050来源 boss 接口 05050GPRS 省际和国际来访清单更新时间 （每半小时提供）01-2 05xx 系列表05051来源 boss 05051GPRS 彩信核减清单（每半小时提供）01-2 05xx 系列表05054来自 boss 05054 促销定购信息历史表BOSS1.5 （每日根据 expire_date 增量提供） 01-2 05xx 系列表05064来自 boss 05064GPRS 省际-本地漫游清单05064GPRS 省际-本地漫游清单 增量提供 半个小时提供一次01-3 06xx 系列表06014来自 boss 06014 全球通与神州行移动梦网短信结算清单每半个小时提供一次01-3 06xx 系列表06026来自于 boss 06026 全球通与神州行（本地）移动梦网短信结算清单每半个小时提供一次01-3 06xx 系列表06029来自于 boss 接口表 06029 SP 信息费结算清单每月 5 日凌晨提供 数据建模设计文档 ConfidentialVersion 1.0Page 16 of 30 01-4 08xx 系列表08013来自于 boss 08013 用户类型每月 2 日凌晨 5 点提供数据01-4 08xx 系列表08018来自于 boss 08018 服务品牌类型每月 2 日 0 点 5 分提供01-4 08xx 系列表08020来自于 boss 08020 缴费途径类型每月 2 日 0 点 5 分提供01-4 08xx 系列表08023来自 boss 08023 明细帐目类型每日根据该表的 sts_time 判断有无新记录来决定是否提供01-4 08xx 系列表08038来自于 boss 08038 营业费用类型每日根据该表的 sts_time 判断有无新记录来决定是否提供01-4 08xx 系列表08039来自于 boss 参数配置与计算原则 08039 地域每月月初提供数据01-4 08xx 系列表08042来自于 boss 08042 营业网点每日 0 点 5 分提供01-4 08xx 系列表08057来自于 boss 08057 费用类型每月 2 日 0 点 5 分提供 数据建模设计文档 ConfidentialVersion 1.0Page 17 of 30 01-4 08xx 系列表08059来源 boss 08059 套餐更新日期 每月 2 日 0 点 5 分提供01-4 08xx 系列表08072来自于 BOSS 的参数配置 接口 08072 通话类型记录了0 主叫1 被叫2 有条件呼转3 无条件呼转4 短信发送5 短信接受 每日根据该表的 modify_date 判断有无新记录来决定是否提供01-4 08xx 系列表08073来自于 boss 08073 计费业务代码每日根据该表的 modify_date 判断有无新记录来决定是否提供01-4 08xx 系列表08074来自 boss 08074 漫游类型更新日期 每日根据该表的 modify_date 判断有无新记录来决定是否提供01-4 08xx 系列表08075来自于 boss 08075 计费费用类型更新日期 每月 2 日 0 点 5 分提供01-4 08xx 系列表08091来自 boss 08091 营业受理业务定义表更新日期 每月 2 日 0 点 5 分提供01-4 08xx 系列表08104来自于 boss 08104 本地语音杂志和移动沙龙更新日期 每月 2 日 0 点 5 分提供 数据建模设计文档 ConfidentialVersion 1.0Page 18 of 30 01-6 40 xx 系列表40001来自 经营分析 下载飞信数据 日活跃用户明细截至当日 24 时，当日有过订购关系的用户且登录过 PC 客户端或手机客户端或 WAP 客户端或发送过上行短信或使用过 IVR 通话的用户01-6 40 xx 系列表40003来自 接口表 日用户开通/关闭操作记录记录每日 00 时 00 分 00 秒到 24 时 00 分 00 秒，飞信用户开通/关闭操作记录01-6 40 xx 系列表40098来自接口表 飞信字典代码定义本接口定义业务数据接口单元中字段取值对应字典所包含的代码项目每日全量抽取01-7 98xxx 系列表98001接口单元名称：彩铃个人用户信息接口单元编码：98001接口单元说明：记录彩铃用户基本信息。初始加载时，全量抽取彩铃个人用户信息，以后每日提取一次全量。01-7 98xxx 系列表98002接口单元名称：彩铃用户个人铃音库信息接口单元编码：98002接口单元说明：记录彩铃用户个人铃音库信息。初始加载时，全量抽取当前在网用户定制的全部铃音信息，以后每月抽取一次全量（每月 3 日抽取）。说明：只提供月全量，增量部分由 98010 彩铃变更数据接口提供01-7 98xxx 系列表98003接口单元名称：彩铃用户铃音设置信息接口单元编码：98003接口单元说明：彩铃用户铃音设置信息。包括集团彩铃和个人用户彩铃设置。初始加载时，全量抽取当前在网用户定制的全部铃音设置信息，以后每月抽取一次全量（每月 3 日抽取）。01-7 98xxx 系列表98009接口单元名称：彩铃开通/取消数据接口单元编码：98009接口单元说明：彩铃开通/取消数据。初始加载时，全量抽取彩铃用户开通/取消的信息，以后每日提取一次增量。 数据建模设计文档 ConfidentialVersion 1.0Page 19 of 30 01-7 98xxx 系列表98010接口单元名称：彩铃下载数据接口单元编码：98010接口单元说明：记录彩铃下载数据。初始加载时，全量抽取彩铃下载的信息，以后每日提取一次增量。01-9 99xxx 系列表99004接口单元名称：SP 企业代码接口单元编码：99004接口单元说明：SP 企业代码是网络中 SP 地址和身份的标识，地址翻译、计费、结算等均以企业代码为依据。各个省 MISC 的 SP 数据包含全网本地接入SP、本地 SP、全网 SP 数据（无本地接入）的全部数据。初始加载时传送全部非下线状态的 SP 企业代码。每月全量传送。01-9 99xxx 系列表99005接口单元名称：SP 企业代码变更流水接口单元编码：99005接口单元说明：记录每日 SP 的新增、以及关键属性的变化信息，关键属性指 SP 企业代码、SP 状态、短信接入号、离线标志。当 SP 企业代码发生变化时，会首先将原先的 SP 企业代码状态置为下线，再新增一个 SP 企业代码，并在原 SP 企业代码字段中记录原 SP 企业代码，这种情况的一个业务实例就是全网 SP 新增本地接入点时。每日增量传送。01-9 99xxx 系列表99006接口单元名称：SP 业务代码接口单元编码：99006接口单元说明：记录 SP 提供的各种业务代码、业务分类等数据。各个省 DSMP 平台记录了各省本地SP 提供的业务数据、无本地接入的全网 SP 的业务数据、全网 SP 本地接入的业务数据。初始加载时传送全部当前未下线的 SP 业务信息。每月全量抽取。01-9 99xxx 系列表99007接口单元名称：SP 业务代码变更流水接口单元编码：99007接口单元说明：记录每日 SP 业务代码的新增、以及业务状态的变化信息，例如业务的上线、下线等。01-9 99xxx 系列表99013接口单元名称：WAPPortal 业务日志接口单元编码：99013接口单元说明：WAPPortal 日志记录用户每次访问WAP 门户的信息，以及每次点击 WAP 门户网站链接时信息。每日增量传送。 数据建模设计文档 ConfidentialVersion 1.0Page 20 of 30 01-9 99xxx 系列表99014接口单元名称：WAP 菜单接口单元编码：99014接口单元说明：记录 WAPPortal 上的菜单信息。每日全量传送。01-9 99xxx 系列表99017接口单元名称：服务定购请求消息-request接口单元编码：99017接口单元说明：DSMP 运行日志中的服务定购请求消息每日增量传送。01-9 99xxx 系列表99020接口单元名称：鉴权批价响应消息-response接口单元编码：99020接口单元说明：DSMP 运行日志中的鉴权批价响应消息每日增量传送。01-9 99xxx 系列表99021接口单元编码：99021接口单元说明：DSMP 运行日志中的取消服务定购请求消息每日增量传送。01-9 99xxx 系列表99022接口单元名称：取消服务定购响应消息-response接口单元编码：99022接口单元说明：DSMP 运行日志中的服务定购请求消息每日增量传送。01-9 99xxx 系列表99617接口单元名称：服务业务类型接口单元编码：99617接口单元说明：记录 SP 提供的服务的类型每日抽取全量数据01-9 99xxx 系列表99619接口单元名称：计费类型接口单元编码：99619接口单元说明：记录对用户的计费类型每日抽取全量数据。01-9 99xxx 系列表99622接口单元名称：业务承载类型接口单元编码：99622接口单元说明：记录每种业务承载类型的代码，并进行说明每日抽取全量数据。 数据建模设计文档 ConfidentialVersion 1.0Page 21 of 30 01-9 99xxx 系列表99623接口单元名称：业务类别接口单元编码：99623接口单元说明：每日抽取全量数据。01-9 99xxx 系列表99624接口单元名称：业务内容分类大类接口单元编码：99624接口单元说明：记录每种业务内容分类大类的代码，并进行说明。业务内容分类的大类在 MISC 平台上是由各省业务人员自行配置的信息，因此在这里无法给出标准的分类编码，各省需要依据本省业务分类情况获取数据，并自行匹配到一经统一的编码规则上。每日抽取全量数据。01-9 99xxx 系列表99625接口单元名称：业务内容分类小类接口单元编码：99625接口单元说明：记录每种业务内容分类小类的代码，并进行说明。每日抽取全量数据。01-9 99xxx 系列表99629接口单元名称：梦网用户状态类型接口单元编码：99629接口单元说明：记录用户在梦网注册的状态类型，该状态可能是根据 BOSS 系统中的用户状态对应过来的，也可能是由 MISC 平台主动修改的每日抽取全量数据。0105 10 xxx 系列表10007来自于 接口表 10007 1860_1861 服务能力更新日期 每日增量提供0105 10 xxx 系列表10020来自于接口表 10020 智能网统一语音清单更新日期 每半小时提供0105 10 xxx 系列表10027来自接口表 10027 用户功能月接口更新日期 每月 2 日 18 点以后全量提供 数据建模设计文档 ConfidentialVersion 1.0Page 22 of 30 0105 10 xxx 系列表10030来自接口表 10030 开通接口历史表更新日期 每日 1 点提供0105 10 xxx 系列表10077来自接口表 10077SP 业务订购关系更新日期 每月 3 日 2 点 20 左右开始提供0105 10 xxx 系列表10086来自接口表 10086 硬件设备资源明细表更新时间 每月 3 日全量提供巡检模型dream_sms网络巡组数据模型检查 定义的 梦网短信日汇总数据来源 短信清单 与 msic 数据是以增量的方式提供，每天提供巡检模型Wap_portal_log网络巡组数据模型检查 定义的 wap portal 日志 检查内容数据来自于：misc 99 系列 数据量是以增量的方式提供2.4 ODS 数据传输周期数据传输周期Table NameUDP Data PeriodsUDP IncrementOrFullUDP Data Save Periods01001dayFullday01002dayFULLday01003dayFULLday01004dayFULLday01007dayFULLDay01019dayincday01020dayFULLday01022dayFULLday01032dayINCMonth01036MonthFULLOne Year 数据建模设计文档 ConfidentialVersion 1.0Page 23 of 30 05001dayINCMonth05002dayINCMonth05003dayINCMonth05004dayINCMonth05005dayINCMonth05007dayINCMonth05009dayINCday05010dayINCMonth05011dayINCday05016dayINCday05017dayINCday05018dayINCMonth05021dayINCMonth05034dayINCMonth05036dayINCMonth05038MonthFULLday05050dayINCday05051dayINCday05054dayINCday05064dayINCMonth06014dayINCday06026dayINCday06029MonthFULLMonth08013monthFULLMonth08018MonthFULLmonth08020MonthFULLMonth08023dayFULLday08038dayFULLday08039MonthFULLMONTH08042dayINCday08057MonthINCMonth08059MonthFULLMonth08072dayINCMOnth08073dayincMonth08074dayINCmonth08075monthFULLMonth08091MonthFULLMonth08104MonthFULLMonth10007dayINCMonth10020dayINCMonth10027MonthFULLMonth10030MonthINCMonth10077MonthFUllMonth10086MonthFULLMonth 数据建模设计文档 ConfidentialVersion 1.0Page 24 of 30 40001dayINCMONTH40003dayINCday40098dayFILLday50001dayINCday98001dayFULLMonth98002MOnthFULLMonth98003MonthFULLMonth98009dayFULLday98010dayFULLMonth99004monthINCMOnth99005dayINCMonth99006MonthFULLMonth99007dayINCMonth99013dayINCMonth99014dayFULLMonth99017dayINCMonth99020dayINCmonth99021dayINCMonth99022dayINCmonth99617dayFULLday99619dayFULLday99622dayFULLday99623MonthFUllMonth99624dayFULLMonth99625dayFULLMonth99629dayFULLdaydream_smsdayINCMonthWap_portal_logdayINCMonth2.5 ODS 唯一索引与索引分布情况唯一索引与索引分布情况Table NameIndex UniqueIndex NameColumn NameColumn Datatype01001YesXPK0100101001YesXAK101001UPDATE_TIMEDATE01001YesXAK101001CUSTOMER_IDNUMBER(12)01001YesXAK101001GROUP_IDCHAR(18)01001NoIDX_MOBILE_NUMBER_01001PHONE_NUMBERCHAR(32)01001NoIDX_MOBILE_NUMBER_01001UPDATE_TIMEDATE01002YesXPK0100201002YesXAK101002GROUP_IDNUMBER(12)01002YesXAK101002UPDATE_TIMEDATE01002YesXAK101002GROUP_NAMECHAR(200)01002NoXIE101002GROUP_IDNUMBER(12) 数据建模设计文档 ConfidentialVersion 1.0Page 25 of 30 01002NoXIE101002GROUP_NAMECHAR(200)01002NoXIE101002UPDATE_TIMEDATE01003YesXPK0100301003YesXAK101003CUSTOMER_IDNUMBER(12)01003YesXAK101003UPDATE_TIMEDATE01003YesXAK101003CONNECT_CUSTOMER_IDNUMBER(12)01003NoXIE101003CUSTOMER_IDNUMBER(12)01003NoXIE101003ACCEPT_BILL_CODENUMBER(15)01004YesXPK0100401004YesXAK101004BIG_CUSTOMER_IDNUMBER(12)01004YesXAK101004CUSTOMER_IDNUMBER(12)01004YesXAK101004GEOGRAPHY_IDCHAR(18)01004YesXAK101004GROUP_IDCHAR(18)01004YesXAK101004UPDATE_TIMEDATE01004YesXAK101004USER_IDNUMBER(12)01004NoIDX_MOBILE_NUMBER_01004PHONE_NUMBERCHAR(18)01007YesXPK0100701007YesXAK101007SERV_IDNUMBER(12)01007YesXAK101007SERV_TYPE_CODENUMBER(4)01007YesXAK101007UPDATE_TIMEDATE01007YesXAK101007SERV_NUMBERCHAR(15)01007NoXIE101007SERV_IDNUMBER(12)01007NoXIE101007CUSTOMER_IDNUMBER(12)01007NoXIE101007UPDATE_TIMEDATE01007NoXIE101007RENEW_TIMECHAR(14)01019YesXPK0101901019YesXAK101019USER_IDNUMBER(12)01019YesXAK101019FUNC_IDNUMBER(8)01019YesXAK101019VALID_DATECHAR(14)01019YesXAK101019UPDATE_TIMEDATE01020YesXPK01020USER_IDNUMBER(12)01020YesXAK101020USER_IDNUMBER(12)01020YesXAK101020GSM_IDNUMBER(8)01020YesXAK101020UPDATE_TIMEDATE01020YesXAK101020STATUSNUMBER(2)01022YesXPK0102201022YesXAK101022USER_IDNUMBER(12)01022YesXAK101022START_TIMECHAR(14)01022YesXAK101022UPDATE_TIMEDATE01022NoXIE101022USER_IDNUMBER(12)01022NoXIE101022START_TIMECHAR(14)01022NoXIE101022UPDATE_TIMEDATE01032YesXPK0103201032YesXAK101032USER_IDNUMBER(12)01032YesXAK101032FUNC_IDNUMBER(8)01032YesXAK101032VALID_DATECHAR(14)01032YesXAK101032UPDATE_TIMEDATE01032NoXIE101032USER_IDNUMBER(12) 数据建模设计文档 ConfidentialVersion 1.0Page 26 of 30 01032NoXIE101032FUNC_IDNUMBER(8)01032NoXIE101032UPDATE_TIMEDATE01036YesXPK0103601036YesXAK101036BILL_IDNUMBER(12)01036YesXAK101036BILL_SUBJECTNUMBER(8)01036YesXAK101036UPDATE_TIMEDATE01036NoXIE101036BILL_IDNUMBER(12)01036NoXIE101036BILL_SUBJECTNUMBER(8)01036NoXIE101036UPDATE_TIMEDATE05001YesXPK0500105001YesXAK105001LOCAL_NUMBERCHAR(15)05001YesXAK105001REMOTE_NUMBERCHAR(30)05001YesXAK105001START_TIMECHAR(14)05001YesXAK105001DEAL_TIMECHAR(14)05001YesXAK105001UPDATE_TIMEDATE05001NoXIE105001LOCAL_NUMBERCHAR(15)05001NoXIE105001REMOTE_NUMBERCHAR(30)05001NoXIE105001START_TIMECHAR(14)05001NoXIE105001UPDATE_TIMEDATE05002YesXPK0500205002NoXIE105002MOBILE_NUMBERCHAR(15)05002NoXIE105002IMSI_NUMBERCHAR(15)05002NoXIE105002UPDATE_TIMEDATE05003YesXPK0500305003YesXAK105003SEQU_NUMBERCHAR(25)05003YesXAK105003LOCAL_NUMBERCHAR(15)05003YesXAK105003REMOTE_NUMBERCHAR(24)05003YesXAK105003UPDATE_TIMEDATE05003NoIDX_MOBILE_NUAL_0500113LOCAL_NUMBERCHAR(15)05003NoIDX_MOBILE_NUAL_0500113REMOTE_NUMBERCHAR(24)05003NoIDX_MOBILE_NUAL_0500113UPDATE_TIMEDATE05004YesXPK0500405004NoIDX_MOBILE_NUMBER_05004MOBILE_NUMBERCHAR(24)05005YesXPK0500505005NoIDX_MOBILE_NUMBER_LOCAL_05005LOCAL_NUMBERCHAR(20)05005NoIDX_MOBILE_NUMBER_REMOTE_05005REMOTE_NUMBERCHAR(24)05007YesXPK0500705007YesXAK105007LOCAL_NUMBERCHAR(20)05007YesXAK105007REMOTE_NUMBERCHAR(24)05007YesXAK105007SEND_MESS_TIMECHAR(14)05007YesXAK105007DEAL_TIMECHAR(14)05007YesXAK105007UPDATE_TIMEDATE05007NoIDX_MOBILE_NUMBER_LOCAL_05007LOCAL_NUMBERCHAR(20)05007NoIDX_MOBILE_NUMBER_LOCAL_05007REMOTE_NUMBERCHAR(24)05009YesXPK0500905009YesXAK105009LOCAL_NUMBERCHAR(15)05009YesXAK105009REMOTE_NUMBERCHAR(30)05009YesXAK105009COMM_START_TIMECHAR(14) 数据建模设计文档 ConfidentialVersion 1.0Page 27 of 30 05009YesXAK105009DEAL_TIMECHAR(14)05009YesXAK105009UPDATE_TIMEDATE05009NoIDX_MOBILE_NUMBER_LOCAL_05009LOCAL_NUMBERCHAR(15)05009NoIDX_MOBILE_NUMBER_LOCAL_05009REMOTE_NUMBERCHAR(30)05010YesXPK0501005010YesXAK105010SEQU_NUMBERCHAR(25)05010YesXAK105010MOBILE_NUMBERCHAR(15)05010YesXAK105010REMOTE_NUMBERCHAR(24)05010YesXAK105010END_TIMECHAR(14)05010YesXAK105010UPDATE_TIMEDATE05010NoIDX_MOBILE_NUMBER_05010MOBILE_NUMBERCHAR(15)05010NoIDX_MOBILE_NUMBER_05010REMOTE_NUMBERCHAR(24)05011YesXPK0501105011NoIDX_MOBILE_LIANTONG_05011LIANTONE_MOBILE_NUMBERCHAR(24)05011NoIDX_MOBILE_YIDONG_05011YIDONG_MOBILE_NUMBERCHAR(20)05016YesXPK0501605016YesXAK105016SEQU_NUMBERCHAR(25)05016YesXAK105016YIDONG_MOBILE_NUMBERCHAR(20)05016YesXAK105016LIANTONE_MOBILE_NUMBERCHAR(24)05016YesXAK105016UPDATE_TIMEDATE05016NoIDX_MOBILE_LIANTONG_05016LIANTONE_MOBILE_NUMBERCHAR(24)05016NoIDX_MOBILE_LIANTONG_05016YIDONG_MOBILE_NUMBERCHAR(20)05017YesXPK0501705017YesXAK105017LOCAL_NUMBERCHAR(24)05017YesXAK105017START_TIMECHAR(14)05017YesXAK105017OVER_TIMECHAR(14)05017YesXAK105017UPDATE_TIMEDATE05017YesXAK105017SERV_IDCHAR(10)05017NoIDX_MOBILE_NUMBER_LOCAL_05017LOCAL_NUMBERCHAR(24)05017NoIDX_MOBILE_NUMBER_LOCAL_05017START_TIMECHAR(14)05017NoIDX_MOBILE_NUMBER_LOCAL_05017UPDATE_TIMEDATE05017NoIDX_MOBILE_NUMBER_LOCAL_05017SERV_IDCHAR(10)05018YesXPK0501805018NoIDX_MOBILE_NUMBER_LOCAL_05018LOCAL_NUMBERCHAR(15)05018NoIDX_MOBILE_NUMBER_LOCAL_05018TRANS_MOBILE_NUMBERCHAR(24)05018NoIDX_MOBILE_NUMBER_LOCAL_05018UPDATE_TIMEDATE05021YesXPK0502105021YesXAK105021BILL_NONUMBER(12)05021YesXAK105021ACCOUNT_NONUMBER(12)05021YesXAK105021SERV_NONUMBER(12)05021YesXAK105021SUBJECT_CODENUMBER(8)05021YesXAK105021UPDATE_TIMEDATE05021NoIDX_MOBILE_NUMBER_05021SERV_NONUMBER(12)05021NoIDX_MOBILE_NUMBER_05021BILL_NONUMBER(12)05021NoIDX_MOBILE_NUMBER_05021CUSTOMER_NONUMBER(12)05021NoIDX_MOBILE_NUMBER_05021UPDATE_TIMEDATE05021NoIDX_MOBILE_NUMBER_05021SUBJECT_CODENUMBER(8)05034YesXPK05034 数据建模设计文档 ConfidentialVersion 1.0Page 28 of 30 05036YesXPK0503605036YesXAK105036USER_SERVICE_IDCHAR(15)0503