国家环境信息与统计能力建设项目
环境信息数据仓库系统技术规定
Technical regulations of environmental data warehouse system
(征求意见稿)
《环境信息数据仓库系统技术规定》编制组
2010 年 10 月
目
目
次
次.................................................................................. II
环境信息数据仓库系统技术规定 ............................................................... 1 1 适用范围 ............................................................................... 1 2 术语和定义 ............................................................................. 1 3 缩略语 ................................................................................. 4 4 环境信息数据仓库系统架构 ............................................................... 5 5 环境信息数据仓库系统数据源规定 ......................................................... 5 6 环境信息数据仓库系统数据采集层(ETL)技术要求 ......................................... 6 7 环境信息数据仓库系统数据层技术要求 ..................................................... 8 8 BI 层技术要求.......................................................................... 11 9 环境信息数据仓库系统元数据技术要求 .................................................... 11 10 环境信息数据仓库系统标准规范体系要求 ................................................. 12 11 环境信息数据仓库系统基础设施要求 ..................................................... 12 12 环境信息数据仓库系统数据安全要求 ..................................................... 12 13 环境信息数据仓库系统运行维护要求 ..................................................... 12 参考文献.................................................................................. 13
II
环境信息数据仓库系统技术规定
1 适用范围 本技术规定对环境信息数据仓库系统体系架构及主要建设环节的工作方法和建设内容进行了规范. 本技术规定适用于国家环境信息与统计能力建设项目数据仓库系统的设计,建设和运行维护. 2 术语和定义
2.1 数据仓库 data warehouse 一种用以支持经营管理中的决策制定过程,面向主题,涵盖不同时期的集成而稳定的数据集合.把 信息加以整理归纳,并及时提供给相应的管理决策人员,是数据仓库的根本任务.数据仓库的工作流程 一般包括收集数据,过滤数据,存储数据,以及把数据应用于分析,研究等应用程序. [HJ/T 416—2007 术语和定义 7.129] 2.2 环境数据仓库 environmental data warehouse 主要用于存储环境主题分析相关的各类事实数据,维度数据,并提供各类环境主题分析功能. 2.3 数据集市 data mart 数据集市是数据仓库的一个子集,主要面向部门级业务,并且只面向某个特定的主题.数据集市存 储为特定用户预先计算好的数据, 从而满足用户对性能的需求. 数据集市可以在一定程度上缓解访问数 据仓库的瓶颈. 2.4 决策支持系统 decision making supporting system 采用信息技术,空间地理技术和多媒体技术等手段,以数据库为支撑,利用核心政务系统和其它政 务系统收集相关决策信息,进行分析,预测和评估,提供智能化决策支持的一种应用系统. [HJ/T 416—2007 术语和定义 7.63] 2.5 脏数据 dirty data 进行"清洗 Clean"时需要抛弃的数据,包括: a) 关键信息不完整的数据 b) 错误的数据 c) 重复的数据 d) 不符合业务逻辑关系的数据 2.6 数据采集 ETL E(Extract) ,T(Transform) ,L(Load)代表"抽取""转换""加载" , , ,完成数据从数据源向目 标数据仓库转化的过程,是实施数据仓库的重要步骤.基本的 ETL 过程如下所示:

下一页