商业智能与数据挖掘课件

商商业智能与数据挖掘智能与数据挖掘商业智能与数据挖掘内容商业智能与数据挖掘概念商业智能价值宝钢商业智能方案宝钢商业智能案例内容商业智能与数据挖掘概念企业信息化企业信息化：通过对信息技术的应用、开发和使用企业的信息资源，提高管理水平、开发能力、经营水平的过程目的：利用信息化手段提高企业的竞争能力、创新能力和持续发展的能力。企业信息化企业信息化：通过对信息技术的应用、开发和使用企业的企业信息化的三个层次决策的信息化：通过对那些信息化的原始数据进行科学地加工处理，运用一定的计算模型和工具进行科学地统计分析，从而起到对管理和决策的支持作用。管理的信息化：通过网络将原先流程所设计岗位员工的工作通过计算机来实现以提高业务处理的效率，从而提高企业的整体劳动生产率。数据的信息化：将企业的所有信息都以数字化的方式保存起来，并实现简单的查询和处理。企业信息化的三个层次决策的信息化：通过对那些信息化的原始数据企企业数据信息模型数据信息模型实现从业务运行到运行管理、战略管理的转变，有效支持决策企业数据信息模型实现从业务运行到运行管理、战略管理的转变，有OLTP系统面临的问题操作型数据库的数据组织面向事务处理任务，各个业务系统之间各自分离，数据库之间相互独立，形成数据屏障，产生信息孤岛。主要关心当前某一个时间段内的数据。没有有效手段将大量的数据转化成信息和知识。无法满足快速响应决策需求OLTP系统面临的问题操作型数据库的数据组织面向事务处理任务数据仓库（数据仓库（Data Warehouse）：）：一个标准的定义是：数据仓库是一个面向主题、集成、时变、非易失、稳定的数据集合，是支持管理部门的决策过程。简单地说，数据仓库就是储存数据的地方。它既可能是原始的业务数据库，也可能是另外生成的。既可能是标准的关系型数据库，也可能是包括了一些特定面向分析特性的专门产品。数据仓库（Data Warehouse）：一个标准的定义是：数据集市（数据集市（Data Mart）：）：数据集市也可叫做“小数据仓库”。如果说数据仓库是建立在企业级的数据模型之上的话。那么数据集市就是企业级数据仓库的一个子集，他主要面向部门级业务，并且只面向某个特定的主题。数据集市可以在一定程度上缓解访问数据仓库的瓶颈。数据集市（Data Mart）：数据集市也可叫做“小数据仓库企业数据仓库模型历史数据MES/OLTP其它数据数据源数据源数据仓库构建数据仓库构建数据仓库,模型分段数据存储ETL(抽取,转换,加载)数据集市数据集市企业数据仓库数据分析数据分析BusinessModeling数据挖掘查询及报表企业门户数据仓库管理数据仓库管理OLAP用户用户企业数据仓库模型历史数据其它数据数据源数据仓库构建数据仓库,数据仓库的应用服务器端制定统计分析：静态报表，动态报表，应用系统（Decision Support System【DSS】、Executive Information System【EIS】）等OLAP（On-Line Analytical Processing）：用多维概念视图对信息进行多角度、多层次的灵活分析。客户端个性化统计分析：用户使用各类BI工具，如SAS、SPSS、Minitab、Microsoft Reporting等，进行日常报表编制、数据分析。数据挖掘（Data Mining）：找出数据中隐藏的模式，构造分析模型，进行分类和预测，并用可视化工具提供挖掘结果。数据仓库的应用服务器端制定统计分析：静态报表，动态报表，应用商业智能（商业智能（Business Intelligence Business Intelligence）：商业智能的概念最早在1996年提出。当时将商业智能定义为一类由数据仓库(或数据集市)、查询报表、数据分析、数据挖掘、数据备份和恢复等部分组成的、以帮助企业决策为目的技术及其应用。为了将数据转化为知识，需要利用数据仓库、联机分析处理(OLAP)工具和数据挖掘等技术。因此，从技术层面上讲，商业智能并不是什么新技术，它只是E（Extraction）T（Transformation）L（Load）、数据仓库、OLAP、数据挖掘、数据展现等技术的综合运用。商业智能实际上就是一种解决方案。商业智能（Business Intelligence）数据挖掘（数据挖掘（Data Mining）：）：数据挖掘是从大量的数据中，抽取出潜在的、有价值的知识（模型或规则）的过程。描述型数据挖掘和预测型数据挖掘两种 数据挖掘（Data Mining）：数据挖掘是从大量的数据中商业智能价值数据转化为知识，用知识辅助决策商业智能价值数据转化为知识，用知识辅助决策知识发现（KDD knowledge discovery in database）数据数据源数据源数据 模式模式知识知识抽取抽取预处理预处理挖掘挖掘转换转换评估评估知识发现（KDD knowledge discovery 商业智能的效能收集数据信息分析数据信息 知识制定决策制定行动计划执行行动商业智能的效能收集数据信息分析数据信息制定决策制定行动计划执宝钢数据仓库及相关应用生产管理计算机系统的架构生产管理计算机系统的架构L2过程控制计算机系统过程控制计算机系统L3（分厂级）生产控制计算机系统（分厂级）生产控制计算机系统L1基础自动化基础自动化基础自动化基础自动化L4ERP系统系统宝钢数据仓库及相关应用生产管理计算机系统的架构L2过程控制计宝钢企业信息门户电子商务在线宝钢在线公司ERP系统公司主干网采购供应链管理产销供应链管理生产控制计算机过程控制计算机基础自动化数据仓库及数据仓库及决策支持系统决策支持系统企业工作流系统（企业信息门户）宝钢股份整体信息系统宝钢企业信息门户电子商务在线公司ERP系统公司主干网采购供应企业数据仓库存储 ODS 主题数据 MOLAP数据 企业ERP系统 L3其它系统各类源数据 系统管理元数据管理数据接口 中间层服务器（WEB server等）查询 报表 CRM DSS EIS OLAP客户端 DM数据读取、清洗、整理、转化、装载S85平台宝钢股份数据仓库逻辑架构图宝钢股份数据仓库逻辑架构图宝钢股份数据仓库逻辑架构企业数据仓库存储 宝钢股份企业数据仓库现状 企业统计数据集市企业统计数据集市 技术质量数据集市技术质量数据集市 销售管理数据集市销售管理数据集市 生产管理数据集市生产管理数据集市 设备管理数据集市设备管理数据集市 财务成本数据集市：财务成本数据集市：计划值、金属平衡、计划值、金属平衡、成本分析、财务分析成本分析、财务分析 生产管制信息系统生产管制信息系统 企业指标体系系统企业指标体系系统 生产厂区域分析：生产厂区域分析：炼钢、热轧、冷轧、条钢炼钢、热轧、冷轧、条钢宝钢股份企业数据仓库现状 企业统计数据集市宝宝钢股份数据股份数据仓库建建设历程程 19991999年年3 3月，启动公司数据仓库建设项目月，启动公司数据仓库建设项目 20002000年年6 6月，完成了多达近月，完成了多达近7 7万字的公司数据仓库规万字的公司数据仓库规划划 20012001年年7 7月，技术质量主题数据仓库建成月，技术质量主题数据仓库建成 20022002年年1212月，市场营销、生产物流、财务成本主题月，市场营销、生产物流、财务成本主题数据仓库建成数据仓库建成 20032003年年8 8月，设备管理主题数据仓库建成月，设备管理主题数据仓库建成宝钢股份数据仓库建设历程 1999年3月，启动公司数据仓库建商业智能与数据挖掘课件静态报表静态报表动态报表动态报表MOLAPMOLAP