资源描述
单击此处编辑母版标题样式,单击此处编辑母版文本样式,第二级,第三级,第四级,第五级,2013/7/13,#,单击此处编辑母版标题样式,单击此处编辑母版文本样式,第二级,第三级,第四级,第五级,2013/7/13,#,专注商业智能和数据库性能优化,天善微软,BI,培训课程,QQ,:,744711023,讲师:梁勇,课程介绍,概念介绍,应用现,状,状,技术介,绍,绍,目,录,录,Contents,微软,BI,开发,Day1,Day1,Day1,课程介,绍,绍,-,学习体,系,系,在线,在线共享屏幕和在线互动,离线,视频下载,课下复习,经验,经验方法分享,练习,提供课程配套练习,Day1,Day1,Day1,课程介,绍,绍,-,课程计,划,划,Day 1 (,课程简介,),Day 2,(数据仓库),Day3,(,BI,应用,BI,职业发展),Day 4,(,ETL,),1,、天善 网络授课培训详细,(,整个培训的内容、过程、案例以及注意事项等介绍,),2,、天善微软,BI,课程详细安排,3,、微软,BI,所需要的环境安装,4,、,BI,基础知识讲解、,BI,方法论实施讲解,2013-7-13,1,、数据仓库的概念与发展,2,、数据仓库相关技术和概念(维度表、事实表等),3,、数据仓库架构与模型(星形模型、雪花模型等各主题和模块的设计等),4,、数据仓库整体方案讲解与实现(构建数据仓库五步法),5,、数据仓库设计思想(父子维、缓慢变化维等处理),6,、,PowerDesigner,进行数据仓库建模的开发,概念型模型、物理型模型设计开发与应用,7,、天善数据仓库课堂案例讲解与实现,2013-7-14,1,、现代企业,BI,市场需求概述,2,、,BI,在国内行业性特点、,BI,项目实施概论,3,、互联网行业案例分析,4,、零售行业、服装行业、汽车行业、电信行业、银行行业等行业案例分析,5,、职位规划介绍、职业发展和 行业选择建议,2013-7-21 (,周剑,),1,、,ETL,概述,(,数据抽取、数据转换、数据加载,),2,、,SSIS,简介,(,控制流介绍、数据流介绍,),3,、控制流任务组件详解,(,循环容器、执行,SQL,任务、序列容器等控件,),4,、数据流任务组件详解,(,源、目标、转换、查找、排序等控件使用,),5,、天善,SSIS,课堂案例的讲解与实现,2013,-7-28,Day1,Day1,Day1,课程介,绍,绍,-,课程计,划,划,Day5,(,SSAS,),Day6 (SSRS,、,MDX,),Day7,(集成、性能优化),Day8 (,总结、温故而知新,),1,、多维数据集概述,(,应用、分析方法,),2,、,SSAS,简介,(,数据源、数据源视图、多维数据集、维度、角色等介绍,),3,、数据源视图详解,(,关系图组织架构讲解、关系表设计、新增表、修改表等设计,),4,、维度的设计(时间维度、父子维度、属性、属性关系、层次结构等设计讲解),5,、,Cube,的设计(度量值组表、度量值、聚合设计、维度设计、维度用法、计算成员、分区、聚合等应用讲解),6,、天善,SSAS,课堂案例的讲解与实现,2013,-8-4,1,、报表概述,(,报表组成、中国式报表介绍,),2,、,MDX,的语法与应用,(,元组,切片,切块、计算成员、集、轴等介绍,),3,、,MDX,函数讲解(成员函数,FirstChild,、,FirstSibling,、,ParallelPeriod,、,Parent,、,PrevMember,等常用函数讲解 ; 数值函数,iif,Sum,Rank,等常用函数讲解),4,、,SSRS,的设计(矩阵、饼图、柱状图、折线图等应用;预警功能,指标功能等小知识讲解),5,、天善,SSRS,课堂案例的讲解与实现,2013-8-11,1,、,SSRS,报表与,Web,集成讲解,(,集成通用性、权限控制、数据控制、发布,),2,、数据库性能优化之索引,索引碎片,统计信息,调优等内容讲解,3,、数据库性能优化工具之数据基本对象、索引优化、阻塞、异步数据传输、文件组分区、分区函数分区、,SQL,邮件等功能讲解,4,、数据库 性能优化 独家分享、经验分享。,2013-8-18,1,、重要知识点的回顾总结,(,包配置、日志处理、时间戳增量更新讲解、,SSIS,发布和迁移、,SSAS,发布和迁移、,SSRS,发布和迁移,),2,、项目经验分享,3,、,BI,面试经验分享汇总(尤其针对应届生),2013-8-25,Day1,Day1,Day1,课程介,绍,绍,-,案例介,绍,绍,指标,量值,维度,财务汇,总,总报表,概念介,绍,绍,商业智,能,能(,BusinessIntelligence,,,BI,),,又称,商,商业智,慧,慧或商,务,务智能,,,,指用,现,现代,数据仓,库,库,技术、,联机分,析,析处理,技术、,数据挖,掘,掘,和数据,展,展现技,术,术进行,数,数据分,析,析以实,现,现商业,价,价值。,数据仓,库,库(,Data Warehouse,,,DW,),数据仓,库,库之父,比,比尔,恩门(,Bill Inmon,)在,1991,年出版,建立数,据,据仓库,一书中,所,所提出,的,的定义,被,被广泛,接,接受,,数,数据仓,库,库是一,个,个面向,主,主题的,(,(,Subject Oriented,)、集,成,成的(,Integrate,)、相,对,对稳定,的,的(,Non-Volatile,)、反,映,映历史,变,变化(,Time Variant,)的数,据,据集合,,,,用于,支,支持管,理,理决策,。,。,联机分,析,析处理,(,On-Line AnalyticalProcessing,,,OLAP,),支持复,杂,杂的分,析,析操作,、,、侧重,决,决策支,持,持,提,供,供多维,的,的概念,视,视图,数据挖,掘,掘(,Data mining,,,DM,),又称数,据,据库中,的,的知识,发,发现(,KnowledgeDiscoverinDatabase,,,KDD,),是,目,目前人工智,能,能和数据,库,库领域,研,研究的,热,热点问,题,题,所,谓,谓数据,挖,挖掘是,指,指从数,据,据库的,大,大量数,据,据中揭,示,示出隐,含,含的、,先,先前未,知,知的并,有,有潜在,价,价值的,信,信息的,非,非平凡,过,过程,决策,战略决策,行动,数据分析,交叉分析,数据挖掘,数据仓库,/,数据集市,集成,稳定,数据源,生产业务系统,外部数据,BI,从数据到信息,应用现,状,状,商业智能应,用,用领域,商业智,能,能是一,种,种整体,化,化的解,决,决方案,,,,他可,以,以帮助,企,企业做,出,出明智,的,的业务,经,经营决,策,策,而,依,依据则,是,是企业,内,内部的,各,各种数,据,据,例,如,如订单,、,、库存,、,、交易,账,账目、,客,客户和,供,供应商,资,资料、,行,行业数,据,据和竞,争,争对手,信,信息等,等,等。商,业,业智能,其,其实是,一,一种将,企,企业信,息,息数据,转,转化为,决,决策的,重,重要工,具,具。,商业智,能,能的应,用,用是需,要,要一定,的,的基础,的,的。实,施,施商业,智,智能的,企,企业至,少,少应该,具,具备以,下,下几个,条,条件:,用,用户的,数,数据已,达,达到一,定,定的规,模,模;用,户,户面临,激,激烈的,市,市场竞,争,争:用,户,户在,IT,方面的,资,资金能,得,得到保,障,障。满,足,足以上,几,几点的,行,行业集,中,中在重,要,要的政,府,府机构,(,(如财,务,务、税,务,务、审,计,计、工,商,商、海,关,关等),、,、零售,业,业(连,锁,锁店、,网,网上零,售,售等),、,、大型,现,现代化,的,的制造,业,业(如,宝,宝钢、,上,上汽集,团,团等),、,、金融,(,(包括,银,银行、,证,证券、,保,保险等,),)、电,信,信业(,如,如中国,电,电信、,中,中国网,通,通、中,国,国移动,等,等)、,能,能源业,(,(电力,),)、运,输,输等,,这,这也是,目,目前国,内,内急需,要,要数据,仓,仓库和,商,商业智,能,能技术,来,来提升,企,企业竞,争,争力的,主,主要行,业,业。,金融、,电,电信行,业,业是,BI,应用最,集,集中的,行,行业,,约,约占,40%,的市场,分,分额,,保,保险、,能,能源、,烟,烟草、,政,政务行,业,业约占,30%,的市场,份,份额,,制,制造、,零,零售行,业,业约占,30%,的市场,份,份额,,是,是,BI,应用最,具,具潜力,的,的行业,。,。,金融:,随,随着国,内,内五大,商,商业银,行,行的信,息,息化不,断,断发展,,,,在,BI,领域投,资,资稳步,增,增长,,每,每年均,有,有大量,的,的,BI,需求,,其,其中,BI,已经不,仅,仅局限,于,于高层,管,管理者,的,的决策,,,,操作,型,型,BI,应用越,来,来越广,泛,泛,尤,其,其是信,贷,贷评审,领,领域。,中,中小型,银,银行,BI,需求也,不,不断涌,现,现,未,来,来将是,金,金融行,业,业,BI,市场的,主,主要增,长,长点。,电信:,电,电信行,业,业信息,化,化程度,很,很高,,对,对信息,化,化依赖,很,很强,,积,积累了,大,大量的,数,数据,,具,具有实,施,施商业,智,智能项,目,目的基,础,础条件,和,和资金,实,实力。,电,电信行,业,业对于,BI,深入应,用,用是最,渴,渴望的,,,,在话,费,费套餐,设,设置、,客,客户潜,力,力分析,等,等都需,要,要数据,挖,挖掘技,术,术来提,供,供决策,依,依据,发展趋势,移动商,业,业智能,商业智,能,能系统,会,会把大,量,量数据,转,转变成,可,可视化,形,形式(,如,如图形,和,和表格,),),以,便,便使用,者,者详细,深,深入地,分,分析潜,在,在商业,趋,趋势。,因,因此如,果,果为这,种,种分析,赋,赋予移,动,动性,通常利,用,用功能,强,强大的,智,智能终,端,端,许,多,多公司,就,就能与,客,客户和,商,商业合,作,作伙伴,进,进行实,时,时互动,,,,从而,改,改善服,务,务、提,高,高工作,效,效率。,SaaS BI,将得到,快,快速发,展,展,SaaS,是基于,互,互联网,提,提供软,件,件服务,的,的软件,应,应用模,式,式,企,业,业根据,实,实际需,要,要,从,SaaS,提供商,租,租赁软,件,件服务,。,。,SaaS,模式在,CRM,领域获,得,得了成,功,功,不,论,论是国,外,外还是,国,国内具,有,有成熟,的,的产品,,,,并取,得,得了不,错,错的收,益,益。,SAAS,在,BI,领域的应用的,挑,挑战是应用于,互,互联网上的,SAAS,软件无法处理,BI,所需的海量数,据,据。,商业智能日渐,与,与业务融合,业务分析作为,商,商业智能领域,中,中最贴近业务,的,的层面,在,2010,年成为业界关,注,注的重点,不,管,管是,SAP,还是,IBM,,都将业务分,析,析作为今年的,业,业务发展重点,。,。企业希望由,BI,系统带来的透,明,明度和洞察力,能,能够帮助企业,降,降低成本,提,高,高生产率和业,务,务敏捷性。通,过,过商业智能,,企,企业能更清晰,更,更深刻的了解,包,包括公司管理,、,、利润分析、,市,市场竞争、财,务,务状况等信息,,,,而未来商业,智,智能的这种特,性,性还将继续加,强,强。,操作型,BI,应用得到发展,目前商业智能,技,技术不仅仅应,用,用于企业高层,管,管理者的决策,分,分析,越来越,多,多的商业智能,分,分析结果正被,用,用于普通员工,的,的日常工作流,程,程中,直接推,动,动业务的执行,。,。例如:在家,乐,乐福购物时,,收,收银员已经可,以,以根据顾客的,购,购物篮进行产,品,品推荐。,发展趋势,数据集成应用,得,得到重视,在一些大型企,业,业中往往有几,十,十个甚至几百,个,个信息系统,,将,将这些数据整,合,合到数据仓库,中,中,一般采取,ETL,工具抽取多个,厂,厂商数据库的,数,数据,有些甚,至,至还包含非结,构,构化数据,例如,XML,、,EXCEL,、文本等。这,些,些数据往往需,要,要加工和整理,放,放入,ODS,(中间库),,最,最后以规范、,标,标准的格式存,储,储到数据仓库,。,。在这个数据,集,集成的过程中,,,,要做到系统,兼,兼容性好、开,发,发效率高、处,理,理性能好,而,且,且能够捕捉数,据,据的变化处理,增,增量数据。数,据,据集成是建立,实,实用的数据仓,库,库的关键,而,且,且数据集成的,过,过程占商业智,能,能应用中一半,以,以上的工作量,,,,因此越是大,型,型企业越是重,视,视数据集成。,中小企业,BI,应用逐渐扩大,市,市场份额,中国中小企业,逐,逐渐呈现对管,理,理软件旺盛的,需,需求态势,很,多,多厂商发布了,专,专门针对中小,企,企业的,BI,套件,例如,CognosExpress,等。中小企业,在,在实施,ERP,、,CRM,产品后,必将,应,应用商业智能,,,,中小企业市,场,场是,BI,应用非常重要,的,的组成部分。,BI,企业将在垄断,中,中不断新生,中国商业智能,市,市场两极竞争,趋,趋势日益加剧,。,。在高端市场,,,,由国际厂商,垄,垄断与竞争的,局,局面是,2010,年的主流,其,中,中,IBM,、,Oracle,、,SAP,、,Microsoft,拥有完整的,BI,产品线,将占,据,据,70%,以上的市场份,额,额。剩余的,30%,市场将由其他,外,外资企业和国,内,内企业分享。,随,随着国内企业,的,的成长与并购,,,,国内厂商的,实,实力不断壮大,,,,但是主要集,中,中于中低端市,场,场,在,2010,年优秀的国产,BI,产品将开始不,断,断向四大国际,厂,厂商发起挑战,,,,但是竞争的,过,过程将是极其,漫,漫长的。,商业智能主要,厂,厂商,1,) 国际,BI,厂商,如,BO,公司(,SAP,)、,Hyperion,公司,(Oracle),、微软公司、,SAS,公司等。这些,国,国际厂商的品,牌,牌与规模优势,非,非常突出,是,国,国内大部分,BI,厂商难以与之,匹,匹敌的。,2,) 起步比较,早,早的国内,BI,厂商,如菲奈,特,特,(,成立于,1995,年,10,月,从,1997,年开始进入,BI,领域,),、先进数通公,司,司,(,成立于,2000,年,),、吉贝克公司,(,成立于,2002,年,),等。这些国,内,内,BI,厂商凭借本,土,土化的优势,以,以及对国内,BI,用户所需要,的,的应用的独,特,特见解,也,在,在国内的,BI,市场上占有,超,超过,30,的市场份,额,额。,3,) 非专业,BI,厂商,主要,有,有以下几类,:,:一、从事,某,某些行业核,心,心业务系统,建,建设的公司,;,;二、从事,系,系统集成的,公,公司;三、,从,从事专业财,务,务系统及个,别,别,ERP,厂商。,厂商,产品及简介,IBM,DB2,以及,Cognos,、,SPSS,、,DataStage,,覆盖,BI,全部领域。,数据仓库产品结合了,DB2,数据服务器的长处和,IBM,的商业智能基础设施,集成了用于仓库管理、数据转换、数据挖掘以及,OLAP,分析和报告的核心组件,提供了一套基于可视数据仓库的商业智能解决方案。,Oracle,Oracle,、,Hyperion,,覆盖,BI,全部领域,数据挖掘领域有待加强。,数据仓库解决方案包含了业界领先的数据库平台、开发工具和应用系统,能够提供一系列的数据仓库工具集和服务,具有多用户数据仓库管理能力,多种分区方式,较强的与,OLAP,工具的交互能力及快速和便捷的数据移动机制等特性。,SAP,Business Objects,、,Crystal Reports,,主要是,OLAP,和报表领域。,Sybase,(,SAP,)提供了称为,Warehouse Studio,的一整套覆盖整个数据仓库建立周期的产品包,包括数据仓库的建模、数据集成和转换、数据存储和管理、元数据管理和数据可视化分析等产品。,Business Objects,(,SAP,)是集查询、报表和,OLAP,技术为一身的智能决策支持系统,具有较好的查询和报表功能,提供多维分析技术,支持多种数据库,同时它还支持基于,Web,浏览器的查询、报表和分析决策。,Microsoft,SQL Server,,覆盖,BI,全部领域,适合中小型企业,性价比高。它,提供了三大服务和一个工具来实现数据仓库系统的整合,为用户提供了可用于构建典型和创新的分析应用程序所需的各种特性、工具和功能,可以实现建模、,ETL,、建立查询分析或图表、定制,KPI,、建立报表和构造数据挖掘应用及发布等功能。,Teradata,Teradata,,主要是数据仓库领域。它,提出了可扩展数据仓库基本架构,包括数据装载、数据管理和信息访问几个部分,是高端数据仓库市场最有力竞争者,主要运行在基于,Unix,操作系统平台的,NCR,硬件设备上。,SAS,SAS,,数据挖掘领域领先。,SAS,公司的数据仓库解决方案是一个由,30,多个专用模块构成的架构体系,适应于对企业级的数据进行重新整合,支持多维、快速查询,提供服务于,OLAP,操作和决策支持的数据采集、管理、处理和展现功能。,国内其他,菲奈特(,BI office,)、和勤(,Hinge,)、奥威智动(,Power-BI,)、科加诺(,QlikView,)、尚南(,BlueQuery,),润乾、探智(,Trinity,)。,技术介绍,BI,基本框架,数据仓库,OLAP,统计报表,即席查询,决策支持,业务支持,企业信息门户,管理支持,信息展现层,应用分析层,数据服务层,经销商上传,数,数据,业务系统,外部数据源,ETL,面向主题的,集成的,相对稳定的,随时间变化,的,的,数据仓库定,义,义,商业智能的,核,核心内容是,从,从许多来自,企,企业不同的,业,业务处理系,统,统的数据(,分,分布的、异,构,构的源数据,),)中,提取,出,出有用的数,据,据,进行清,理,理以保证数,据,据的正确性,,,,然后经过,抽,抽取(,Extraction,)、转换(,Transformation,)和装载(,Load,),即,ETL,过程(本质,上,上是样本提,取,取的过程),,,,整合到一,个,个企业级的,数,数据仓库里,,,,从而得到,企,企业信息的,一,一个全局视,图,图,在此基,础,础上利用合,适,适的查询和,分,分析工具、,数,数据挖掘工,具,具等对数据,仓,仓库里的数,据,据进行分析,和,和处理,形,成,成信息,甚,至,至进一步把,信,信息提炼出,辅,辅助决策的,知,知识,最后,把,把知识呈现,给,给管理者,,为,为管理者的,决,决策过程提,供,供支持。,ETL,技术概念,目标:数据信息,转,转化为商,务,务价值,方法:转储,、,、监控、分,析,析和展现海,量,量数据,过程:,数据信息,分析提炼,知识,指导,决策,落实,行动,创造,价值,ETL,过程,(Multi Dimensional Database,MDD),可以简单地,理,理解为:将,数,数据存放在,一,一个,n,维数组中,,而,而不是像关,系,系数据库那,样,样以记录的,形,形式存放。,因,因此它存在,大,大量稀疏矩,阵,阵,人们可,以,以通过多维,视,视图来观察,数,数据。多维,数,数据库增加,了,了一个时间,维,维,与关系,数,数据库相比,,,,它的优势,在,在于可以提,高,高数据处理,速,速度,加快,反,反应时间,,提,提高查询效,率,率。,多维数据库,PowerDesigner,SqlServerIntegration Service,SqlServer,Analysis,Service,SqlServerReporting,Service,学完此次课,程,程后,你能,够,够:,掌握微软平,台,台的体系结,构,构和实现商,业,业智能化的,核,核心方法,掌握数据仓,库,库建模的思,想,想和基本方,法,法,能使用,PowerDesigner,进行数据仓,库,库建模开发,能使用,SSIS,进行,ETL,开发,能使用,SSAS,进行多维数,据,据库开发,能使用,SSRS,进行报表开,发,发,获得更多行,业,业项目经验,,,,提高职业,技,技术能力,,增,增加竞争力,。,。,课程目标,微软,BI,开发介绍,微软,BI,竞争对手分,析,析,其他常见,ETL,工具有:,Informatica,公司的,PowerCenter,SAP,公司的,DS(Data Service),ORACLE,公司的,ODI,(,Oracle Data Integrator,),Kettle,(开源的,ETL,工具),其他常见前端工,具,具有:,SAP,公司的,BO,ORACLE,公司的,BIEE,IBM,公司的,Cognos,微软,BI,安装,安装成功后,开,开发界面,安装成功后,开,开发界面,成功安装后,引,引擎界面,ETL,组件,-SSIS,SSIS,负责,ETL,以及整体,BI,的调度。图,形,形话界面比,较,较直观。,SSIS,控制流常用,组,组件,SSIS,数据流常用,组,组件,OLAP,组件,- SSAS,SSAS,各个组件介,绍,绍,报表展现组,件,件,SSRS,SSRS,各个组件,与,Web,集成,微软,BI,高级应用、,第,第三方工具,集,集成,SSAS,与,Cognos,结合使用,SSAS,与,Analyzer,无缝集成,SSAS,与,Dundas,集成使用,SSAS,与,FusionCharts,使用,AMO,操作,Cube,SSAS,与,Excel,集成使用,THANKS,天善智能,专注商业智,能,能和数据库,性,性能优化,
展开阅读全文