资源描述
Click to edit Master title style,Click to edit Master text styles,Second level,Third level,单击此处编辑母版标题样式,单击此处编辑母版文本样式,第二级,第三级,第四级,第五级,*,*,单击此处编辑母版标题样式,单击此处编辑母版文本样式,第二级,第三级,第四级,第五级,*,*,助力医疗信息无限化,51、山气日夕佳,飞鸟相与还。,52、木欣欣以向荣,泉涓涓而始流。,53、富贵非吾愿,帝乡不可期。,54、雄发指危冠,猛气冲长缨。,55、土地平旷,屋舍俨然,有良田美池桑竹之属,阡陌交通,鸡犬相闻。,助力医疗信息无限化助力医疗信息无限化51、山气日夕佳,飞鸟相与还。,52、木欣欣以向荣,泉涓涓而始流。,53、富贵非吾愿,帝乡不可期。,54、雄发指危冠,猛气冲长缨。,55、土地平旷,屋舍俨然,有良田美池桑竹之属,阡陌交通,鸡犬相闻。深挖掘、速决策、促转型 你知道的,你不知道的,助力医疗信息无限化51、山气日夕佳,飞鸟相与还。助力医疗信息,1,深挖掘、速决策、促转型,深挖掘、速决策、促转型,你知道的,你不知道的,突破,Breakthrough,你知道的,你不知道的突破,世界强国变迁的历史,世界强国变迁的历史,英国的时代是工业革命的时代,1765,年瓦特发明蒸汽机,煤矿开采,1768,年阿克莱特发明水力纺织机,钢铁业,司法,金融业,1784,年卡特莱特发明了动力纺织机,。,英国的时代是工业革命的时代1765年瓦特发明蒸汽机煤矿开采1,美国的时代是电气/电子化的时代,1876,年费城世博会贝尔展出电话机,1915,年旧金山世博会福特汽车的汽车生产线,每,10,分钟有一辆汽车下线,贝尔开通了洲际电话,两次世界大战渔翁得利,开放的移民政策引入,大量高质量人才,华尔街的金融业,优秀的教育业,强大的军事实力,。,20,世纪,90,年代蓬勃发展的,IT,行业,美国的时代是电气/电子化的时代1876年费城世博会贝尔展出电,21,世纪将是什么时代呢,21,世纪是中国的世纪,也是信息科技的时代,信息科技的发展给了从未想过的手段去了解“你知道你不知道的”和“你不知道你不知道的”,也会面对前所未有的挑战!,21世纪将是什么时代呢21世纪是中国的世纪,2008,1987,1929危机之后三个月,2008,1987,1929危机之后三个月,2008,1987,1929危机之后六个月,2008,1987,1929危机之后六个月,2008,1987,1929危机之后五年,2008,1987,1929危机之后五年,从“你知道你不知道”开始突破,从“你知道你不知道”开始突破,从数据中分析规律,交易规则,IF,AMD,price moves outside 2% of,AMD-15-minute-VWAP,FOLLOWED-BY,(,S&P,moving by 0.5%,AND,(,AMD,s price moves up by 5%,OR,INTEL,s price moves down by 2%,),),ALL WITHIN,any 2 minute time period,THEN,BUY,INTEL,SELL,AMD,海量数据分析,实时事件处理,AMD,从数据中分析规律交易规则AMD,令人惊讶的数据量,NASDAQ 2975,+ NYSE 2844,各大交易所的股票数目,+ AMEX 894,+ OTCBB 1219,+ Pink Sheets 1834,Total 9766,股票,9,766,X,价格波动,/,分,30,可供分析数据量,X,数据点,/,波动,4,6,万亿条股票交易信息,X,每天,7,个小时,420,X,交易日,/,年,250,X,年数,50,可供分析的数据值,6,000,000,000,000,令人惊讶的数据量NASDAQ 2975,呼唤突破性的技术,OLTP,交易业务,OLAP,分析系统,传统行式数据库,内存数据库,更多事务处理,列式数据库,更大量数据的复杂分析,随机的实时分析,呼唤突破性的技术OLTP 交易业务OLAP 分析系统传统行式,列式数据库是革命性的,传统行式数据库,c5,c4,c3,c2,c1,c9,c8,c7,c6,r1,r2,r3,r4,r5,列式数据库,c5,c4,c3,c2,c1,c9,c8,c7,c6,r1,r2,r3,r4,r5,数据按列存储,每一列单独存放,数据即是索引,只访问查询涉及的列,大量降低系统,IO,每一列由一个线索来处理,查询的并发处理,数据类型一致,数据特征相似,方便压缩,数据是按行存储的,没有索引的查询使用大量,I/O,建立索引和物化视图需要花费大量时间和资源,面对查询的需求,数据库必须被大量膨胀才能满足性能要求,列式数据库是革命性的传统行式数据库c5c4c3c2c1c9,使用列式数据库,多:,1 PB,股票交易数据,(6,万亿条股票报价,),快:,2850,亿行,/,天,(300,万行,/,秒,),杂:非结构化数据:,26 TB/,天,小:在,IQ,里压缩成,159 TB,便宜:低端存储,价格成倍下降,压缩比:,6.3,倍,相比行式数据库可能是六分之一的空间几十分之一的代价,使用列式数据库多:1 PB 股票交易数据 (6万亿条股票报价,列式数据库,vs.,行式数据库,行式数据库,列式数据库,比率,(,倍),5000,万条纪录带索引加载,7111.33”,265”,26.8,1,亿条纪录带索引加载,14463.8”,1161.44”,12.5,数据存储总占用空间,183.51(G),27.5(G),6.7,测试大表,count,、,sum,聚合操作,排序,3057.24”,734”,4.1,测试利用索引过滤纪录后对大基数字段,group by ,sum,操作,332.54”,133.3”,2.3,测试大表,count,、,sum,聚合操作,1050.37”,423.87”,2.5,测试利用索引过滤纪录后对小基数字段,group by ,sum,操作,13.65”,1.27”,13.8,子表操作,3057.24”,734”,4.1,列式数据库 vs. 行式数据库行式数据库列式数据库比率(倍),列式数据库,(Column Database),的潮流,Google,的,Bigtable, Yahoo,的解决方案基于,PostgreSQL,Sybase IQ:,第一个也是最成熟的列式数据库,1994/10, Sybase,收购了,Expressway Technologies,最初的名字是“,IQ Accelerator”,2009,年推出的,Sybase IQ15,版有多项创新科技,其他新兴创业公司,: Vertica (,创始人,Michael Stonebreaker, Ingres,和,PostgreSQL,的创始人,),,,SAND,,,Clearpace,列式数据库(Column Database)的潮流Googl,尼尔森媒体研究,:,5020,亿条数据,(2005,年全球第一名,) -,1,5,年的收视数据,美国税务局,(IRS):,全美国所有报税人,7,年报税记录,(,及原始文档,) (15,亿条记录,),花旗银行,:,Sybase IQ,保存,6,年所有交易记录,,HR,数据及文档,联邦快递,(,FedEx):,全球所有送递品的海关报关单,中国农业银行,:“,银行卡统计分析系统”获得世界,IT,精英组织(,COMPUTERWORLD HONORS PROGRAM ,计算机世界荣誉奖励计划,简称,CHP,)授予“,2008,年,Computerworld,荣誉桂冠”,铁道部:,客票系统分析,中国移动:,短信,/,彩信统计分析,报表系统,列式数据库的用户,尼尔森媒体研究: 5020亿条数据(2005年全球第一名),深挖掘,速决策,促转型,21,世纪是中国的世纪,也是信息科技的时代,信息科技的发展提供了突破的手段,企业的成功转型奠定,21,世纪的发展方向,深挖掘,速决策,促转型21世纪是中国的世纪,愿携手中国企业抓住机遇,愿携手中国企业抓住机遇,26,、要使整个人生都过得舒适、愉快,这是不可能的,因为人类必须具备一种能应付逆境的态度。,卢梭,27,、只有把抱怨环境的心情,化为上进的力量,才是成功的保证。,罗曼,罗兰,28,、知之者不如好之者,好之者不如乐之者。,孔子,29,、勇猛、大胆和坚定的决心能够抵得上武器的精良。,达,芬奇,30,、意志是一个强壮的盲人,倚靠在明眼的跛子肩上。,叔本华,谢谢!,22,26、要使整个人生都过得舒适、愉快,这是不可能的,因为人类必,
展开阅读全文