阿里云计算与大数据课件

标题文本,0,阿里云的,云计算与大数据,阿里云计算有限公司,阿里云的云计算与大数据阿里云计算有限公司,1,信息,生产力：新基础设施、新要素、新结构,信息生产力：新基础设施、新要素、新结构,2,互联网时代的变革,互联网,、,云计算,、,大数据三,位一体,基础设施,战略资源,核心竞争力,大用户,大数据,大系统,互联网,大数据,云计算,互联网时代的变革互联网、云计算、大数据三位一体基础设施战略资,3,4,云计算是基础设施,泛互联网化,进入DT时代,45%,VS,4%,DT时代（运营数据）,准DT时代（数据化运营）,IT时代（数据挖掘）,人工智能+专家,小数据，有闭环无生态,以数据运营为核心,专家经验,死数据,人力推动运营,有智商的机器学习,活数据，有平台有生态,数据为核心,云服务,增长率,：,45,%,传统 IT,整长率,：4%,云计算与大数据全球趋势,4云计算是基础设施45% VS 4%DT时代（运营数据）准D,云计算与大数据支持“创新生态”,应用,软件,系统,软件,数据创新,“互联网,产业”创,新,云,生态,云,云计算带来了,巨大的创业与创新机会,企业互联网化咨询,云服务提供商,数据服务商,云计算的基础设施,改变20年“重硬轻软”的惯性；计算机软件云服务数据,中国传统,IT,行业年,5000,亿美金的规模,云计算与大数据支持“创新生态”系统数据创新“互联网产业”创,5,IT, DT,IT DT,6,阿里云的愿景,让计算成为中国的能力,阿里云的愿景让计算成为中国的能力,7,阿里云与阿里巴巴集团,数字娱乐,新业务,淘宝,天猫,A,Aliexpress,电子商务,支付宝,小贷,保险,基金,互联网金融,大数据平台,聚划算,高德,友盟,菜鸟物流,物流,医疗,UC,阿里云与阿里巴巴集团数字娱乐新业务淘宝天猫Alibaba.c,8,阿里云的,技术层次（云计算,&,大数据）,业务应用,基础,设施,飞天分布式,云操作系统,联机事物处理,(,OLTP,),联机分析处理,(,OLAP,),大数据,分析及处理,内容管理,搜索,检索,x8,6,服务器,& Linux,弹性计算服务SLB/ECS,(,分布式,),关系,数据库DRDS/RDS,大数据ODPS/ADS,开放,存储,OSS,分布式文件系统,分布协同服务,任务调度,安全管理,远程过程调用,资源管理,集,群,部,署,集,群,监,控,网络设备,机房环境,云计算,大数据,产品,/,服务,阿里云的技术层次（云计算 & 大数据）业务应用基础飞天分布式,9,完善产品线,完善产品线,10,完整产品体系,弹性,计算,数据库,与缓存,存储,与,CDN,云盾,(,安全,),大规模计算,与分析,中间件与应用服务,云服务器,ECS,可弹性扩展、安全稳定、简单易用的计算服务,负载均衡,SLB,对多台云服务器进行流量分发的负载均衡服务,弹性伸缩服务,ESS,自动调整弹性计算资源的管理服务,专有网络,VPC,轻松构建逻辑隔离的云上专有区域,云数据库,RDS,完全兼容,MySQL,，,SQLServer,，,PostgreSQL,协议的关系型数据库服务,开放表服务,OTS,NoSQL,数据库服务，提供海量结构化数据存储和实时访问,开放缓存服务,OCS,在线缓存服务，为热点数据访问提供高速响应,键值存储,KVStore,兼容开源,Redis,协议的,Key-Value,类型在线存储服务,开放存储服务,OSS,海量、安全和高可靠的云存储服务,开放归档服务,OAS,适合于大数据的长久归档备份服务,内容分发网络,CDN,跨运营商、跨地域全网覆盖的网络加速服务,DDoS,防护,轻松应对百,G,流量攻击，提供专家服务,安骑士,云服务器入侵防护,应用防火墙,筑起服务器前的铜墙铁壁,弱点分析,比黑客早一步发现弱点,阿里绿网,专注违规信息安全监测及管控,渗透测试服务,专业性的入侵尝试，评估重大安全漏洞或隐患,云监控,指标监控与报警服务,开放数据处理服务,ODPS,针对,TB/PB,级数据的分布式处理服务,彻底解决大数据存储与运算瓶颈,开源大数据,软件服务,(,规划,),Spark/Hadoop/,分析数据库服务,ADS,海量数据实时高并发在线分析服务,采云间,DPC,基于,ODPS,的,DW/BI,的工具解决方案,云道,CDP,稳定高效、弹性伸缩的数据同步平台,批量计算服务,适用于大规模并行批处理作业的分布式云服务,企业级分布式应用服务,EDAS,以应用为中心的中间件,PaaS,平台,开放消息服务,ONS,基于阿里开源消息中间件,MetaQ,的云消息产品,分布式关系型数据库服务,DRDS,水平拆分,/,读写分离的在线分布式数据库服务,云引擎,ACE,弹性、分布式的应用托管环境,简单日志服务,SLS,针对日志收集,/,存储,/,查询,/,分析的服务,开放搜索服务,Open Search,结构化数据搜索托管服务,多媒体转码服务,MTS,为多媒体数据提供的转码计算服务,性能测试服务,PTS,性能云测试平台，帮您轻松完成系统性能评估,完整产品体系弹性数据库存储云盾大规模计算中间件与应用服务云服,11,阿里云计算与大数据课件,12,【云计算,】,飞天云平台,【,大数据,】,大数据管理平台,关系型数据库,D/RDS,分析型数据库,ADS,开放数据处理服务,ODPS,流数据计算,GALAXY,开放存储,OSS,开放结构化数据库,OTS,彩云间,（数据开发）,DPC,计算,网络,存储,安全,物理环境,数据组织,数据分析,/,挖掘,数据展现,地理信息系统,GIS,飞天控制平台,云服务器,ECS,云服务器,ECS,云服务器,ECS,云服务器,ECS,负载均衡,SLB,负载均衡,SLB,资源提供,云盾,政务大数据的搭建：必须是云计算与大数据的化学反应,以阿里云现有架构为例,【云计算】【大数据】关系型数据库分析型数据库开放数据处理服务,13,云端安全框架,云用户安全 云服务安全,云运营安全,数据库防火墙,数据审计,WEB应用防火墙,WEB漏洞检测,主机入侵防护,双因素认证,堡垒机,安全防火墙,DD,o,S攻击防护,大数据安全分析集群,数据库安全,大规模计算安全,安全开发解决方案,弹性计算,存储安全,飞天,异常协议检测,Linux,软件安全开发生命周期,数据安全生命周期,数据安全,应用安全,系统安全,云,操作系统安全,网络安全,物理安全,云端安全框架云用户安全,14,安全：,2014,年双,11,来自全球的攻击统计,双十,一当天，云,盾自动防御,200,多次,DDoS,攻击，单,IP(,阿里云,),最大攻击流量超过,100Gbps,0,故障。,安全：2014年双11来自全球的攻击统计双十一当天，云盾自动,15,自动化,运维平台,飞天管理前端,飞天运维平台,飞天升级、发布、变更工具包,飞天配置管理,飞天性能数据采集,上云评估系统,应用运维平台,发布台,变更台,云产品发布、部署、变更工具包,云资源生命周期管理,集群管理工具,物理设备/IP生命周期管理,云资源库存管理云集群资源补给,资源配置管理,物理设备资源管理,云应用拓扑信息管理,网络信息管理,软件配置基线管理,数据分析平台,飞天,运营,平台,阿里监控,网络监控,全链路监控,平台应用监控,工单处理平台,大盘,用户故障管理中心,故障,采集宕机处理,自动化运维平台飞天管理前端飞天运维平台飞天升级、发布、变更工,16,基于云计算的大数据可视化,可视化大屏,网络数据可视化，地理数据可视化，轨迹数据可视化等。能够支持千万级别数据点的实时,2D/3D,渲染，配备多套模板供您快速配置部署。,丰富的视觉呈现,电视、银幕墙、,PC,、移动端多终端的可视化输出，并且提供辅助的跨屏交互，如手机,/IPAD,与银幕墙之间的交互。,多终端交互,全面支持多款阿里云数据存储与数据库产品，且兼容常用,MySQL,数据库，以及,CSV,，,TXT,等常用文件格式。,多数据源,提供地理数据可视化所必需的常用地理数据服务，提供地理可视化一站式解决方案。,地理数据服务,基于云计算的大数据可视化可视化大屏网络数据可视化，地理数,17,阿里云的三种形态,专有云,专有域,公共云计算服务,客户群体,政府、银行、大型企业,政府、中小银行、企业,互联网用户,产品,按客户需求可选输出云服务；,可按需输出上云辅助工具；,可按需输出阿里应用。,按客户需求可选输出云服务；,可按需输出上云辅助工具；,阿里云全部云服务,;,上云工具市场,多地域，多,IDC,支持多地域,多,IDC,。,支持多,IDC,。,支持多地域,多,IDC,。,服务管理,输出运营支撑系统（服务开通，基础帐号体系），不输出业务支撑系统（订单，计费，,CRM,等）,提供云账号，基础计费，账单，和开放,API,。,阿里云公网全套,BOSS,系统，包括开通，计费，支付，,CRM,，客服等。,运维专线,完全物理隔离，在客户,IDC,部署整套阿里云产品。,保留运维管理专线，在客户,IDC,部署阿里云服务。,阿里云自主运维管理,运维体系,融入式运维模式：客户负责一线运维（,IDC,，网络，硬件等），阿里云负责二线运维（云产品），,SI,负责应用运维。,融入式运维模式：客户负责一线运维（,IDC,，网络，硬件等），阿里云负责二线运维（云产品）。,阿里云自主运维,商务体系,采用软件许可证和云服务两种方式,云服务,云服务,硬件要求,客户自主采购硬件：云服务和硬件解耦，只提出,5,类硬件的兼容性要求。,客户自主采购硬件：云服务和硬件解耦，只提出,5,类硬件的兼容性要求。,阿里云采购硬件,服务团队,上云服务、培训服务、运维服务和售后服务团队。专家服务团队,上云服务、培训服务、运维服务和售后服务团队。,培训服务和售后服务团队。,阿里云的三种形态专有云专有域公共云计算服务客户群体政府、银行,18,阿里云三种模式的区别,专有云,专有域,公有云,投资规模,较大：需要投资云中控、域中控、云服务节点,中等：需要投资域中控、云服务节点,很小：专线相关投入即可,数据安全性,强：管控和服务节点均和其他云完全隔离,有微弱风险：管控节点共平台，通过账号和权限进行隔离，服务节点物理隔离,有微弱风险：多租户公有云平台，通过账号和权限进行隔离，等保三,业务独立性,强：和其他云互不影响，独立管控,中：和其他域共享一个云中控，云中控的可用性对域的可用性有影响,中：和其他区共享一个域中控，域中控的可用性对去的可用性有影响,运维难度,高：独立运维，需要客户具备独立运维阿里云的能力,中：客户可借助该域所述的云运维能力来辅助运维,低：客户只需要管理自己的云资源，而不用运维底层的物理节点,管理范围,大：拥有该朵云下的全局管理能力,中：拥有该域下的管理能力，同时可以被云管控统一管理,小：拥有该该账号内的云资源的管理能力，按需启用和释放。,商务体系和结算方式,可采用,license,或者年服务费的计费模式,一般采用年服务费的计费模式,公有云账户充值购买,阿里云三种模式的区别专有云专有域公有云投资规模较大：需要投资,19,应用上云流程总览,系统评估和需求分析,上云方案设计,上云迁移,系统试运行和转生产,系统运行,系统技术分析,系统功能分析,数据库分析,应用层上云方案,数据层上云方案,计划排期,应用改造,数据库迁移,/,改造,迭代验证,系统验证,性能验证,用户使用与反馈,问题处理与优化,云资源运维管理,系统运维保障,系统验收,老系统下线,客户,ISV,阿里云,应用上云流程总览系统评估和需求分析上云方案设计上云迁移系统试,20,应用上云路径,应用系统,直接上云,改造上云,低性能要求,高性能要求,OLTP,类型,OLAP,类型,内容管理类型,大数据应用类型,通用应用,关键应用,小规模系统,大规模实时分析,海量数据离线分析,高并发实时查询,RDS,RDS+OCS,RDS,读写分离,DRDS,RDS,ADS,OSS,ODPS,OTS,IOPS,Latency,复杂度,重要度,安全性,迁移周期,性能要求,扩展性要求,应用类型,数据规模,性能,数据规模,实时性,数据类型,使用场景,文件类型,高,IOPS,低,Latency,低,IOPS,高,Latency,规模,1T,IOPS10000,规模,10000,规模,10000,规模,1T,IOPS10000,规模,100T,Latency100T,高并发查询,ECS,SSD,ECS,（云磁盘）,应用上云路径应用系统直接上云改造上云低性能要求高性能要求OL,21,云上,贵州,促进区域经济产业升级,社会治理,产业升级,云平台,创新网络,大数据,政务统一平台：,系统全部迁移上云，共享基础设施，加速政务系统建设，增强政务业务弹性，提升灾备能力，保障运营安全，节省政府基础资源投入，聚焦政务产业应用创新。,大众协同创新网络：,营造大数据全民创新网络、大数据产业生态系统，在云平台上开放脱敏后的大数据资源，提供领先的数据分析工具，通过大数据科技大赛等全民参与形式引导大众创业、万众创新，扶持大数据创新企业、创新团队、创新个人，数据驱动传统产业升级，助力区域经济转型腾飞。,全省大数据聚合：,统一云平台上便于数据全局汇聚分析、标准方式交换交易，跨厅局、跨地州、跨行业、跨机构的数据关联分析、全局挖掘、危机预判、应急指挥，用高效机制与领先技术掘金政府大数据、企业大数据、社会大数据。,云上贵州促进区域经济产业升级社会治理云平台创新网络大数据,政务超市喜闻乐见的,行政,审批,/,便民服务,大数据, ,社保,查询,企业,服务,交通,车辆,医疗,教育,政务,查询,水电煤, ,云计算,非税平台,支付,信用,支付宝城市服务,技术支撑,支付能力,流量入口,服务能力,政,府,淘宝电子政务,微博,共同搭建智慧城市，为用户提供,未来,生活,数据治理,统一,政务服务,平台,：统一服务、技术、政府UI形象标志,二端接入,：无线端、PC端同时接入,三个入口,：淘宝、支付宝、微博三个入口触达用户,城市,服务已覆盖7市1,省：杭州,、上海、广州、深圳、南昌、宁波、厦门、,山西省，其它,重点城市陆续接入中,政务超市喜闻乐见的行政审批/便民服务大数据 社保交通,方案简介,通过气象大数据进行雾霾重灾区和雾霾升级,地域圈人,，结合,DMP,雾霾关注,人群圈人,，进行除雾霾场景的精准投放。,气象数据,雾霾指数变化,雾霾重灾区人群,人群定向精准投放,模型介绍,利用,御膳房气象大数据,，通过能见度、,PM2.5,、风力指数的变化预测不同地域雾霾变化情况，,预测雾霾指数变化,。,针对雾霾环境变化和雾霾重灾区人群进行定向精准投放。,雾霾关注人群,方案：基于御膳房气象大数据进行人群精准投放,国家气象局,政府数据开放先行示范,方案简介气象数据雾霾指数变化人群定向精准投放模型介绍雾霾关注,24,采购：,2000,亿电商平台社会化运营,客户运营：基于大数据的技术与营销方法，精准服务,8000,万加油卡客户，提升客户体验,生产：探索生产勘探环节工业,4.0,模式,商品中心,搜索中心,。,石化共享平台,石化业务,应用,电子商务,销售,生产,物流,勘探,支付中心,会员中心,物流中心,云平台,阿里云,ODPS,石化大数据,中石化驱动互联网垂直行业的全产业链创新,商品中心搜索中心。石化业务电子商务销售生产 物流勘探支付,25,26,中石化“易派客”系统架构图,基础云服务,服务开放,易派客,WEB,主站点,中石化其他,系统,会员中心,商品中心,交易中心,评价中心,搜索中心,支付中心,DRDS,OpenSearch,EDAS,OCS,ONS,OSS, ,石化,CRM,ERP,招投标,平台, ,外部接口服务,外部接口,第三方应用, ,阿里巴巴提供基础云服务,中石化基于基础云服务建设共享服务中心,共享服务,26中石化“易派客”系统架构图基础云服务服务开放易派客WEB,城市交通体检报告,交通预测,&,预警,大数据治理决策,权威交通信息,拥堵成因,&,规律分析,数据开放接口,交通大数据云,各类院校,研究机构,城市规划,交管部门,交通电台,合作企业,摄像头,流量线圈,红绿灯,ETC,公共交通,出租车数据,众包数据,云狗,两客一危,交通事件,高德交通云,互联网,+,社会化大数据,=,一路,畅通,高德交通信息,公共服务平台,城市交通体检报告交通预测&预警大数据治理决策权威交通信息拥堵,Face+,激发创新，帮,助小企业做大企业才能做的事,魔漫相机,WiFi伴侣,万年历,号码百事通,穿衣助手,5+,爱考拉,出门问问,车托帮,点点送餐,未来，站在收银,台前，仅靠“刷脸”就可以完成银行卡支付；站在家门口，用摄像头扫描一下就可以自动打开门锁,.,这些在科幻电影中出现的场景,，都将一一实现,。,世界,最大的人脸识别云平台,(,使用次数,20,亿,次，训练数据库,500,万,张图片,),人脸检测,人脸关键点,人脸识别,FDDB,评测世界,第一,300-W,评测世界,第一,LFW,评测世界,第一,Face+ 激发创新，帮助小企业做大企业才能做的事魔漫,28,政务云：数据浙江,【,效果,】,集中：,数十个系统上云：交通，物价，民政，旅游，环保，房管，数据集中，为大数据应用打下基础,高效：,有效降低建设和运营成本，减少重复建设,灵活：,应用程序和基础设施部署和管理的灵活性,安全：,统一安全保障与按需安全部署相结合,移动终端,传统终端,桌面终端,其他终端,政务云：数据浙江【效果】移动终端传统终端桌面终端其他终端,12306,7,5%,的余票,系统查询业务,15,年初切换至云上,，,资源,可根据高峰期业务量的增长按需及时扩充。在阿里云上部署数几百个,ECS,（有,Web,服务器，应用服务器和余票查询服务器集群）分流余票查询,75%,的流量，因为余票查询流量占据,12306,整体流量的,90%,。春运高峰时阿里云,SLB,流量达到,5Gb/s,。,2015,年1,2306,日峰值,PV,值是,2014,年的,2.3,倍,达到近,300,亿。,售票量增加了,12%,，达到,564,万张。,出票处理能力,峰值达到,每秒,千,1032,张,。,余票查询占,90%,业务访问量,阿里云承接,75%,余票查询能力,12306,弹性计算助力政府民生服务,12306 75%的余票系统查询业务15年初切换至云上，资,30,31,中国药品电子监管网 ,收集了中国境内每盒药从生产、批发、零售环节的所有流通信息,阿里云计算服务帮助客户去掉了8年以来，由于后台系统能力不足制约其业务发展的瓶颈,10,亿,每天监管码被读写数亿次,1333,倍,关键业务处理的平均延时从60分钟降低到2.7秒，效率提升了1333倍,1,5,00,亿,以超过1亿/天的数量新增,媒体报道：,四川省眉山中铁医院,12,月,23,日曝出有一新生儿接种乙肝疫苗后死亡，家属怀疑死亡与接种有关。,四川省眉山市东坡区卫生局通报称，该新生儿为,12,月,21,日,17,时在眉山中铁医院剖宫生产。,22,日,16,时许，新生儿在医院接种了乙肝疫苗；,15,个小时左右，家属报告发现其面色青紫，后经抢救无效，最终死亡。,据了解，与之前几例死亡婴儿接受深圳康泰公司生产的乙肝疫苗不同的是，眉山出事婴儿接种的是北京天坛生物制品股份有限公司生产的重组乙型肝炎疫苗（酿酒酵母），国药准字,S1098007,；生产批号为,201105069-2,。,1,0,小时，报告递到总理办公桌上,国家食品药品监管网,大计算提高政府管理效能,31中国药品电子监管网 10亿13,城市交通体检报告,交通预测,&,预警,大数据治理决策,权威交通信息,拥堵成因,&,规律分析,数据开放接口,交通大数据云,各类院校,研究机构,城市规划,交管部门,交通电台,合作企业,摄像头,流量线圈,红绿灯,ETC,公共交通,出租车数据,众包数据,云狗,两客一危,交通事件,高德交通信息,公共服务平台,2015,年,4,月，高德公司联合北京、广州、深圳、天津、沈阳、大连、无锡、青岛等,8,个城市的政府交通管理部门，以及各地广播交通台等权威媒体机构，共同推出,“,高德交通信息公共服务平台,”,。,数据共享，实时治堵（交通治理）,城市交通体检报告交通预测&预警大数据治理决策权威交通信息拥堵,消费结构与趋势研究,产业升级研究,宏观研究主题,农村电商研究,微观业务数据,金融,社交,地理信息,1688,B2B,跨境,商品,移动,物流,买家,卖家,访问,区域经济研究,小企业与就业研究,理论,+,模型,海量业务数据,清洗,/,整合,/,重构，形成可供研究的基础数据,具有经济学意义的数据模型,“政务大数据”的实践：经济云图，数据技术辅助宏观决策（经济治理）,消费结构与趋势研究产业升级研究宏观研究主题农村电商研究微观业,自主可控,核心产,品全部自主研发拥有全部软件著作权,规模效应,三十多万台服务器提供稳定而优质服务,大数据能力,国内唯一的自研大数据,平台，,数百,PB,数据处理能力,十年攻防,满足技术，管理，运维多方面安全,需求,历经验证,自主可控的技术，经过,大规模客户案例,的,验证,阿里云成为支撑互联网变革的基础设施,自主可控规模效应大数据能力 十年攻防阿里云成为支撑互联网变,34,谢,谢！,谢 谢！,35,