阿里云计算与大数据35

阿里云的云计算与大数据阿里云计算有限公司信息生产力：新基础设施、新要素、新结构互联网时代的变革互联网、云计算、大数据三位一体基础设施战略资源核心竞争力大用户大用户大数据大数据大系统大系统互联网互联网大数据大数据云计算云计算4云计算是基础设施泛互联网化进入DT时代45% VS 4%DT时代（运营数据）准DT时代（数据化运营）IT时代（数据挖掘） 人工智能+专家 小数据，有闭环无生态 以数据运营为核心 专家经验 死数据 人力推动运营 有智商的机器学习 活数据，有平台有生态 数据为核心云服务增长率：45% 传统 IT整长率：4%云计算与大数据全球趋势云计算与大数据支持“创新生态”应用软件系统软件数据创新“互联网产业”创新云生态云云计算带来了巨大的创业与创新机会企业互联网化咨询云服务提供商数据服务商云计算的基础设施改变20年“重硬轻软”的惯性；计算机软件云服务数据中国传统IT行业年5000亿美金的规模IT DT阿里云的愿景让计算成为中国的能力阿里云与阿里巴巴集团数字娱乐新业务淘宝天猫AAliexpress电子商务支付宝小贷保险基金互联网金融大数据平台聚划算高德友盟菜鸟物流物流医疗UC阿里云的技术层次（云计算 & 大数据）业务应用基础设施飞天分布式云操作系统联机事物处理(OLTP)联机分析处理(OLAP)大数据分析及处理内容管理搜索检索x86服务器 & Linux弹性计算服务SLB/ECS(分布式)关系数据库DRDS/RDS大数据ODPS/ADS开放存储OSS分布式文件系统分布协同服务任务调度安全管理远程过程调用资源管理集群部署集群监控网络设备机房环境云计算大数据产品/服务完善产品线完整产品体系弹性弹性计算计算数据库数据库与缓存与缓存存储存储与与CDN云盾云盾(安全安全)大规模计算大规模计算与分析与分析中间件与应用服务中间件与应用服务云服务器云服务器 ECS可弹性扩展、安全稳定、简单易用的计算服务 负载均衡负载均衡 SLB对多台云服务器进行流量分发的负载均衡服务 弹性伸缩服务弹性伸缩服务 ESS自动调整弹性计算资源的管理服务 专有网络专有网络 VPC轻松构建逻辑隔离的云上专有区域 云数据库云数据库 RDS完全兼容MySQL，SQLServer，PostgreSQL协议的关系型数据库服务 开放表服务开放表服务 OTSNoSQL数据库服务，提供海量结构化数据存储和实时访问 开放缓存服务开放缓存服务 OCS在线缓存服务，为热点数据访问提供高速响应 键值存储键值存储 KVStore兼容开源Redis协议的Key-Value类型在线存储服务 开放存储服务开放存储服务 OSS海量、安全和高可靠的云存储服务 开放归档服务开放归档服务 OAS适合于大数据的长久归档备份服务 内容分发网络内容分发网络 CDN跨运营商、跨地域全网覆盖的网络加速服务DDoS防护防护轻松应对百G流量攻击，提供专家服务安骑士安骑士云服务器入侵防护应用防火墙应用防火墙筑起服务器前的铜墙铁壁弱点分析弱点分析比黑客早一步发现弱点阿里绿网阿里绿网专注违规信息安全监测及管控渗透测试服务渗透测试服务专业性的入侵尝试，评估重大安全漏洞或隐患云监控云监控指标监控与报警服务开放数据处理服务开放数据处理服务 ODPS针对TB/PB级数据的分布式处理服务,彻底解决大数据存储与运算瓶颈开源大数据开源大数据软件服务软件服务(规划规划)Spark/Hadoop/分析数据库服务分析数据库服务 ADS海量数据实时高并发在线分析服务采云间采云间 DPC基于ODPS的DW/BI的工具解决方案云道云道 CDP稳定高效、弹性伸缩的数据同步平台批量计算服务批量计算服务适用于大规模并行批处理作业的分布式云服务企业级分布式应用服务企业级分布式应用服务 EDAS以应用为中心的中间件PaaS平台开放消息服务开放消息服务 ONS基于阿里开源消息中间件MetaQ的云消息产品分布式关系型数据库服务分布式关系型数据库服务 DRDS水平拆分/读写分离的在线分布式数据库服务 云引擎云引擎 ACE弹性、分布式的应用托管环境简单日志服务简单日志服务 SLS针对日志收集/存储/查询/分析的服务开放搜索服务开放搜索服务 Open Search结构化数据搜索托管服务多媒体转码服务多媒体转码服务 MTS为多媒体数据提供的转码计算服务性能测试服务性能测试服务 PTS性能云测试平台，帮您轻松完成系统性能评估【云计算】飞天云平台【大数据】大数据管理平台关系型数据库D/RDS分析型数据库ADS开放数据处理服务ODPS流数据计算GALAXY开放存储OSS开放结构化数据库OTS彩云间（数据开发）DPC计算网络存储安全物理环境数据组织数据分析/挖掘数据展现地理信息系统GIS飞天控制平台云服务器ECS云服务器ECS云服务器ECS云服务器ECS负载均衡SLB负载均衡SLB资源提供云盾政务大数据的搭建：必须是云计算与大数据的化学反应以阿里云现有架构为例云端安全框架云用户安全 云服务安全云运营安全数据库防火墙数据审计WEB应用防火墙WEB漏洞检测主机入侵防护双因素认证堡垒机安全防火墙DDoS攻击防护大数据安全分析集群数据库安全大规模计算安全安全开发解决方案弹性计算存储安全飞天异常协议检测Linux软件安全开发生命周期数据安全生命周期数据安全应用安全系统安全云操作系统安全网络安全物理安全安全：2014年双11来自全球的攻击统计双十一当天，云盾自动防御200多次DDoS攻击，单IP(阿里云)最大攻击流量超过100Gbps,0故障。自动化运维平台飞天管理前端飞天运维平台飞天升级、发布、变更工具包飞天配置管理飞天性能数据采集上云评估系统应用运维平台发布台变更台云产品发布、部署、变更工具包云资源生命周期管理集群管理工具物理设备/IP生命周期管理云资源库存管理云集群资源补给资源配置管理物理设备资源管理云应用拓扑信息管理网络信息管理软件配置基线管理数据分析平台飞天运营平台阿里监控网络监控全链路监控平台应用监控工单处理平台大盘用户故障管理中心故障采集宕机处理基于云计算的大数据可视化可视化大屏网络数据可视化，地理数据可视化，轨迹数据可视化等。能够支持千万级别数据点的实时2D/3D渲染，配备多套模板供您快速配置部署。丰富的视觉呈现电视、银幕墙、PC、移动端多终端的可视化输出，并且提供辅助的跨屏交互，如手机/IPAD与银幕墙之间的交互。多终端交互全面支持多款阿里云数据存储与数据库产品，且兼容常用MySQL数据库，以及CSV，TXT等常用文件格式。多数据源提供地理数据可视化所必需的常用地理数据服务，提供地理可视化一站式解决方案。地理数据服务阿里云的三种形态专有云专有域公共云计算服务客户群体政府、银行、大型企业政府、中小银行、企业互联网用户产品按客户需求可选输出云服务；可按需输出上云辅助工具；可按需输出阿里应用。按客户需求可选输出云服务；可按需输出上云辅助工具；阿里云全部云服务;上云工具市场多地域，多IDC支持多地域, 多IDC。支持多IDC。支持多地域, 多IDC。服务管理输出运营支撑系统（服务开通，基础帐号体系），不输出业务支撑系统（订单，计费，CRM等）提供云账号，基础计费，账单，和开放API。阿里云公网全套BOSS系统，包括开通，计费，支付，CRM，客服等。运维专线完全物理隔离，在客户IDC部署整套阿里云产品。保留运维管理专线，在客户IDC部署阿里云服务。阿里云自主运维管理运维体系融入式运维模式：客户负责一线运维（IDC，网络，硬件等），阿里云负责二线运维（云产品），SI负责应用运维。融入式运维模式：客户负责一线运维（IDC，网络，硬件等），阿里云负责二线运维（云产品）。阿里云自主运维商务体系采用软件许可证和云服务两种方式云服务云服务硬件要求客户自主采购硬件：云服务和硬件解耦，只提出5类硬件的兼容性要求。客户自主采购硬件：云服务和硬件解耦，只提出5类硬件的兼容性要求。阿里云采购硬件服务团队上云服务、培训服务、运维服务和售后服务团队。专家服务团队上云服务、培训服务、运维服务和售后服务团队。培训服务和售后服务团队。阿里云三种模式的区别专有云专有域公有云投资规模较大：需要投资云中控、域中控、云服务节点中等：需要投资域中控、云服务节点很小：专线相关投入即可数据安全性强：管控和服务节点均和其他云完全隔离有微弱风险：管控节点共平台，通过账号和权限进行隔离，服务节点物理隔离有微弱风险：多租户公有云平台，通过账号和权限进行隔离，等保三业务独立性强：和其他云互不影响，独立管控中：和其他域共享一个云中控，云中控的可用性对域的可用性有影响中：和其他区共享一个域中控，域中控的可用性对去的可用性有影响运维难度高：独立运维，需要客户具备独立运维阿里云的能力中：客户可借助该域所述的云运维能力来辅助运维低：客户只需要管理自己的云资源，而不用运维底层的物理节点管理范围大：拥有该朵云下的全局管理能力中：拥有该域下的管理能力，同时可以被云管控统一管理小：拥有该该账号内的云资源的管理能力，按需启用和释放。 商务体系和结算方式可采用license或者年服务费的计费模式一般采用年服务费的计费模式公有云账户充值购买应用上云流程总览系统评估和需求分析上云方案设计上云迁移系统试运行和转生产系统运行系统技术分析系统功能分析数据库分析应用层上云方案数据层上云方案计划排期应用改造数据库迁移/改造迭代验证系统验证性能验证用户使用与反馈问题处理与优化云资源运维管理系统运维保障系统验收老系统下线客户ISV阿里云应用上云路径应用系统直接上云改造上云低性能要求高性能要求OLTP类型OLAP类型内容管理类型大数据应用类型通用应用关键应用小规模系统大规模实时分析海量数据离线分析高并发实时查询RDSRDS+OCSRDS 读写分离DRDSRDSADSOSSODPSOTSIOPSLatency复杂度重要度安全性迁移周期性能要求扩展性要求应用类型数据规模性能数据规模实时性数据类型使用场景文件类型高IOPS低Latency低IOPS高Latency规模1TIOPS10000规模10000规模10000规模1TIOPS10000规模100TLatency100T高并发查询ECS SSDECS （云磁盘）云上贵州促进区域经济产业升级社会治理产业升级云平台创新网络大数据政务统一平台：系统全部迁移上云，共享基础设施，加速政务系统建设，增强政务业务弹性，提升灾备能力，保障运营安全，节省政府基础资源投入，聚焦政务产业应用创新。大众协同创新网络：营造大数据全民创新网络、大数据产业生态系统，在云平台上开放脱敏后的大数据资源，提供领先的数据分析工具，通过大数据科技大赛等全民参与形式引导大众创业、万众创新，扶持大数据创新企业、创新团队、创新个人，数据驱动传统产业升级，助力区域经济转型腾飞。全省大数据聚合：统一云平台上便于数据全局汇聚分析、标准方式交换交易，跨厅局、跨地州、跨行业、跨机构的数据关联分析、全局挖掘、危机预判、应急指挥，用高效机制与领先技术掘金政府大数据、企业大数据、社会大数据。政务超市喜闻乐见的行政审批/便民服务大数据 社保查询企业服务交通车辆医疗教育政务查询水电煤 云计算非税平台支付信用支付宝城市服务技术支撑支付能力流量入口服务能力政府淘宝电子政务微博共同搭建智慧城市，为用户提供未来生活数据治理1. 统一政务服务平台：统一服务、技术、政府UI形象标志2. 二端接入：无线端、PC端同时接入3. 三个入口：淘宝、支付宝、微博三个入口触达用户 城市服务已覆盖7市1省：杭州、上海、广州、深圳、南昌、宁波、厦门、山西省，其它重点城市陆续接入中方案简介通过气象大数据进行雾霾重灾区和雾霾升级地域圈人，结合DMP雾霾关注人群圈人，进行除雾霾场景的精准投放。气象数据雾霾指数变化雾霾重灾区人群人群定向精准投放模型介绍利用御膳房气象大数据，通过能见度、PM2.5、风力指数的变化预测不同地域雾霾变化情况，预测雾霾指数变化。针对雾霾环境变化和雾霾重灾区人群进行定向精准投放。雾霾关注人群方案：基于御膳房气象大数据进行人群精准投放国家气象局政府数据开放先行示范l采购：2000亿电商平台社会化运营l客户运营：基于大数据的技术与营销方法，精准服务8000万加油卡客户，提升客户体验l 生产：探索生产勘探环节工业4.0模式商品中心搜索中心。石化共享平台石化业务应用电子商务销售销售生产生产 物流物流勘探勘探支付中心支付中心会员中心会员中心物流中心物流中心云平台阿里云ODPS石化大数据石化大数据中石化驱动互联网垂直行业的全产业链创新26中石化“易派客”系统架构图基础云服务服务开放易派客WEB主站点中石化其他系统会员中心商品中心交易中心评价中心搜索中心支付中心DRDSOpenSearchEDASOCSONSOSS 石化CRMERP招投标平台 外部接口服务外部接口第三方应用 阿里巴巴提供基础云服务中石化基于基础云服务建设共享服务中心共享服务城市交通体检报告交通预测&预警大数据治理决策权威交通信息拥堵成因&规律分析数据开放接口交通大数据云各类院校研究机构城市规划交管部门交通电台合作企业摄像头流量线圈红绿灯ETC公共交通出租车数据众包数据云狗两客一危交通事件高德交通云互联网+社会化大数据=一路畅通高德交通信息公共服务平台Face+ 激发创新，帮助小企业做大企业才能做的事魔漫相机WiFi伴侣万年历号码百事通穿衣助手5+爱考拉出门问问车托帮点点送餐 未来，站在收银台前，仅靠“刷脸”就可以完成银行卡支付；站在家门口，用摄像头扫描一下就可以自动打开门锁.这些在科幻电影中出现的场景，都将一一实现。世界最大的人脸识别云平台 (使用次数20亿次，训练数据库500万张图片)人脸检测人脸检测人脸关键点人脸关键点人脸识别人脸识别FDDB评测世界第一300-W评测世界第一LFW评测世界第一政务云：数据浙江【效果】 集中：数十个系统上云：交通，物价，民政，旅游，环保，房管，数据集中，为大数据应用打下基础 高效：有效降低建设和运营成本，减少重复建设 灵活：应用程序和基础设施部署和管理的灵活性 安全：统一安全保障与按需安全部署相结合移动终端传统终端桌面终端其他终端l12306 75%的余票系统查询业务15年初切换至云上，资源可根据高峰期业务量的增长按需及时扩充。在阿里云上部署数几百个ECS（有Web服务器，应用服务器和余票查询服务器集群）分流余票查询75%的流量，因为余票查询流量占据12306整体流量的90%。春运高峰时阿里云SLB流量达到5Gb/s。l2015年12306日峰值PV值是2014年的2.3倍, 达到近300亿。售票量增加了12%，达到564万张。出票处理能力峰值达到每秒千1032张。余票查询占余票查询占90%业务访问量业务访问量阿里云承接阿里云承接75%余票查询能力余票查询能力12306弹性计算助力政府民生服务31中国药品电子监管网 收集了中国境内每盒药从生产、批发、零售环节的所有流通信息阿里云计算服务帮助客户去掉了8年以来，由于后台系统能力不足制约其业务发展的瓶颈10亿每天监管码被读写数亿次1333倍关键业务处理的平均延时从60分钟降低到2.7秒，效率提升了1333倍1500亿以超过1亿/天的数量新增 媒体报道： 四川省眉山中铁医院12月23日曝出有一新生儿接种乙肝疫苗后死亡，家属怀疑死亡与接种有关。四川省眉山市东坡区卫生局通报称，该新生儿为12月21日17时在眉山中铁医院剖宫生产。22日16时许，新生儿在医院接种了乙肝疫苗；15个小时左右，家属报告发现其面色青紫，后经抢救无效，最终死亡。据了解，与之前几例死亡婴儿接受深圳康泰公司生产的乙肝疫苗不同的是，眉山出事婴儿接种的是北京天坛生物制品股份有限公司生产的重组乙型肝炎疫苗（酿酒酵母），国药准字S1098007；生产批号为201105069-2。10小时，报告递到总理办公桌上国家食品药品监管网大计算提高政府管理效能城市交通体检报告交通预测&预警大数据治理决策权威交通信息拥堵成因&规律分析数据开放接口交通大数据云各类院校研究机构城市规划交管部门交通电台合作企业摄像头流量线圈红绿灯ETC公共交通出租车数据众包数据云狗两客一危交通事件高德交通信息公共服务平台2015年4月，高德公司联合北京、广州、深圳、天津、沈阳、大连、无锡、青岛等8个城市的政府交通管理部门，以及各地广播交通台等权威媒体机构，共同推出“高德交通信息公共服务平台”。数据共享，实时治堵（交通治理）消费结构与趋势研究产业升级研究宏观研究主题农村电商研究微观业务数据金融社交地理信息1688B2B跨境商品移动物流买家卖家访问区域经济研究小企业与就业研究理论+模型海量业务数据 清洗/整合/重构，形成可供研究的基础数据 具有经济学意义的数据模型“政务大数据”的实践：经济云图，数据技术辅助宏观决策（经济治理）自主可控核心产品全部自主研发拥有全部软件著作权规模效应三十多万台服务器提供稳定而优质服务大数据能力国内唯一的自研大数据平台，数百PB数据处理能力 十年攻防满足技术，管理，运维多方面安全需求历经验证自主可控的技术，经过大规模客户案例的验证阿里云成为支撑互联网变革的基础设施谢谢 谢！谢！