智能终端发展趋势课件

单击此处编辑母版标题样式,单击此处编辑母版文本样式,第二级,第三级,第四级,第五级,智能终端发展趋势,智能终端发展现状与瓶颈,终端领域技术演进趋势,HiAI,助力端侧,AI,发展前行,中国手机市场的发展变迁,中国手机市场已经由高速增长期过渡到存量换机稳定期；,均价持续上升；消费者的选择倾向更好的体验。,手机终端消费品形态的变迁,2017,2007,Feature Phone,Smart Phone,Intelligent Phone,Connect people to people,Connect people to mobile Internet,1997,personal Assistant,终端产业发展的两条主线：交互模式,+,信息服务模式,苹果引导的智能手机第一波创新红利已结束,苹果的市场份额有持续下降趋势,苹果带来的此波浪潮已近尾声：,大屏触控、计算性能、操作流畅,三大主要特性已无明显优势,苹果逐渐走向以,iPhone,为平台，主打服务的盈利模式,下一个革命性的突破，仍在探索中，呈多样化的趋势,China,Jan16,Jan17,%,Change,Android,73.9,83.2,9.3,iOS,25.0,16.6,-8.4,Windows,0.9,0.1,-0.8,Other,0.3,0.1,-0.2,USA,Jan16,Jan17,%,Change,Android,58.2,56.4,-1.8,iOS,39.1,42,2.9,Windows,2.6,1.3,-1.3,Other,0.1,0.3,0.2,中美市场的相反选择,大屏触控,计算性能,持久顺畅,Unit,：亿美元,屏幕尺寸年度均值,CPU,核数年度均值,电池容量年度均值,手机内存年度均值,CPU,速度年度均值,机身厚度年度均值,机身存储年度均值,摄像头像素年度均值,机身重量年度均值,进入瓶,颈,进入瓶,颈,进入瓶,颈,进入瓶,颈,进入瓶,颈,进入瓶,颈,手机终端主要功能配置遭遇发展瓶颈,智能终端发展现状与瓶颈,终端领域技术演进趋势,HiAI,助力端侧,AI,发展前行,5-10,年内颠覆式创新将带来用户体验的再次跨越式升级,AI,现实世界,PC,屏幕,+,鼠标,/,键盘,交互革命,VR,/,AR,谷歌、,Facebook,、,Oculus,、,Valve,、,Meta,、,Magic Leap,、,Sony,、三星、,HTC,谷歌、亚马逊、苹果、微软、,IBM,、,Nuance,、,Affectiva,、,GridSpace,、,MetaMind,智慧革命,数字世界,SP,屏幕,+,手指,语音,视觉,更自然的交互,（触屏,+,智能语音,+,动作识别,+,计算视觉）,超越现实的显示,（,360,度、沉浸式、增强现实）,个性化的智能服务,（自动场景识别、高智能推荐、无时不刻服务）,终端用户体验将发生最基础性的改变,：,(1,）交互的革命；（,2,）信息服务的革命,人工智能,新一代终端用户体验,以美国为首的技术创新公司正在推动产业的人工智能与交互革命，每一场革命都有可能成为改写产业的“黑天鹅”,认知,感知,未来通信革命,Voice Interaction,Perception Interaction,Simple Avatar,Real person Avatar,Facebook,next G VR social and communication,感知通信,Perception,Communication,全息通信,Holographic,Communication,Realtime holoportation Capture,transport,playback,record,edit.,Smartphone with depth,camera,Digital expression emotion,Record,Playback,未来通信对,ICT,管,道的,影响：将带来,100M,到,G,比特的带宽需求（大带宽,、低时延）,体数据（,3D,可全球移动）,按照能够在,1m,的距离内达到视网膜分辨率的要求，在,2mx1mx1m,空间范围描述一个人的表面积计算，,一帧体数据图像将达到,1.2GByte,120fps,，达到,1.15Tbps,即便按照更高的,500 x,压缩能力，压缩后带宽依然达到了,2.3Gbps,平面数据（,2D,）,一帧,4K,超高清图像,24MByte,4K30fps,视频,11Gbps,采用,H.265,压缩后,20Mbps,球面数据（,2.5D,全景）,按照未来,16k,的极限分辨计算（,16kx8k,），,一帧球面图像将达到,384MByte,120fps,，达到,368Gbps,参考,H265,压缩能力在,250 x,，压缩后带宽,1.47Gbps,平面数据是现有视频系统的数据基础，是传统,H.264/265,解决的压缩问题,球面数据是现在,VR,视频应用的数据基础，是工业界的热点,体数据是未来,AR/VR,应用的数据基础，是学术界研究的热点，工业界也开始跟进,海量存储，超大带宽,（,M2M,）：,AR/VR,相比,2D,视频带来,3-4,倍存储需求，,5D,光场技术带来,4-6,倍数据，,HMD,头盔清晰度改进,为,8K,带来,4-5,倍数据，总计,40 x,100 x,的海量数据存储、传输和处理的需,求,Capture,Local storage processing encoding,Local ingression,Global VR CDN,Edge Cloud,Local access,Home storage,decoding and rendering,Home Networking,Device processing,Device Local Transmission,Display,40Gps,10Gps,1Gps,10 Gps,X Tbps,100 TFLOPS,10 TFLOPS,1 TFLOPS,100 TFLOPS,端到端的带宽需要,100Mbps,以上才能达到真实的临场感,AR/VR,对终端行业的影,响,AR/VR,将是继智能手机后，消费者领域最大的产业变,革,智能革命,计算智能 感知智能 认知智能,中期,(5,年,)AR/VR,将推动手机及,PC,升级换代，长期,(10,年,),将可能颠覆一切带屏设备,手机,/,平板,/PC/,电视等都可能被,AR,逐步替代，,引起芯片,/OS/,生态等革命式产业颠覆，引起行业巨头新一轮竞争,芯片架构之争,OS&,生态之争,显示产业颠覆,服务入口颠覆,高性能,高功耗,中性能,低功耗,PC/,生产力,Mobile/,信息获取,高性能,低功耗,AlwaysOn,光子光场镜片,生产,消费,娱乐,光纤投影,服务直达,高通,/,英伟达,/Intel,谷歌,/,微软,/,百度,三星,/,苹果,/MagicLeap,谷歌,/,微软,/FB/,百度,VR,：,感知世界,；,AR/MR,：,认知世界,+,沟通世界,+,情感连接,输入：触屏 ,语音,+,手势,+,视觉 交互,输出：,5”,屏 ,100”,屏 ,360,。,全浸入,人机交互革命,智能终端发展现状与瓶颈,终端领域技术演进趋势,HiAI,助力端侧,AI,发展前行,计算密集、复杂，计算需求巨大，实时性非常挑战,运行环境受限，功耗、内存、存储空间非常挑战,越来越多的应用都带,AI,，应用场景不确定,模型和算子变化快,前端训练平台,五花八门,13,端侧,AI,应用面临着巨大的挑战,17,HiAI Foundation,架构,Cloud,HUAWEI HiAI Service,Device,Chip,HUAWEI HiAI,Engine,HUAWEI HiAI,Foundation,Huawei HiAI Engine,模型（,MindSpore/TensorFlow/CoreML/Caffe/ONNX/PaddlePaddle,）,Apps,Robots,Automotive,Huawei HiAI Foundation,在线,推理,离线,推理,Runtime&HiHCS,（运行时和异构计算系统）,CPU,GPU,DSP,NPU,Device Driver,开发,工具链,工具链,完善的文档,丰富的,API,直观的,DEMO,HiAI Foundation,架构,隐私,成本,实时,HiAI,Foundation,带给开发者,&,用户的价值,实时多人姿势识别,成功案例,-,Prisma,普通,HiAI,使能,成功案例,-,抖音,23,HiAI Foundation,可以赋能极其丰富的端侧应用场景,24,关键技术一：专用指令集和计算库，高效执行神经网络算子,Convolution,Deconvolution,Pooling,Relu,Normalize,BatchNorm,FullConnection,Sigmoid,CPU=,标量,通用计算,逻辑控制,GPU=,矢量（,2D,）,图形图像处理计算与渲染,大规模并行计算,NPU=,张量（,=3D,）,专用,AI,指令集,更大规模并行计算,HiAI Foundation,关键技术,25,关键技术二：离线编译，轻量部署；层间融合，快速推理,Model,Conversion,Tools,Offline,Model,Build,Produce,HiAI,Foundation,关键技术,26,关键技术三：离线模型运行，,local ram,，高效节能,NPU,Local ram,Data Copy,L,oad,Offline,Model,HiAI,Foundation,关键技术,27,V2.0,V1.0,2005,张,4500,张,HiAI Foundation V2.0,性能大幅提升,28,实时分割,实时图像处理,对象识别,粗粒度,V2.0,图片,视频,粗略,精准,V1.0,检测、姿态、细节,能力,HiAI Foundation V2.0,解锁能力更强,V1.0,麒麟,970,框架与,API,算子兼容性,工具链,支持,90,个算子,Caffe/TensorFlow,Huawei,HiAI,API,V1.5,麒麟,970,支持,42,个算子,Caffe/TensorFlow,Android,NN,命令行工具,增加图形化工具,(IDE),增加轻量模型校验,&,转换工具,前后向兼容,增加,HiAI Foundation,版本与模型兼容性检测,增加模型在线编译,支持,147,个,算子,V2.0,麒麟,980,Caffe/TensorFlow,、,Android NN,模型并发运行,CPU/NPU,混合模型调度,更多功能的图形化工具,(IDE),更加精准的轻量模型校验,&,转换工具,INT,8,量化工具,混合模型分割工具,增加,INT,8,模型兼容性检测,增加,INT,8,量化模型,在线,编译,HiAI Foundation,版本迭代快,30,IDE,图形化,工具，在,IDE,开发环境中支持模型自动算子检查和转换,提供轻量化模型预分析工具，无需安装,IDE,也可对模型预分析和转换,HiAI Foundation V2.0,模型分析工具化，告别手工核查,31,自动添加资源,(libai_client.so,、模型文件等,),IDE,离线模型转换成功后：,自动,生成代码（,jni,、模型封装,）,离线模型,shape,信息可视化,自动统计模型管理接口耗时,HiAI Foundation V2.0,一键完成模型集成,有,朋,友 有,未来,