高校实验室大数据开发平台建设方案课件

高校实验室大数据开发平台建设方案高校实验室大数据开发平台建设方案高校实验室大数据开发平台建设方案1目 录背景平台功能职业教育目录2大数据和物联网教学解决方案采集监控存储数据采集标准化大数据分析可视化大数据和物联网教学解决方案采集监控存储数据采集标准化大数据分3传统物联网解决方案面临的挑战平台层网络层设备层业管理智能家居智能交通环境监测应用层矿业采掘工业制造职业教育城市石油化工绿色农能源管理传统物联网解决方案面临的挑战平台层网络层设备层业管理 智能家4大数据是行业数据应用深入的必然趋势物理世界端到端的数字化集成价值链网络下的横向集成CPS信息空间工业4.0核心网络化制造体系的纵向集成大数据是行业数据应用深入的必然趋势物理世界端到端的数字化集成5大数据是一个庞大的技术体系大数据平台大数据平台绿色农业健康医疗城市管理只能家居智能交通环境监测水利水务工业制造职业教育大数据是一个庞大的技术体系大数据平台绿色农业健康医疗城市管理6目 录背景平台功能职业教育目录7组态展示服务CVS过程数结构化据服务数据服PDS务STSS开放数据存储服务OTS产产品服品服务务构架构架组态展示 服务 CVS过程数结构化S产品服务构架8高校实验室大数据开发平台建设方案课件9高校实验室大数据开发平台建设方案课件10SS11列1列2列3列n列1列2列3列n12带时间戳的时序数据处理多协议的接入网络高并发性实时报警历史统计PDS压缩带时间戳的时序数据处理PDS压缩13OSS对象存储服务图纸图片文档图表音频压缩结构化半结构化非结构化对象存储OSS 对象存储服务图纸图片文档图表音频压缩结构化半结14第三方数据接入DTS大数据平台设备过程数据接入非结构化文件FTP接入关系数据库ETL接入文本文件半结构化数据接入图像识别非结构化数据接入结构数据文本结构化数据文件接入第三方数据接入DTS大数据平台设备非结构化文件关系数据库文本15TSS+DAS分布式环境下的大数据分析数据节点分布式大数据存储引擎HadoopHDFS/HbaseCPU=2MEM=200在线分布式计算引擎Spark离线分布式计算引擎Map/Reduce分布式资源管理&计算任务调度 YARN数据节点数据节点数据节点数据节点数据节点数据节点CPU=4MEM=400CPU=6MEM=1000CPU=2MEM=200计算分析引擎&工具R语言深度学习算法框架Caffe实时流数据处理引擎Storm实时数据流处理统计分析机器学习算法优化MATLAB计算分析领域&应用TSS+DAS分布式环境下的大数据分析数据节点分布式大数据16计算任务开发的新模式配置数学公式实现大数据计算计算任务开发的新模式17可视化服务CVS+WLS可视化纯BS方式展示，无插件拖拽方式搭建画面，0编程自适应分辨率，跨平台可视化服务CVS+W LS可视化纯BS方式展示，无插件拖拽18WLS-信息化页面组件服务W LS-信息化页面组件服务19WLS设计器W LS 设计器20CVS-组态展示服务CVS-组态展示服务21CVS-设计器CVS-设计器22CVS-组态展示服务可扩展方便发布对接多种数据源实时监控矢量图CVS-组态展示服务可扩展方便发布对接多种数据源实时监控矢23便捷的私有云部署和管理便捷的私有云部署和管理24目 录背景平台功能职业教育目录25大数据职业教育误区主流技术路线是什么？怎么选？技术构件众多，如何组合？大数据分析领域应该聚焦在哪里？职业教育中如何选择企业真正关心的大数据？大数据如何产生？大数据如何存储？大数据如何分析？大数据如何展示？大数据职业教育误区主流技术路线是什么？怎么选？26大数据技术学习路径数据采集技术传统工业协议数据采集、物联网网关数据采集、日志聚合数据采集、关系数据ETL采集数据存储&检索技术Hadoop生态体系、HBase、Sparc、kafka、zookeeper、MapReduce、Solr等主流大数据技术数据分析技术Hive、Impala、分布式关系数据库、数据仓库、R语言等技术数据展现技术Html5、SVG、信息化开发框架、javascript、图表&报表、GIS等技术大数据技术学习路径数据采集技术27大数据技术职业培训前景美国-大数据分析师平均每年薪酬高达17.5万美元 国内-顶尖互联网公司，大数据分析师的薪酬可能 要比同一个级别的其他职位高20%至30%具备实战技术的大数据从业人才，是21世纪最宝贵的 技术人才！大数据技术职业培训前景美国-大数据分析师平均每年薪酬28高校实验室大数据开发平台建设方案汇报完毕感谢聆听汇报完毕 感谢聆听29