2020年大数据开发工程师岗位的工作职责说明

2020年大数据开发工程师岗位的工作职责说明 大数据开发工程师岗位的工作职责说明1职责：1、负责基于Hadoop框架的海量数据平台建设2、参与大数据平台的数据架构设计，完成从业务模型到数据模型的设计3、基于海量数据的数据仓库，为业务搭建通用的查询和分析解决方案4、管理并优化存储计算资源利用效率、监控并维护例行ETL任务5、梳理整体业务指标，可视化报表开发应聘要求：1、计算机本科及以上学历，5年以上大型数据仓库架构设计、模型设计、ETL设计相关经验2、熟悉Hadoop生态，熟悉Oracle、SQL数据库中的一个或多个，有一定的性能优化经验3、熟练掌握Java语言，MapReduce编程，Python/Shell等脚本语言，Linu*操作系统4、具备大数据云平台、计算存储平台、可视化开发平台经验5、业务理解力强，对数据敏感，有互联网行业产品数据分析经验者优先大数据开发工程师岗位的工作职责说明2职责：1、根据工作安排高效、高质地完成代码编写，确保符合规范的前端代码规范;2、负责公司现有项目和新项目的前端修改调试和开发工作;3、与设计团队紧密配合，能够实现实现设计师的设计想法;4、与后端开发团队紧密配合，确保代码有效对接，优化网站前端性能;5、页面通过标准校验，兼容各主流浏览器。任职要求:1. 本科及以上学历，熟悉j2ee，精通web开发有5年工作经验以上(学习能力好放宽至4年)，熟悉jsp，spring框架;2.悉主流移动web开发框架,并有过实际项目开发经验;3.有kylin,atlas,oozie,azkaban,spark,ranger任意一种使用项目使用经验。大数据开发工程师岗位的工作职责说明3职责：1、负责公司大数据基础平台产品开发工作;2、完成产品/项目划分的研发任务，按需求规范进行研发;3、具备良好的需求分析能力、业务建模能力，参与产品和项目相关模块的需求讨论，概要、详细设计;4、具备良好的架构分析能力与设计能力，积极参与前期设计;5、能根据设计方案和计划进行编码实现，在进度和质量上符合方案和计划的要求;6、及时对BUG库中的软件问题进行跟踪修正。岗位要求：1、三年以上工作经验，一年以上大数据平台架构及ETL相关经验，可独立搭建/运维CDH/Spark整套平台架构;2、精通Python/Java/Scala/SQL/Shell等语言中两种以上，熟悉Spark/Hadoop/Hive/MR/Hbase/ZK/YARN等三种以上开源框架的原理和源码;3、熟悉容器平台开发或者开发优先考虑，有docker、kubernetes相关开发经验更佳;4、学习能力强，适应能力好，有丰富的问题原因定位及运维技术支持经验;5、有市场上成熟的大数据平台产品实际架构/开发经验优先。大数据开发工程师岗位的工作职责说明4职责：1. 负责公司大数据业务集群的运维工作确保高可用;2. 负责基础运维、故障定位、容量规划、扩容及性能优化;3. 设计实现大规模分布式集群的运维、报警监控和管理平台;4. 参与业务架构设计，在设计阶段给出可运维性改进建议;5. 深入研究大数据业务相关运维技术，持续优化集群服务架构，探索新的大数据运维技术及发展方向。任职资格：1.大专以上学历，2年及以上大数据运维工作经验，熟悉hadoop/hbase/hive/Yarn/Spark等分布式相关技术，熟悉源码尤佳，至少掌握python/shell中的一种语言，接受优秀应届毕业生;2.了解大数据平台应用架构，具备常见问题的基本分析和解决能力;3.熟悉Linu*操作系统的配置、管理及优化，能够独立排查及解决操作系统层面的问题;4.熟悉a、mysql/mongodb/redis等web应用/中间件及主流开源数据库的使用和配置。大数据开发工程师岗位的工作职责说明5职责：1、负责公司c端产品以及广告数据的平台数据基础建设;2、大数据平台的搭建与维护;3、优化算法提高执行效率;4、数据挖掘相关开发。职位要求：1. 本科及以上，计算机、软件工程、统计学、数据挖掘、机器学习等相关专业;2. 熟悉JAVA语言及JAVA生态下的开发,了解多线程并发,能独立完成应用开发和部署;3. 3年及以上大数据流程架构经验，熟悉Hbase/Hive/Hadoop/Spark或等主流分布式开发平台，有高性能集群设计和开发经验;4. 能熟练操作Linu*,熟练掌握SQL数据库语言 HiveSQL/Mysql/Sqlserver;5. 对有广告营销大数据算法/开发经验者优先，有大型数据项目经验优先，有用户行为分析、用户建模、业务建模经验者优先;6. 具有良好的逻辑分析能力、沟通能力和协调能力;