还剩4页未读,继续阅读
文本内容:
大数据开发工程师的职责文本精选大数据开发工程师的职责文本精选大数据开发工程师的职责文本精选1职责
1.结合项目或产品涉及的详细业务场景,对数据进行清洗、计算与加工;
2.思路清楚,可快速响应数据处理的需求,评估并给出合理的解决方案,并采纳合理的方式处理需求;
3.乐观主动,能够与团队成员进行有效沟通,并完成数据处理结果的核对与对接;
4.完成上级交办的工作或任务岗位要求
1.计算机相关专业大专以上学历;
2.2年以上大数据产品或项目开发阅历,精通Hadoop生态圈,娴熟使用Spark,HBase、Hive KafkaRedis等;
3.精通SQL,娴熟使用HSQL实现简单数据处理规律,并具备数据处理调优的力量;
4.熟识Linux开发环境,熟识Linux的shell命令
5.具有良好的规律思维力量和严谨的程序开发思想,具备独立问题排查与处理的力量;
6.良好的团队精神和合作意识,剧烈的责任心,对工作有激情,良好的沟通力量,能吃苦耐劳;
7.有大数据项目或产品背景者优先;
8.有使用Spark SQL进行数据处理,并具有Spark SQL优化阅历者优先
9.有Python或者Shell脚本开发阅历优先大数据开发工程师的职责文本精选2职责
1、负责数据中心和大数据处理平台的搭建
2、在线和离线海量数据分析平台的开发;
3、讨论大数据前沿技术,提升系统的运维效率;
4、参加大数据的采集、存储、处理,分析等开发
5、参加数据挖掘算法的设计、对海量数据进行挖掘分析和发掘数据价值及算法学习及实现
1、计算机或相关专业本科学历及以上,2年工作阅历以上
2、熟识Java/Scala等至少一门语言,能对分布式常用技术进行合理应用,解决实际架构问题
3、娴熟使用hadoop,hive,HBase,YARN,kafka,spark,Storm,Flume等大数据开发组件
4、熟识整个大数据的完整处理流程,包括数据的采集、清洗、存储、分析和可视化及报表开发;
5、熟识分布式系统概念、架构,有大规模分布式系统设计、实现、部署等阅历;
6.具有优秀的学习力量、独立分析和解决问题力量,良好的团队合作精神
7.有BI开发阅历的优化考虑大数据开发工程师的职责文本精选3职责
1、负责完成业务和产品的对接,支持业务需求研发;
2、负责完成产品的迭代升级以及底层架构的升级研发;
3、完成团队支配的其他相关bl常工作任职要求;
4、负责产品的实时业务和离线业务的研发;
5、支持开源大数据技术在数据系统中的使用,修复、优化增加大数据技术;岗位要求
1、具有分布式系统架构开发力量,娴熟使用storm、spark hbase者优先
2、能够使用实时计算平台,进行实时业务数据的研发
3、能够基于已有平台进行离线业务的.开发
4、有大数据应用产品研发阅历,具有数据决策产品研发阅历者优先大数据开发工程师的职责文本精选4职责
1、负责该领域的业务需求争论,完成技术方案及数据开发;
2、负责数据仓库的体系建设及落地实现;
3、负责大数据平台各类环境的部署及运维、并参加架构优化、性能优化等工作;
4、负责该领域所属模块的代码开发、调试与维护工作,并进行技术沉淀和文档输出聘请要求
1、计算机、电子通信、自动化等专业,本科及以上学历;
2、五年以上研发阅历,其中二年以上大数据开发的相关工作阅历;
3、娴熟JAVA开发语言;熟识微服务及Spring框架;
4、娴熟娴熟Hive、Impala、ES性能调优,关注细节,学习力量强;
5、能协作团队完成该领域的工作,自我管理力量强,能承受工作中的各种压力,具备很好的团队意识
6、娴熟主流大数据平台产品部署及运维,如CDH、HDP平台
7、对机器学习和深度学习等方面有肯定的了解;
8、有汽车制造业及相关行业的大数据开发阅历优先大数据开发工程师的职责文本精选5职责
1、负责数据采集、数据存储、数据查询、数据计算等基础平台的设计和开发工作;
2、利用Hadoop、Spark、Fl ink等技术进行离线和实时数据开发;
3、负责大数据平台的规划升级、平台维护和优化;
4、和其他部门或团队沟通、资源协调并落实工作任职要求
1、本科及以上学历;
2、3年以上大型大数据平台建设实施阅历;
3、把握常用大数据组件hadoop、Hive、spark Flink、hbase^elasticsearch等原理、使用和调优;
4、具备较强技术功底,精通Java、Scala、Python等至少一种开发语言,能依据需求给出技术架构;
5、有数据仓库、元数据管理和治理的开发阅历优先;
6、擅长沟通,思维活跃、责任感强、工作乐观主动,有良好的团队协作意识文档内容到此结束,欢迎大家下载、修改、丰富并分享给更多有需要的人。