首页 > 企业文档 > 岗位职责 > 详情页

大数据专业岗位职责

2023-07-18 08:59:31

千文网小编为你整理了多篇相关的《大数据专业岗位职责》,但愿对你工作学习有帮助,当然你在千文网还可以找到更多《大数据专业岗位职责》。

第一篇:大数据岗位职责

工作职责:

1、负责对原有大数据课程进行优化

2、负责大数据相关新项目研发

3、关注大数据前沿技术研究,通过新技术带动大数据课程

4、与学科交流课程方向,把握新技术带来的新方向

任职资格:

1、本科以上学历,3年以上java开发经验,3年以上大数据研发经验,能独立完成大数据新技术研究

2、具有较强的`学习能力,创新能力,问题解决能力,计划能力

3、具有较高的心理承受能力,全局意识和责任心

4、熟练掌握javaweb项目开发技术,如ssh、ssm、js、mq、redis、zookeeper、dubbo等

5、熟练掌握hadoop、hive、storm、spark环境搭建

6、熟练掌握hdfs、mapreduce,storm,spark操作及其内部原理机制

7、熟练使用sqoop、hive、oozie、hue、azkaban等工具的使用

8、熟练掌握脚本语言shell

9、对python具有一定的操作能力

10、熟知电商等互联网系统的开发过程、运维过程、日志采集过程

11、熟练使用scala开发语言

12、对jdk、spark、hadoop、storm、rpc内部源码了解者优先

第二篇:大数据架构师岗位主职责

职责:

1.负责过多个大数据项目的架构;

2.精通Hadoop、Spark, HBase等主流的大数据平台、精通各组件优化设计原理;

3.精通大数据实时流式处理的设计和应用;

3.熟悉大数据平台调优,具备大数据生产平台调优经验;

4.金融行业,运营商行业大数据架构经验更优;

5.研究大数据技术的最新发展,并引入到公司技术架构;

6.指导大数据工程师的日常工作,并培养技术骨干。

任职资格:

1.计算机相关专业本科或以上学历;

2.具有5年以上大数据相关开发经验;

3.具有2年以上带团队经验

4.对Hadoop/Hive/Spark/HBase/ES等等大数据常用技术有深刻理解,能够带领团队进行技术攻坚,完成中间件的实施、改造、调优;

5.精通海量数据和实时数据的分析处理,能对线上的数据处理性能问题做调优;

6.精通数据仓库以及维度建模原理,有大型数据仓库建设经验;

7.精通关系型数据库和NoSQL数据库的使用,熟悉相关理论;

8.沟通顺畅,重点突出,高效。

第三篇:大数据架构师岗位的主要职责概述

职责:

根据大数据业务需求,设计大数据方案及架构,实现相关功能;

搭建和维护大数据集群,保证集群规模持续、稳定、高效平稳运行;

负责大数据业务的设计和指导具体开发工作;

负责公司产品研发过程中的数据及存储设计;

针对数据分析工作,能够完成和指导负责业务数据建模。

职位要求:

计算机、自动化或相关专业(如统计学、数学)本科以上学历,3年以上大数据处理相关工作经验;

精通大数据主流框架(如Hadoop、hive、Spark等);

熟悉MySQL、NoSQL(MongoDB、Redis)等主流数据库,以及rabbit MQ等队列技术;

熟悉hadoop/spark生态的原理、特性且有实战开发经验;

熟悉常用的数据挖掘算法优先。

第四篇:大数据岗位职责

工作职责:

1、参与计算框架和服务的定制和改进,为公司批处理和流式计算能力提供支撑;

2、深入理解业务场景,解决性能瓶颈,实现业务目标;

3、计算、存储和网络方面基础技术的探索和储备。

任职要求:

1、精通各种性能分析和调试工具,高效进行分析;

2、熟练的c/c++/java开发能力,代码质量高;

3、熟悉网络、linux、hadoop等系统,能够灵活解决新问题;

4、较好的.团队协作和沟通能力。

第五篇:大数据架构师岗位主职责

1.负责大数据平台的开发,管理;

2.负责ETL批量数据集成作业设计开发工作;

3.负责数据批处理作业调度工具的使用操作;

4.设计数据建模方案,对业务数据进行分析和建模;

5、负责平台故障处理及性能优化;

6、负责项目团队技术培训、指导;

推荐专题: 大数据专业岗位职责

相关推荐
本站文档由会员上传,版权归作者所有,如有侵权请发送邮件至89702570@qq.com联系本站删除。
Copyright © 2010 - 千文网移动版
冀ICP备2020027182号