千文网小编为你整理了多篇相关的《大数据专业岗位职责》,但愿对你工作学习有帮助,当然你在千文网还可以找到更多《大数据专业岗位职责》。
工作职责:
1、负责对原有大数据课程进行优化
2、负责大数据相关新项目研发
3、关注大数据前沿技术研究,通过新技术带动大数据课程
4、与学科交流课程方向,把握新技术带来的新方向
任职资格:
1、本科以上学历,3年以上java开发经验,3年以上大数据研发经验,能独立完成大数据新技术研究
2、具有较强的`学习能力,创新能力,问题解决能力,计划能力
3、具有较高的心理承受能力,全局意识和责任心
4、熟练掌握javaweb项目开发技术,如ssh、ssm、js、mq、redis、zookeeper、dubbo等
5、熟练掌握hadoop、hive、storm、spark环境搭建
6、熟练掌握hdfs、mapreduce,storm,spark操作及其内部原理机制
7、熟练使用sqoop、hive、oozie、hue、azkaban等工具的使用
8、熟练掌握脚本语言shell
9、对python具有一定的操作能力
10、熟知电商等互联网系统的开发过程、运维过程、日志采集过程
11、熟练使用scala开发语言
12、对jdk、spark、hadoop、storm、rpc内部源码了解者优先
职责:
1.负责过多个大数据项目的架构;
2.精通Hadoop、Spark, HBase等主流的大数据平台、精通各组件优化设计原理;
3.精通大数据实时流式处理的设计和应用;
3.熟悉大数据平台调优,具备大数据生产平台调优经验;
4.金融行业,运营商行业大数据架构经验更优;
5.研究大数据技术的最新发展,并引入到公司技术架构;
6.指导大数据工程师的日常工作,并培养技术骨干。
任职资格:
1.计算机相关专业本科或以上学历;
2.具有5年以上大数据相关开发经验;
3.具有2年以上带团队经验
4.对Hadoop/Hive/Spark/HBase/ES等等大数据常用技术有深刻理解,能够带领团队进行技术攻坚,完成中间件的实施、改造、调优;
5.精通海量数据和实时数据的分析处理,能对线上的数据处理性能问题做调优;
6.精通数据仓库以及维度建模原理,有大型数据仓库建设经验;
7.精通关系型数据库和NoSQL数据库的使用,熟悉相关理论;
8.沟通顺畅,重点突出,高效。
职责:
根据大数据业务需求,设计大数据方案及架构,实现相关功能;
搭建和维护大数据集群,保证集群规模持续、稳定、高效平稳运行;
负责大数据业务的设计和指导具体开发工作;
负责公司产品研发过程中的数据及存储设计;
针对数据分析工作,能够完成和指导负责业务数据建模。
职位要求:
计算机、自动化或相关专业(如统计学、数学)本科以上学历,3年以上大数据处理相关工作经验;
精通大数据主流框架(如Hadoop、hive、Spark等);
熟悉MySQL、NoSQL(MongoDB、Redis)等主流数据库,以及rabbit MQ等队列技术;
熟悉hadoop/spark生态的原理、特性且有实战开发经验;
熟悉常用的数据挖掘算法优先。
工作职责:
1、参与计算框架和服务的定制和改进,为公司批处理和流式计算能力提供支撑;
2、深入理解业务场景,解决性能瓶颈,实现业务目标;
3、计算、存储和网络方面基础技术的探索和储备。
任职要求:
1、精通各种性能分析和调试工具,高效进行分析;
2、熟练的c/c++/java开发能力,代码质量高;
3、熟悉网络、linux、hadoop等系统,能够灵活解决新问题;
4、较好的.团队协作和沟通能力。
1.负责大数据平台的开发,管理;
2.负责ETL批量数据集成作业设计开发工作;
3.负责数据批处理作业调度工具的使用操作;
4.设计数据建模方案,对业务数据进行分析和建模;
5、负责平台故障处理及性能优化;
6、负责项目团队技术培训、指导;
推荐专题: 大数据专业岗位职责