千文网小编为你整理了多篇相关的《大数据相关岗位职责》,但愿对你工作学习有帮助,当然你在千文网还可以找到更多《大数据相关岗位职责》。
职责:
1.编写存储过程和SQL脚本实现复杂业务逻辑;
2.根据业务逻辑完成数据库表设计,和整个数据的抽取清洗转换过程(ETL),以及数据输出;
3.对于运行缓慢的SQL语句调优;
4.数据处理自动化脚本部署和维护。
5、定时巡查数据库系统,发现潜在问题和性能瓶颈,并预警
【任职要求】
大专以上学历,计算机相关专业,有存储开发经验;
2、数据Oracle或SQLSERVER的运行机制,熟练掌握Oracle或SQLSERVER的基本操作和调优;
3、精通SQL语句,基础扎实
工作职责:
1、负责对原有大数据课程进行优化
2、负责大数据相关新项目研发
3、关注大数据前沿技术研究,通过新技术带动大数据课程
4、与学科交流课程方向,把握新技术带来的新方向
任职资格:
1、本科以上学历,3年以上java开发经验,3年以上大数据研发经验,能独立完成大数据新技术研究
2、具有较强的`学习能力,创新能力,问题解决能力,计划能力
3、具有较高的心理承受能力,全局意识和责任心
4、熟练掌握javaweb项目开发技术,如ssh、ssm、js、mq、redis、zookeeper、dubbo等
5、熟练掌握hadoop、hive、storm、spark环境搭建
6、熟练掌握hdfs、mapreduce,storm,spark操作及其内部原理机制
7、熟练使用sqoop、hive、oozie、hue、azkaban等工具的使用
8、熟练掌握脚本语言shell
9、对python具有一定的操作能力
10、熟知电商等互联网系统的开发过程、运维过程、日志采集过程
11、熟练使用scala开发语言
12、对jdk、spark、hadoop、storm、rpc内部源码了解者优先
【岗位职责】
1、负责收集目标市场(互联网广告或金融)动态,把握业界动态,定期编制分析报告提交公司相关部门;
2、负责收集大数据行业、金融科技行业相关行业动态,定期编制分析报告提交公司相关部门。
【职位要求】
1、本科及以上学历,计算机、通讯、自动化等相关专业优先;
2、2年及以上相关经验,熟悉互联网广告、金融科技、大数据、人工智能等相关知识;
3、书面总结、表达能力强,思维清晰,掌握较强的演讲、沟通技巧;
4、性格开朗稳重,学习能力强,且有强烈的责任心和进取心,优秀的团队协作能力。
岗位职责:
1、负责整体大数据平台体系的建设工作。
2、负责带领团队完成基于大数据平台的业务项目的`开发、实施和维护工作。
3、负责解决大数据平台建设过程中的技术难点和性能调优工作。
4、负责指导和培训团队成员,共同提升大数据技能。
任职要求:
1、计算机相关专业,至少5年以上大数据开发经验;
2、熟悉大数据、数据仓库,分布式架构技术理论,具有大数据整体系统架构设计和实战经验,,有从无到有建设大数据平台经验者优先;
3、熟悉大数据生态圈技术,不限于hadoop、hdfs、hive、hbase、spark、storm、flume、sqoop、kylin等,阅读过底层源码者优先;
4、熟悉至少一种编程语言,python,java,scala等,精通sql;
5、2年以上技术团队管理经验,有阿里,百度,腾讯,滴滴,美团等互联网大数据工作经验者优先;
6、逻辑思维清晰,具备高度的责任感和良好的沟通协调能力,遇事积极主动。
职位描述:
1、基于hive的数据仓库建设、etl开发;
2、使用hive/flink等平台进行分析内部及外部的数据,配合业务团队进行定量和定性分析,把数据转化成为业务增值的信息;
3、探索、评估新的技术和解决方案,提高数据并行计算能力和运行速度。
任职要求:
1、熟悉大数据相关技术:kafka/flink/hadoop/druid/hbase等;
2、具备数据库系统理论知识,掌握主流数据库管理和应用,精通sql;
3、了解统计以及数据挖掘、机器学习、人工智能技术,会使用关联分析、分类预测、聚类分析等常用分析方法;
4、熟练使用java、python、php、go语言中的一种或者多种;
6、两年以上大数据开发经验,有高性能分布式平台开发经验,有电商行业经验优先。
1.负责大数据平台的开发,管理;
2.负责ETL批量数据集成作业设计开发工作;
3.负责数据批处理作业调度工具的使用操作;
4.设计数据建模方案,对业务数据进行分析和建模;
5、负责平台故障处理及性能优化;
6、负责项目团队技术培训、指导;
推荐专题: 大数据相关岗位职责