大数据岗位职责和要求培训_岗位职责

千文网小编为你整理了多篇相关的《大数据岗位职责和要求培训》，但愿对你工作学习有帮助，当然你在千文网还可以找到更多《大数据岗位职责和要求培训》。

第一篇：大数据架构师的岗位职责

职责：

1、搭建基于Hadoop/Spark的数据挖掘体系和大数据分析系统架构;

2、研究大数据领域前沿数据挖掘技术，并引入相应技术在数据中心的使用;

3、进行大数据系统框架设计、模型算法开发;

4、负责大型数据挖掘项目方案制定、项目实施落地及优化等 ;

5、开展数据爬取、聚类分析、舆情分析、鱼骨图分析、定价策略等领域数据挖掘工作;

任职资格：

1、本科以上学历(持有学士学位)(985，211优先)，计算机相关专业，五年工作经验;

2、二年以上数据挖掘项目经验，完整参与过数据挖掘大数据平台的架构开发过程，具备互联网行业背景优先;

3、精通分布式计算框架(hadoop、spark、Storm等)及相关经验，熟练掌握Hive/SQL，Python，熟悉Python、R相关数值科学计算库(NumPy,SciPy等);

4、了解传统的BI/DW 理论，能结合传统BI***实践设计大数据平台;

5、熟悉常用机器学习算法(如分类、回归、聚类、关联规则等)及其原理，具备应用场景经验，如用户画像、商品关联度分析、舆情分析;

6、熟悉主数据、元数据、数据质量、和数据建模等数据治理相关的体系和方法;

7、具备较强的逻辑思维能力、数据敏感度，擅于利用数据发现问题及解决问题;

1、负责大数据平台的架构设计、核心代码开发等任务；根据项目要求编写相关技术文档；

2、负责大数据平台的架构评审，代码评审，上线评审；参与数据应用需求、设计、审核和评审；

3、负责核心模块研发，负责大数据平台的搭建，完成系统调试、集成与实施；

4、负责建立和维护大数据平台技术标准规范，指导开发人员编写代码；

职位描述：

1、支撑dmp人群包计算的业务需求，参与服务端代码开发；

2、支撑dmp标签的技术升级，参与数据产出流程性能优化；

3、支持dmp大规模数据的计算和分析。

任职要求：

1、本科及以上学历，计算机、通信等相关专业，1-2年相关工作经验；

2、有良好的'数据结构、算法基础和扎实的编程能力；

3、熟悉python/java/c++/scala其中任意一门或者多门语言;

4、熟悉hadoop/kafka/spark/storm/flink/hive其中的若干技术；

5、具有良好的团队沟通意识和快速学习能力;

6、加分项: 熟悉大数据处理或者dmp业务.

1、负责各项目数据库的性能监控、分析调优及备份恢复演练,提高各个环境数据库的服务性能及可靠性;

2、排查数据库故障,分析和解决疑难问题,提出预防方案;

3、负责各项目数据库架构设计、部署及管理;

1、负责大数据项目技术架构评估与设计；

2、负责关键功能的开发，技术难题的解决，以及输出代码的关键把控；

3、负责对使用关键技术的预研和选型，完成PoC；

4、指导工程师完成开发工作，并能分享技术经验。

推荐专题： 大数据岗位职责和要求培训