您的当前位置:首页正文

大数据研发岗位职责

2020-01-23 来源:尚车旅游网

  职责描述:

  1.负责客户业务需求、数据分析需求的调研、收集与分析;

  2.负责kyligence大数据平台整体架构和数据架构设计,根据具体业务需求和产品对数据模型进行统一分析和规划;

  3.负责技术设计及技术实现规范编制,指导开发团队进行项目设计、项目实现及技术汇报;

  4.负责项目重难点模块的功能设计和难点攻坚;

  5.参与大数据平台的应用设计、开发、测试及优化工作。

  任职要求:

  1.计算机相关专业,本科及以上学历;

  2.有5年以上工作经验,3年以上数据仓库架构和大数据系统设计经验;

  3.精通hadoop、hive、hbase原理及优化,熟悉大数据生态技术圈,如storm、spark、flume、sqoop、kafka、zookeeper、es等,有大规模集群架构设计、开发及管理经验;

  4.熟练使用sql语言,掌握oracle、db2、gp、mysql等至少两种数据库系统的'使用,有较好的sql性能调优经验;

  5.至少熟悉java,scala,python,shell等编程语言中的2种;

  6.熟悉数据治理及应用,元数据管理的设计与应用;

  7.熟悉数据仓库模型的设计,分层设计原理,并结合大数据技术组建解决模型应用的问题;

  8.优秀的分析和解决问题的能力,对挑战性问题充满激情;

  9.具备良好的文档撰写能力和技术团队管理能力;

  10.具备良好的团队合作精神,较强的沟通能力,具备良好的技术领导能力;

  11.有hive数据仓库或者apache kylin的开发经验者优先考虑;

因篇幅问题不能全部显示,请点此查看更多更全内容