职责描述:
1.负责客户业务需求、数据分析需求的调研、收集与分析;
2.负责kyligence大数据平台整体架构和数据架构设计,根据具体业务需求和产品对数据模型进行统一分析和规划;
3.负责技术设计及技术实现规范编制,指导开发团队进行项目设计、项目实现及技术汇报;
4.负责项目重难点模块的功能设计和难点攻坚;
5.参与大数据平台的应用设计、开发、测试及优化工作。
任职要求:
1.计算机相关专业,本科及以上学历;
2.有5年以上工作经验,3年以上数据仓库架构和大数据系统设计经验;
3.精通hadoop、hive、hbase原理及优化,熟悉大数据生态技术圈,如storm、spark、flume、sqoop、kafka、zookeeper、es等,有大规模集群架构设计、开发及管理经验;
4.熟练使用sql语言,掌握oracle、db2、gp、mysql等至少两种数据库系统的'使用,有较好的sql性能调优经验;
5.至少熟悉java,scala,python,shell等编程语言中的2种;
6.熟悉数据治理及应用,元数据管理的设计与应用;
7.熟悉数据仓库模型的设计,分层设计原理,并结合大数据技术组建解决模型应用的问题;
8.优秀的分析和解决问题的能力,对挑战性问题充满激情;
9.具备良好的文档撰写能力和技术团队管理能力;
10.具备良好的团队合作精神,较强的沟通能力,具备良好的技术领导能力;
11.有hive数据仓库或者apache kylin的开发经验者优先考虑;
因篇幅问题不能全部显示,请点此查看更多更全内容