您的当前位置:首页正文

需求分析工程师的基本职责

2020-04-27 来源:尚车旅游网

  职责描述:

  1、负责公司产品的爬虫架构设计与开发,以及爬虫策略优化等工作;

  2、根据数据产品需求,负责对网页等大规模文本数据抓取、清洗、存储等设计开发工作;

  任职要求:

  1、计算机、数学或统计等相关专业本科及以上学历,1年以上爬虫相关工作经验;

  2、熟悉linux平台,熟练掌握python或java爬虫开发工作;

  3、熟悉静态、动态网页等大规模文本数据的高效信息抽取、清洗、存储等技术;

  4、有反爬相关问题处理经验,精通常用的爬虫技术及架构设计,并能快速开发实现;

  5、具备良好的编程习惯和算法基础;

  6、善于学习,热爱技术开发,善于团队协作,能积极主动地参与公司产品研发等相关工作。职责描述:

  1、负责公司产品的爬虫架构设计与开发,以及爬虫策略优化等工作;

  2、根据数据产品需求,负责对网页等大规模文本数据抓取、清洗、存储等设计开发工作;

因篇幅问题不能全部显示,请点此查看更多更全内容