招聘人数:若干
到岗时间:不限
年龄要求:不限
性别要求:不限
婚况要求:不限
岗位要求:
1、负责设计、开发、维护爬虫系统及数据抓取;
2、对海量数据进行建模、清洗、分析。
任职资格:
要求本科及以上学历,三年以上工作经验: 1.有爬虫和反爬虫开发经验,有App爬取经验;
2.熟悉linux平台开发,精通Python,熟悉大规模网页爬取,深度网页爬取,至少熟悉以下一种框架Nutch、Scrapy、Lucene、Heritrix、Solr、Sphinx等;
3.了解MongoDB、Redis、Mysql,掌握MQ,了解Hbase、KAFKA等;
4.熟悉HTTP协议,熟悉正则表达式、XPath、CSS选择器等,了解常用验证码识别技术;
5.能独立解决实际开发过程碰到的各类问题。
求职提醒:求职过程请勿缴纳费用,谨防诈骗!若信息不实请举报。