最新需求

3年以上 爬虫工程师  望京soho   全职       15-30k 
学历(最低要求):大专
【职责描述】
1. 负责多平台信息爬取和页面内容的提取分析;
2. 优化抓取策略,充分利用带宽资源,避免限制;
3. 析爬虫系统的技术缺陷,对策略架构做出合理地调整和改进。
【职位要求】
1. 有扎实的Java开发基础,对网络爬虫有兴趣;
2. 熟悉网页抓取原理及技术,熟悉httpclient、jsoup、selenium 中的一种或几种,熟悉xpath或者css选择器;
3. 熟悉至少一种常用关系型数据库;
4.能独立解决实际开发过程碰到的各类问题;
5.有过海量数据爬取、电商行业抓取经验优先;
6. 熟悉spark 数据处理优先;
11-28 10:11
立刻下载APP
每天10万条商机尽在掌控
推荐需求