数据采集组长
¥6~10K/月
巴南区
经验不限
前天
-
¥6~10K/月
- 巴南区
- 不限
-
数据采集
-
IT服务/系统集成
- 不限
- 年龄不限
- 1人
五险
交通补助
通讯补助
绩效奖金
节日礼金
定期团建
年底分红
弹性工作
岗位职责:
重点:具有2年以上的项目爬虫经验,最好是国外电商网站的商品数据抓取,有自主搭建IP代理池的技术能力,对防爬取有丰富的对抗经验1. 熟练掌握Python爬虫框架Scrapy;2. 熟练掌握网页抓取原理及正则表达式、XPath、CSS等网页信息抽取技术;3. 熟悉常见的反爬虫机制解决办法(熟悉深度抓取,动态数据获取,模拟登录、代理等技术);4. 熟练调用模拟浏览器进行数据抓取,包括 Selenium 、Puppeteer 、Splash 等;5. 能熟练应对 IP 封禁、参数加密、验证码、字体反爬、人机检测、账号封禁等反爬措施;6. 熟悉SqlServer、mysql、redis等数据库等数据库;...