爬虫工程师

职位职责：
1. 负责产品核心模块的设计与实现工作；
2.参与制定前后端业务流程、接口协议文档输出等；
3.参与项目研发、部署及日常维护工作。
4、负责抖音/微信/facebook/ig等热门app的爬取工作，包括数据抓取和爬取链路优化，提升抓取能力；
5、负责反爬虫策略研究，代理IP、验证码识别等采集支撑服务建设；
6、负责大规模文本、图像数据的抓取、抽取，去重、分类，垃圾过滤，质量识别等工作；
-任职要求
1、大专以上学历，计算机相关专业优先；
2、熟悉HTTP协议/浏览器原理/前端JS/APP抓取；
3、有解决复杂的反爬限制实践经验，能解决如图片验证码/滑块/账号限制/ip限制等问题，熟悉反爬虫、签名破解、验证码识别技术者优先；
4、熟悉app端数据抓取（有逆向、脱壳等经验），掌握Apktool、dex2jar、JD-GUI、frida、ida等工具，主流app软件大量级的数据抓取优先。