数据采集工程师

职位描述：
1、参与采集系统在存储、传输、调度及监控环节的架构设计与开发工作
2、具备JS逆向与APP逆向基础，能快速识别并处理常见反爬机制与逆向难题
3、深入研究数据采集策略与防屏蔽机制，突破算法还原、so层防护、页面跳转等关键技术瓶颈，优化抓取效率与数据质量
4、负责数据采集平台的日常维护与迭代升级，包括抓取调度管理、多类型内容采集、页面解析及结构化信息提取，参与技术方案选型

任职要求
1、计算机相关专业背景，具备1年以上数据采集领域实际项目经验
2、具备较强的网页结构与APP接口分析能力
3、熟悉Linux开发环境，熟练使用Python进行开发
4、掌握JS逆向与APP逆向核心技术
5、了解主流加密算法原理与应用场景
6、熟练运用各类常用逆向分析工具
7、有分布式采集系统设计经验者优先，具备应对反采集策略的实际能力，拥有一定APP逆向实践经验者更佳
8、在电商、直播、新零售或社区电商平台中，至少参与过其中一类平台的数据采集项目者优先