数据采集

职位职责：
1.负责设计并实施数据采集方案，从网页、API、数据库等多种渠道获取所需数据；
2.开发维护网络爬虫系统，解决反爬机制，确保数据采集的效率和稳定性；
3.进行数据清洗、去重和格式化处理，保证数据质量和可用性；
4.监控数据采集流程，及时排查和解决数据异常问题；
5.配合数据分析团队，满足业务数据需求，提供数据支持。

任职要求：
1.计算机、信息技术或相关专业本科及以上学历
2.熟练掌握Python等编程语言，有Scrapy、BeautifulSoup等爬虫框架使用经验
3.了解网页结构解析（HTML/XML/XPath），掌握HTTP/HTTPS协议及网络通信原理
4.具备基本的数据处理能力，熟悉数据库操作（如MySQL、MongoDB等）
5.能够应对常见反爬策略，有验证码识别、代理IP使用等经验者优先；
6.具备良好的学习能力和团队合作精神，能独立解决问题。

**我们提供：**
具有竞争力的薪酬福利和广阔的发展平台，欢迎有志于数据领域的您加入我们！