爬虫开发（长期稳定+可线上面试）

岗位职责：
1.负责网络公开数据的采集，结构化数据的提取、数据清洗等工作；
2.参与爬虫系统架构的设计，优化数据调度、采集、解析、存储等流程；
3.分析和解决数据采集中遇到的各种反爬问题，优化采集的策略；
4.负责目标网站的前端JavaScript逆向，加密逻辑定位，请求流程还原等开发。
任职要求：
1. 1~3年以上爬虫相关经验，有较强学习和抗压能力；
2. 熟悉Python语言, 熟练使用多进程，多线程，协程等开发爬虫任务；
3. 熟悉JS逆向，补环境等相关技术；
4. 熟悉常见的反爬策略及应对措施，如字体加密，网页反调试，图片验证码等；
5. 熟悉主流数据库Mysql、Redis、Mongo 等数据库中的至少两种；
6. 有上进心，自驱力，学习能力强，做事认真负责，具有良好的团队合作精神