公司名称

北京松鼠山科技有限公司

项目名称

Python

需求描述

岗位职责：

1. 能辅助完成爬虫平台的框架开发，实现高性能，高可用及可扩展的后端代码；

2. 能完成定向数据的采集与爬取、解析处理、入库及备份等数据日常工作；

任职要求：

1. 有Python/Java语言开发经验，一年以上爬虫类项目开发经验；

2. 熟悉行为验证码识别、模拟登陆、数据清洗、去重、入库等；

3. 熟悉常用爬虫框架中的一种或多种，如Scrapy框架，WebMagic框架等，有验证码类爬虫项目开发经验者优先；

4. 熟悉多线程开发，熟悉使用至少一种关系型数据库（MySQL)等；

5. 良好的沟通能力和团队协作精神；