公司名称

北京数币科技有限公司

项目名称

北京数币科技有限公司

需求描述

1.负责爬虫系统的开发，技术选型。 2.负责创投圈相关的日常抓取工作。 3.研究各种网页、app接口，探寻特点和规律； 4.研究优化算法，提升爬虫系统的稳定性和可扩展性 ? 任职要求： 1.熟悉常用的爬虫技术，比如scrapy, pyspider等; 2.熟悉linux, http协议及常用数据结构与算法 3.一年以上工作经验，擅长IP池调度，熟悉B/S开发架构，具有Web平台开发的经验，熟悉MVC设计模式； 4.熟悉多线程、网络编程，精通网页抓取原理及技术，精通正则表达式；能从结构化和非结构化的数据中获取信息； 5.至少熟悉一种数据库 6、拥有良好的代码习惯，对代码有洁癖者优先； 7、对新技术有强烈的探索欲望，责作心强，善于团队合作，能够承受工作压力； 8、有开源经验优先。