1、负责商业化相关的数据抓取和清洗工作；
2、推进抓取架构的完善，不断提升系统的准确性、实时性；
3、监控客户舆情及竞品投放情况。

1、有扎实的算法和数据结构能力；
2、熟悉爬虫原理，熟悉常见的反爬虫技术，有爬虫相关项目开发经验者优先；
3、掌握http协议，熟悉html、dom、xpath等常见的数据抽取技术；
4、有大规模数据处理、数据挖掘、信息提取等经验者优先。