Python爬虫工程师

岗位职责：
1.负责公司的爬虫核心技术研究以及爬虫策略优化；
2.根据业务需求，实现大规模文本、图片、视频数据抓取、清洗、存储等工作；
3.对数据质量负责，提供数据分析报告，优化数据应用架构，支持产品研发。
职位要求：
1.计算机、数学或统计等相关专业专科及以上学历，2年以上数据相关工作经验；
2.熟悉linux平台，掌握Python/JAVA或某种编程语言；
3.熟悉基于正则表达式、CSS、http协议、ml等的网页信息抽取技术；
4.精通常用的爬虫技术及架构，并能快速实现；
5.熟悉多线程编程、分布式计算，有分布式系统使用经验。
6.具备良好的编程习惯和算法基础，具有钻研精神；
7.对数据驱动业务有深入理解，对数据与业务方面有足够的敏感性，独立思考能力和逻辑分析能力强。