泉州市
经验:
学历:大专
【职位描述】
1、从web和APP端获取包括图片、文本等相关数据。
2、熟悉分布式爬虫、APP爬虫相关架构,设计爬虫策略和反爬规则。
3、参与业务功能需求探讨,理解系统数据处理流程,提升数据完整度。
【任职要求】
1、熟悉web、app抓取原理及技术,熟悉正则表达式,熟悉常用的爬虫网络框架及重要组件。
2、熟悉Linux开发环境和数据库、熟悉Java、Python、PHP中的一种、熟悉Http协议和REST。
3、有垂直领域数据爬取经验者优先、有反爬虫经验者优先。
4、两年以上的爬虫项目经验。