职位描述

岗位职责
1、负责互联网网站或服务接口数据的采集、存储、滤噪、去重等工作; 2、参与大数据采集平台程序的开发、优化与维护; 3、参与数据服务市场及数据开发接口的设计与开发工作; 4、负责数据采集平台的日常监控及问题闭合; 5、应对处理各种互联网反爬机制。
任职要求
1、学历及工作年限要求:本科及以上学历; 2、年以上软件开发经历 2.熟悉HTTP协议原理,及html,css,dom,javascript,ajax,cookies相关前端基础 ; 3、至少熟悉一门编程语言Java (Python优先); 4、熟悉正则表达式,xpath,css选择器,了解开源爬虫框架Scrapy优先; 5、了解Linux常用编程命令,熟悉数据库及SQL脚本开发; 6、工作认真,责任心强,良好的沟通和团队协作能力; 7、热爱编程自学能力强,敢于接受新事物新挑战。

工作地址

基本信息