工作职责:
1. 负责数据采集程序的编写、调试、运行;
2. 负责分布式程序的部署、优化、维护;
3. 负责所需数据的整理、清洗、入库;
4. 针对不同网站的反爬虫技术提出有效的应对策略;
任职资格:
1. 计算机相关专业、本科及以上学历;
2. 熟练使用java、python等开发语言;
3. 熟练掌握主流数据库系统,如mysql/oracle;
4. 熟练使用Linux操作系统,
5. 熟悉基础前端知识,熟练使用xpath对html进行结构化提取;
6. 性格随和,善于表达沟通,团队协作;
7. 抗压能力强,能保质保量的高效完成指定工作。