Java开发工程师NJ
15-20K/月
投递简历
收藏
微信分享
南京市4 ~ 6 年本科及以上 2人 一个月前 更新

职位描述

岗位职责:
1. 参与或负责大规模分布式爬虫系统的调度、抓取、存储、解析等模块设计和开发;
2. 参与或负责大规模分布式爬虫监控系统、日志系统设计和开发;
3. 使用爬虫系统抓取行业、公告、新闻、特色等规划数据,解决反扒、验证登录等问题,解析并确保抓取数据及时、稳定、准确入库;
4. 负责维护爬虫数据生产,并及时修复QA或监控反馈的爬虫数据异常。

职位要求

任职要求:
1. 计算机相关专业本科及以上,扎实的开发基本功,掌握常用数据结构和算法、数据库、多线程技术;
2. 2年以上java/python开发经验,熟悉Spring、Mybatis等常见web开发框架,熟悉Linux常用命令、正则表达式/Xpath,有较强的编程和调试能力。
3. 熟悉MongoDB/Redis等nosql数据库、RabbitMQ等消息队列者优先,熟悉金融证券业者优先。
4. 熟悉爬虫流程和技术,掌握常见反爬虫策略、验证破解、模拟访问技术者优先,熟悉大规模分布式数据存储、处理技术者优先。
5. 工作细致,有很强的学习能力和团队合作精神。

工作地点

南京市建邺区江东中路230号华泰证券大厦3号楼4层

简历导入成功
简历导入成功
当前简历不完善,将影响你的职位投递
简历导入失败
外网简历导入失败,请检查账号密码是否正确,或外网是否存在简历,你也可以选择重新导入
简历导入失败
因密码过于简单,请在外网修改密码后重新导入
外网简历导入中... 停止导入