Java开发工程师NJ
面议
投递简历
收藏
微信分享
南京市3 ~ 8 年本科 若干人 13小时前 更新

职位要求

岗位职责:
1. 参与或负责大规模分布式爬虫系统的调度、抓取、存储、解析等模块设计和开发;
2. 参与或负责大规模分布式爬虫监控系统、日志系统设计和开发;
3. 使用爬虫系统抓取行业、公告、新闻、特色等规划数据,解决反扒、验证登录等问题,解析并确保抓取数据及时、稳定、准确入库;
4. 负责维护爬虫数据生产,并及时修复QA或监控反馈的爬虫数据异常。

任职要求:
1. 计算机相关专业本科及以上,扎实的开发基本功,掌握常用数据结构和算法、数据库、多线程技术;
2. 2年以上java/python开发经验,熟悉Spring、Mybatis等常见web开发框架,熟悉Linux常用命令、正则表达式/Xpath,有较强的编程和调试能力。
3. 熟悉MongoDB/Redis等nosql数据库、RabbitMQ等消息队列者优先,熟悉金融证券业者优先。
4. 熟悉爬虫流程和技术,掌握常见反爬虫策略、验证破解、模拟访问技术者优先,熟悉大规模分布式数据存储、处理技术者优先。
5. 工作细致,有很强的学习能力和团队合作精神。

工作地点

南京市建邺区江东中路230号华泰证券大厦3号楼4层