爬虫工程师 (1人)
职位编号: | THR000611 | 招聘职位: | 爬虫工程师 |
工作类型: | 全职 | 年薪: | 面议 |
要求性别: | 男 | 年龄要求: | 23 - 38 |
学历要求: | 本科及以上 | 工作地区: | 北京 |
工作经验: | 5年以上 | 户口要求: | |
发布日期: | 2017-08-29 | 有效期限: | 3个月 |
1、负责网站爬虫的页面垂直解析任务;
2、调研与应对各个网站的反封锁策略;
3、承担与其它部门部门爬取需求的对接工作;
4、承担大数据部门的其它任务。
1、有基本的数据结构知识;
2、有基本的算法复杂度概念;
3、熟悉java语言、了解shell、了解python;
4、良好的代码组织能力、在设计模式、代码解耦合、代码减少重复度、代码规范方面有自己的体会与见解;
5、掌握正则表达式、dom树结构、 jsoup、ajax优先;
6、掌握聚类、分类等机器学习算法优先;
7、有hadoop、spark、kafka、rabbitMq、redis、zookeeper等基础设施的使用经验优先。