智联提示您:用人单位以任何名义向应聘者收取费用都属违法行为(如押金、资料费、代收体检费、代收淘宝信誉等),请提高警惕并注意保护个人信息!

高级爬虫工程师

龙信数据(北京)有限公司

五险一金交通补助餐补定期体检节日福利周末双休带薪年假
  • 职位描述
  • 公司介绍

举报收藏

岗位职责:

1、 负责分布式爬虫系统的核心架构设计以及系统规划;

2、 负责抓取数据的清洗、落地、分析,确保数据抽取准确、高效;

3、 破解反爬机制,优化爬虫路由调度策略;

     4、负责高性能爬虫系统的后台监控、报警模块的开发。

任职资格:

1、本科及以上学历,计算机或相关专业;

2、五年以上爬虫开发工作经验,具备扎实的计算机专业基础知识;

3、熟悉linux平台开发,精通Java或Python编程语言;

4、熟悉网页抓取原理及技术,了解基于Cookie的登录原理,熟悉基于正则表达式,Xpath等网页信息抽取技术;

5、熟悉开源爬虫Webmagic、Jsoup、HTMLunintHttpclient等;

6、热爱解决爬虫的各种技术问题,勇于挑战。


工作地址:

北京市海淀区蓝靛厂东路2号金源时代商务中心B座3D 查看职位地图

  • 职位推荐
  • 今日相似推荐

龙信数据(北京)有限公司

龙信数据(北京)有限公司