岗位职责
1:遵循robots协议,采集互联网公开的信息,满足各类业务数据需求;
2:负责分布式爬虫系统的建设,优化数据调度、抓取、解析、存储全栈流程;
3:帮助团队攻克各种爬虫技术难关,提升海量数据系统的抓取效果与性能。
岗位要求
1:两年以上爬虫抓取采集相关工作经验;
2:熟悉主流爬取技术及爬虫框架工具,如Selenium/Puppeteer/Scrapy/Phantom JS等;
3:熟悉Python/Java/Go/C++其中一种语言,具备扎实的编码能力;
4:熟悉常见反爬封禁策略,并具备相关实战经验。
薪资面议!!!薪资面议!!!薪资面议!!!
职位福利:节日福利、五险一金、绩效奖金、交通补助、通讯补助、带薪年假、弹性工作、法定节假日