一、招聘岗位
算法工程师(爬虫方向)
二、薪资待遇
1.5万-2.5万元/月
三、岗位职责
1、组织网络爬虫系统的架构设计、工具选型、并协调开发。
2、组织网页数据的爬取、清洗、解析、入库,实现对公开网络上企业信息的收集。
3、研究破解各类反爬机制,实现安全高效数据采集。
4、根据业务需求,采用NLP等相关技术,从爬取的文本中提取目标信息,开发目标企业的标签。
5、不断提升数据抓取、网页解析、标签生成的自动化水平。
四、职位要求
1、熟练使用Python或Java语言。
2、熟悉Scrapy或Webmagic等抓取框架的机制和实现。
3、熟悉常见的反爬手段,了解前端知识。
4、熟悉常见NLP算法与文本处理技术。
5、有钻研精神,有良好的自我驱动学习能力和问题解决能力。
6、有大规模分布式爬虫系统实现经验者优先。
7、有机器学习、深度学习、NLP大型项目经验者优先。
五、公司地址
广州黄浦区科学城创意大厦B3栋13楼



