薪资:5千-1万
佛山南海区桂城经验不限大专全职招1人
python爬虫开发工程师/5千-1万
职位描述
Python
数据挖掘
搜索
Java
岗位职责:
1. 参与已有爬虫系统中作业的检验,设计和优化爬虫策略,充分利用已有服务器和宽带资源进行优化;
2. 设计爬虫策略和防屏蔽规则,解决封账号、封IP、验证码等难点攻克,提升网页抓取的效率和质量
3. 负责爬虫系统的架构设计与开发,编写大规模分布式网络爬虫(多线程、分布式调度、协议处理);
4. 负责指定网站进行网页内容抓取、深度网页内容抓取的关键技术以及数据清理提取;
5. 负责数据的抓取、解析、清洗、入库、优化;构建和开发在海量数据下多维分析的数据分析平台。
岗位要求:
1. 本科以上专业,精通网络爬虫、互联网搜索、大数据新闻、网络多媒体、网络视频、即时通讯等技术,有着丰富的网络数据爬取工程项目经验;
2. Python、Java或者Golang基础扎实,精通SSH等开源框架;
3. 熟悉MySql、Oracle、MongoDB一种或多种数据库开发技术,有较好的数据库设计能力;
4. 精通网页抓取原理及技术、深度抓取、动态网页技术抓取、浏览器模拟抓取技术,从结构化的和非结构化的数据中获取信息
5. 精通爬虫和反爬技术,精通http底层协议,了解TCPHTTP协议、HtmlJsCss、Ajax等技术;精通深度抓取、动态网页技术抓取、浏览器模拟抓取技术等;
6. 熟悉分布式系统、多线程;
7. 具有网络爬虫、网页信息抽取、web挖掘等搜索引擎等相关经验优先,做过电商平台商品信息采集项目者优先。
8. 能够快速学习和掌握新技术,优秀的分析、解决问题能力,具备团队合作精神
我们的福利:
1、社会保障:购买社会保险(养老、生育、工伤、失业、医疗保险)。
2、免费午餐:公司每天都安排营养午餐供应。
3、奖罚制度:公司每月都会对出色的员工进行表彰并发放奖金。
4、晋升机制:完善的晋升考核奖励机制,管理岗位晋升及专业技能纵深,双向发展通道。
5、培训体系:公司为新员工提供入职培训及专业培训,入职引导人一对一帮带;不同级别及不同岗位均有相应专业及管理培训,不断提高员工的综合能力。
6、员工活动:公司注重员工的身体健康,每季会组织一次集体活动,如:登山、郊外游等活动。
7、假期福利:带薪年假,带薪病假、婚假、产假、生育津贴、丧假等。
8、日常福利:水果下午茶时间,生日礼物,节日礼物等,如端午节送粽子,中秋节送月饼等。
9、年度调薪:每年至少有1次调薪机会。
10、试用期:1-3个月,我们给予新人莫大的认可与鼓励,以能力和结果为导向,帮助你提前达成目标,提前转正。
职位福利
包吃
带薪年假
节日福利
定期团建
全勤奖
五险
年底双薪
工作地点
佛山市南海桂城街道桂澜北路4号中盛国际1904



