职位详情
爬虫研发工程师
15000-20000元
应届毕业生 本科
职位描述
职责描述: 1.执行设计文档中定义的软件单元的编码、单元测试和文档; 2.通过开发新技术解决开发过程中出现的问题; 3.根据任务制定明确合理的工作计划; 4.在规定的时间内保证高效开发; 5.积极与团队合作完成项目; 6.解决用户反馈的产品问题. 任职要求: 1.对数据结构和算法设计有较为深刻的理解,具有良好的沟通能力和团队合作意识; 2.具有爬虫开发经验,精通Python或JAVA,熟练使用多线程,工作1-3年经验均可; 3.熟悉正则表达式,Jsoup、XPATH,CSS选择器,能够从结构化和非机构化的数据中获取信息,了解各种Web前端技术,包括HTML/XML/JavaScript/AJAX/JSON等; 4.熟练掌握Python主流爬虫架构,精通Django架构; 5.熟悉常见反爬机制,验证码识别,IP代理池、应用Ip池、headers认证和cookie等; 6.熟练掌握应用Selenium PhantomJS实施动态HTML抓取; 7.熟悉熟练使用http代理工具charles、fiddler等; 8.熟练掌握Linux平台开发,能独立安装、配置、搭建开发环境,编写shell脚本; 9.精通Postpresql,Oracle,mysql等关系数据库; 10. 善于独立思考,有快速学习能力,不断突破技术瓶颈,乐于探索未知领域,在较大压力下保持工作激情
联系方式
516人关注 收藏职位 投递简历