职位描述
岗位职责:1、完成公司软件产品的开发、调试、单元测试、维护等工作;2、研究并优化爬虫调度策略,提高抓取效率、成功率及内容覆盖率;3、处理反爬机制、优化UA、IP池、动态调度等策略;4、监控和优化爬虫集群性能,优化异常检测,爬取策略调优等机制;5、协助技术文档、系统说明书、用户手册的编辑工作。任职资格:1、要求本科及以上学历,计算机或相关专业,熟悉python;2、2年以上的爬虫经验,能够独立完成开发任务;3、熟悉掌握Scrapy、PySpider等爬虫框架;4、熟练堂握面向对象编程的理论和应用,熟悉动态库、网络编程、多线程编程等常用技术;5、熟悉反爬技术优先,验证码掌握、IP代理、JS逆向等对抗策略。
企业介绍
国能日新科技股份有限公司(简称:国能日新),创立于2008年2月,是新能源数据服务商。 国能日新拥有大批博士、硕士等高学历专业技术人才,自主产权专利三十多个,软件著作权六十多个,跻身国家高新技术企业,并荣获CMMI5级认证软件企业,北京市专精特新“小巨人”企业。 国能日新总公司设在北京,并在武汉设有分公司;主要为新能源集团侧客户,新能源电网侧客户和新能源中小型企业及政府客户提供能源数据管理、智慧电站服务、智慧电网服务和电力交易类服务,功率预测类产品稳居行业翘楚地位。拥有千余家客户资源,具备丰富的实践经验,基于大数据的精准服务,为新能源发展保驾护航。 我们致力于将清洁能源带入每个人,每个家庭,每个城市,每个国家,构建清洁能源的纯净世界。