好猎头网-中高级人才猎头网站!服务热线:400-1801-668 好猎头   |   登录 注册
首页 > 人才求职

爬虫高级工程师

刷新时间:10小时前

协合运维

15-30万

丰台区 | 本科 | 1年以下

基本信息
工作地点:丰台区
招聘人数:1 人
职位描述

1、负责web端数据的爬取、清洗、解析、入库2、熟练掌握Python编程语言,熟悉****,熟悉fastapi后端服务构建;3、熟练使用数据库,掌握redis、pgsql、mysql等;4、数量使用docker进行服务部署;5、熟悉各种抓取技术,包括爬虫反爬、代理、验证码处理;6、熟练使用正则表达式、xpath等,能够从结构化的和非结构化的数据中获取信息;7、掌握常见的反爬机制,精通各种反爬破解,包括但不限于:hook、Js防护、混淆、逆向分析等技能;8、参与设计与优化分布式网络爬虫系统,熟悉采集系统的调度策略,实时监控爬虫的进度和警报反馈;任职要求:1、编程能力:精通Python,熟悉****,能使用FastAPI构建后端服务2、数据库:熟练使用PostgreSQL/MySQL进行数据存储,Redis实现缓存与去重3、精通XPath/正则表达式解析结构化与非结构化数据4、掌握代理IP池构建、请求伪装、动态渲染等技术5、备反爬破解能力(Hook技术、JS逆向、混淆代码分析等)6、有瑞数、国密算法逆向经验者优先7、熟练使用Docker容器化部署服务

岗位要求:
学历要求:本科 工作经验:1年以下
年龄要求:不限 性别要求:不限
语言要求:普通话
企业信息
公司性质:其它 公司规模:1000-9999人
所属行业:新能源/电力/水利,电力工程
企业介绍

北京协合运维风电技术有限公司(简称“协合运维”),是新能源行业综合型技术服务龙头企业。 公司成立于2007年,拥有超过17年的新能源电站运行维护、资产托管及技术服务经验。面向新能源发电设备、输变电设备、综合能源系统,提供基于数据驱动的设备预警、智能诊断、维修决策、现场运维、技改优化、备件供应与维修等一站式服务解决方案。公司目前服务管理300多个新能源交付单元,全球在运维容量突破3000万千瓦,拥有3000余人的专业服务团队。客户涵盖大型电力集团、地方国企、民营投资商、整机制造商,以及苹果基金等国内外知名企业。经过多年践行探索,公司形成北京总部管控支持、区域服务共享、电站标准化执行的三级管理模式,凭借强大的数据分析能力、完善的平台支持、专业的技术人员,提供安全、专业、可靠的新能源运营服务。

企业信息

协合运维

新能源/电力/水利,电力工程

1000-9999人

其它

北京市通州区经济开发区聚富苑产业园区聚和六街1号-0360

该企业其它职位更多>
推荐企业
二维码
微信扫一扫
用手机分享职位信息
丰台区最新发布职位