职位描述
职责:1. 设计与开发ETL流程:2. 数据管道优化:3. 数据集成与管理:4.GCP Dataflow开发:6. 自动化与监控:7. 数据治理与安全:8. 文档与知识共享:任职要求:- 教育背景:- 计算机科学、信息系统或相关领域的学士学位。- 经验:- 至少5年数据工程或ETL开发行业经验,重点关注Data Stage和GCP。- 有设计和实施ETL解决方案的经验,包括数据建模、数据仓库和SQL开发。- 技术技能:- 熟悉云服务(如BigQuery、Dataflow、Cloud Storage、Pub/Sub)及其在数据工程中的应用。- 有基于云的解决方案经验,尤其是GCP,持有云认证者优先。- 具备批处理和流式处理的大数据经验,熟悉大数据生态系统(如Hadoop、HBase、Hive、MapReduce、Kafka、F****、Spark等)。- 熟悉Java和Python在云/大数据平台上的数据操作。
企业介绍
软通动力——中国领先的技术服务提供商及全球客户首选合作伙伴
软通动力是中国领先的技术服务提供商,立足中国,服务全球市场。软通动力具有端到端“软件+服务”综合服务能力,服务范围包括:咨询服务、解决方案及系统集成服务、IT外包及业务流程外包服务等。在高科技/通信、银行/企业金融/保险、电力/能源/水务/环保、交通/物流、汽车/制造、零售/电商等10多个重要行业及业务领域,软通动力具有强大的纵深服务优势。
过去,软通动力深刻理解客户需求,是企业盈利和成长的最佳合作伙伴;今天,软通动力充分把握科技大势,借助云计算、移动互联、大数据等新兴技术手段,和合作伙伴一起推出创新型解决方案,致力于帮助我们的客户成为智慧的政府和智慧的企业;未来,软通动力将不懈努力,以创新思维和领先技术,为客户创造可持续的价值。
软通动力于2001年创立,全球总部设于北京,在全球设有30多个分支机构,28个交付中心。员工总数超过1万8千人,服务数百家中国及海外客户。