职位描述
岗位描述:参与大数据部门基础设施运维与开发,通过深入集群和数据链路管理和优化,配合自动化监控报警提供数据服务保障,进行基础设施资源化服务化对外输出能力建设团队影响力岗位职责:1、负责公司级大数据业务集群/组件的运维和开发工作,提供稳定高效的基础设施,涵盖存储、计算、服务和资源管理、OLAP引擎等核心组件;2、负责集群容量规划,治理,扩容以及性能优化,确保集群资源高效利用和稳定运行;3、设计实现大规模分布式集群的运维/监控/管理平台,通过自动化运维工具来提高团队工作效率;4、开发数据链路任务,维护在线服务,保证数据完整性和实效性。和数仓/平台协作构建离线和实时数据服务,驱动业务发展5、关注大数据技术,AI发展趋势、研究开源技术、持续优化基础服务架构并推广落地;岗位要求:1、计算机、通信、数学、统计相关专业本科及以上学,3年以上相关工作经历;2、熟练掌握Python/Java/Scala中至少一门开发语言,有扎实的编程基本功,熟练使用Shell,具备开发能力;3、熟悉Hadoop生态圈,熟悉HDFS//Hive/kafka/Spark/f****/ClickHouse/StarRocks/Trino/Yarn/K8s等开源项目,有独立部署维护能力;4、对F****流式计算框架/Spark streaming深入了解,有K8s 部署维护、开发经验者优先;5、熟悉Linux操作系统的配置、管理及优化,能够独立排查及解决操作系统层面的问题。
企业介绍
About Garena:Garena是互联网公司Sea集团的游戏业务部门。Sea集团旨在通过提供通讯、支付、移动电子商务和游戏娱乐等服务,为东南亚用户和中小企业创造便利、改善生活。Garena业务涉及游戏、电子竞技和游戏平台,我们希望通过游戏社交,串联世界各地的玩家。· 集团成立于2009年· 总部位于新加坡,在全球多个国家和地区设有分公司· 多元化的团队,员工来自世界各地· 2017年10月于美国纽交所上市游戏、电子竞技和游戏平台是公司的立足之本,Garena在东南亚和港台地区成功代理和运营多款网络游戏,包括英雄联盟(LOL)、FIFA Online等。近年来,随着Garena上海游戏研发中心的成立,我们组建了强有力的研发团队,致力于自主研发和本地化发行。如今由上海团队制作、研发的手游,在海外多个地区上线后均取得了佳绩。未来,Garena上海希望能够继续在游戏研发上投入更多的精力和热情,为世界各地的玩家输送更有趣、更精良的游戏产品。