团队介绍
北京大数据基础架构团队致力于为迪士尼流媒体平台提供稳定、高效的大数据基础设施服务。服务涵盖了自建集群数千个节点和云上的扩展业务,通过不断的优化基础架构平台和大数据处理引擎,为数据处理分析团队提供稳定、灵活的大数据任务运行环境。
岗位职责:
优化本地集群的开源组件,包括开源组件(HDFS,Spark,Flink等)的二次开发,打patch,调研并上线新特性。
云上集群运维管理服务的开发,包括集群管理,资源管理,权限管理等。
与多个团队,产品经理合作,分析用户需求,设计架构,开发并交付服务
建立产品技术文档,清晰的表达、分享技术实践
职位要求
计算机及相关专业的学士、硕士
3年及以上大数据领域开发经验
有一种或多种开源大数据服务或基础设施的开发运维经验,如HDFS,Yarn,HBase,Hive,Spark,Flink,Mapreduce,Tez,Presto,Cloudera,Databricks,EMR,EKS等。
有ETL,Streaming,OLAP等领域的开发运维经验。具有基本的架构设计,性能调优等能力
Java,Scala等编程语言开发经验。熟悉函数式编程。
优秀的理解和英语沟通能力。能够与不同时区,不同部门的开发人员协同合作。
有开发大数据开源组件的经验(如Spark,Flink,Presto,HBase,etc)
有开发高并发后端服务,性能调优的经验
如果对职位感兴趣,烦请把简历发送到lingbo.li@disney.com,并标注申请职位名称,谢谢
--
修改:Irene111 FROM 8.28.125.*
FROM 8.28.125.*