360系统部是公司大数据基础架构团队,负责公司大数据和人工智能平台的建设,旨在为公司的业务部门提供统一的分布式计算、存储、人工智能等基础服务。系统部成立于2010年,一直致力于大数据生态系统,包括Hadoop、Spark、Storm、HBase、Cassandra、Druid、Kafka、Flink、XLearning等开源系统的研究和优化。目前,平台存储规模达EB级、数万台服务器、每天支撑数十万作业运行。团队追求Geek技术,这里有开源大牛、技术畅销书作者以及关怀备至的导师。如果你有志于在大数据和人工智能领域深耕专研并成为行业专家,系统部是你最佳的选择。
职责:
1. 参与下一代分布式计算引擎(实时、非实时混合)的设计和开发
2. 参与Flink框架的DFX能力构建以及性能优化
3、参与Flink开源社区的支撑
要求:
1. 计算机软件、数学等相关专业,本科以上学历;
2. 计算机基础知识(网络、操作系统、分布式基础等)扎实;
3. Java知识扎实;
4. 对Hadoop,Spark,Flink,Storm等分布式系统有所了解,有实战经验者尤佳;
5. 实习时间要求三个月以上
简历请发送到邮箱:342689740@qq.com
附加题
场景:kafka作为flink作业输入<channel, uid>数据,根据channel值keyby到某窗口算子计算该channel各时间段内的uv值,如果某channel数据量远大于其他channel,发生数据倾斜;为什么从flink的机制上看没有发生反压?
如果能够复现上述场景,并给出合理解释者免予面试。
--
FROM 218.30.116.*