团队介绍:
BIGO 大数据团队专注于在 PB 级别数据上实现快速迭代,用大数据分析技术赋能上层业务。具体负责面向公司所有业务建设 EB 级别的分布式文件存储、日均万亿消息队列和 50PB 规模的大数据计算,包括批、流、MPP 等多种计算架构,涵盖从数据定义、通道、存储与计算、数据仓库和 BI 等全链路技术栈。团队技术氛围浓厚,有众多开源软件的开发者,期待优秀的人才加入我们!
岗位职责:
- 设计实现大规模分布式计算平台,包括高吞吐的批量计算、高时效的流式计算、高效能的 OLAP 引擎等
- 持续优化性能、提升稳定性,为全公司提供高性能、高可用、低成本的计算服务
- 跟进前沿技术,探索新架构、新技术、新硬件,设计下一代分布式计算系统
- 深入理解业务,抽象并构建实时数仓、业务监控、在线机器学习等大数据解决方案
岗位要求:
- 计算机或相关专业本科以上学历。
- 熟悉 Hadoop/Spark/Flink/Yarn/Presto/ClickHouse 等任一项主流开源技术,具备类似技术的引擎研发经验;
- 对分布式数据计算或数据分析的原理、架构及使用调优有一定经验和深入见解者优先;
- 熟练掌握 Java 或 C++,网络编程和多线程编程技术
- 具备扎实的编程能力,良好的工程素养,团队合作能力和沟通能力强,抗压能力强,具有较强的自我驱动力;