研发

大数据高级研发工程师

负责国际化推荐场景大数据系统设计与开发

字节跳动北京薪资未标注
研发FlinkKafkaJavaC++ScalaPython消息队列分布式系统
查看来源页最近更新:05/06 15:41

职位描述

团队介绍:字节跳动推荐架构国际化团队大数据方向,负责国际化推荐场景大数据的设计和开发,为业务提供标准化高性能的特征计算,保障系统稳定和高可用。

1、为大规模推荐系统设计和实现合理的数据系统;

2、生产系统的trouble-shooting,设计和实现必要的机制和工具保障生产系统整体运行的稳定性;

3、打造业界领先的流式计算框架等分布式系统,为海量数据和大规模业务系统提供可靠的基础设施。

职位要求

1、对大数据系统有深入的了解,在生产环境有TB级别Flink实时计算系统开发经验,深入掌握Flink DataStream、FlinkSQL、Flink Checkpoint、Flink State等模块,有Flink源码阅读经验优先;

2、熟悉常见消息队列原理和应用调优,有Kafka、Plusar、RocketMQ等项目源码阅读经验优先;

3、熟悉Java、C++、Scala、Python等编程语言,有强悍的编码和 trouble-shooting能力;

4、乐于挑战没有明显答案的问题,对新技术有强烈的学习热情,有PB级别数据处理经验加分;

5、有数据湖开发经验,熟悉Hudi、Iceberg、DeltaLake等至少一项数据湖技术,有源码阅读经验优先;

6、熟悉其他大数据系统经验者优先,YARN、K8S、Spark、SparkSQL、Kudu等;

7、有存储系统经验加分,HBase、Casscandra、RocksDB等。

岗位信息

经验要求3-5年
学历要求本科
岗位类型研发
来源企业官网
发布日期2023-08-07
链接状态检测有效性

相关岗位