职位详情
资深大数据开发工程师
15000-20000元
应届毕业生 本科
职位描述
岗位描述:
1. 负责Kafka分层存储/存算分离、流批一体架构的研发落地工作,与流计算引擎(flink)、OLAP(clickhouse/starrocks)、数据湖技术(iceberg)共同构建统一的实时数仓体系,提供更高时效的数据serving能力
2. 负责消息中间件的内核开发与优化工作,提升Kafka在多机房/多云架构下的容灾能力、流量调度和集群迁移能力,保障服务的稳定和高效
3. 参与Kafka的日常运维,并且能通过技术手段不断优化提升自动化运维水平,让更多力量能用在核心项目的攻坚落地
4. 熟悉ElasticSearch,并且能够根据业务需求实现高效的索引编排和分词优化
5. 参与公司大数据平台建设,包括数据接入、数据存储、数据计算、数据服务、数据安全等,提升公司数据价值


岗位要求:
1. 本科及以上学历,3-5年以上开发经验
2. 熟练掌握Scala/Java/Python一种或多种语言
3. 具备扎实的操作系统、网络、数据结构和算法能力
4. 熟悉Kafka/RocketMQ等消息产品的底层原理,具有1年以上相关开发经验

联系方式
203人关注 收藏职位 投递简历