资深大数据开发工程师
15000-20000元
应届毕业生
本科
职位描述
岗位描述:
1. 负责Kafka分层存储/存算分离、流批一体架构的研发落地工作,与流计算引擎(flink)、OLAP(clickhouse/starrocks)、数据湖技术(iceberg)共同构建统一的实时数仓体系,提供更高时效的数据serving能力
2. 负责消息中间件的内核开发与优化工作,提升Kafka在多机房/多云架构下的容灾能力、流量调度和集群迁移能力,保障服务的稳定和高效
3. 参与Kafka的日常运维,并且能通过技术手段不断优化提升自动化运维水平,让更多力量能用在核心项目的攻坚落地
4. 熟悉ElasticSearch,并且能够根据业务需求实现高效的索引编排和分词优化
5. 参与公司大数据平台建设,包括数据接入、数据存储、数据计算、数据服务、数据安全等,提升公司数据价值
1. 负责Kafka分层存储/存算分离、流批一体架构的研发落地工作,与流计算引擎(flink)、OLAP(clickhouse/starrocks)、数据湖技术(iceberg)共同构建统一的实时数仓体系,提供更高时效的数据serving能力
2. 负责消息中间件的内核开发与优化工作,提升Kafka在多机房/多云架构下的容灾能力、流量调度和集群迁移能力,保障服务的稳定和高效
3. 参与Kafka的日常运维,并且能通过技术手段不断优化提升自动化运维水平,让更多力量能用在核心项目的攻坚落地
4. 熟悉ElasticSearch,并且能够根据业务需求实现高效的索引编排和分词优化
5. 参与公司大数据平台建设,包括数据接入、数据存储、数据计算、数据服务、数据安全等,提升公司数据价值
岗位要求:
1. 本科及以上学历,3-5年以上开发经验
2. 熟练掌握Scala/Java/Python一种或多种语言
3. 具备扎实的操作系统、网络、数据结构和算法能力
4. 熟悉Kafka/RocketMQ等消息产品的底层原理,具有1年以上相关开发经验
联系方式
推荐职位
-
建筑机电设计经理 30000-40000元滨江区 本科 应届毕业生 2024-06-08网易(杭州)网络有限公司
-
蚂蚁集团-消费者权益保护专家-客权 30000-50000元西湖区 本科 应届毕业生 2024-06-08蚂蚁科技集团股份有限公司
-
资深前端开发工程师 - 飞书项目 30000-60000元西湖区 本科 应届毕业生 2024-06-08北京字节跳动网络技术有限公司
-
淘天集团-阿里资产-前端工程师 10000-20000元余杭区 本科 应届毕业生 2024-06-08阿里巴巴(中国)有限公司
-
UE客户端开发工程师(战斗/3C方向)-【游戏事业部】 40000-80000元滨江区 本科 应届毕业生 2024-06-08北京快手科技有限公司
-
策略分析专家 8000-10000元萧山区 本科 应届毕业生 2024-06-08北京小桔科技有限公司