徐汇etl数据开发工程师招聘_上海徐汇etl数据开发工程师招聘_上海城市地理信息系统发展有限公司招聘-上海人才网

当前位置：首页> 列表 >职位详情

etl数据开发工程师

18000元以上

上海

应届毕业生

本科

全勤奖
节日福利
不加班
周末双休

上海城市地理信息系统发展有限公司

最近更新

161人关注

已申请立即申请收藏职位

职位描述

该职位还未进行加V认证，请仔细了解后再进行投递！

岗位描述：
1. 负责Kafka分层存储/存算分离、流批一体架构的研发落地工作，与流计算引擎(flink)、OLAP(clickhouse/starrocks)、数据湖技术(iceberg)共同构建统一的实时数仓体系，提供更高时效的数据serving能力
2. 负责消息中间件的内核开发与优化工作，提升Kafka在多机房/多云架构下的容灾能力、流量调度和集群迁移能力，保障服务的稳定和高效
3. 参与Kafka的日常运维，并且能通过技术手段不断优化提升自动化运维水平，让更多力量能用在核心项目的攻坚落地
4. 熟悉ElasticSearch，并且能够根据业务需求实现高效的索引编排和分词优化
5. 参与公司大数据平台建设，包括数据接入、数据存储、数据计算、数据服务、数据安全等，提升公司数据价值

岗位要求：
1. 至少本科及以上学历，3-5年以上开发经验
2. 熟练掌握Scala/Java/Python一种或多种语言
3. 具备扎实的操作系统、网络、数据结构和算法能力
4. 熟悉Kafka/RocketMQ等消息产品的底层原理，具有1年以上相关开发经验

5.有大型ETL项目经验

联系方式

点击查看

注：联系我时，请说是在上海人才网上看到的。