核心職責(zé):
1.負(fù)責(zé)設(shè)計(jì)并構(gòu)建公司級(jí) 湖倉(cāng)一體(Lakehouse) 數(shù)據(jù)平臺(tái),主導(dǎo)基于 doris/Apache Iceberg/Hudi/Delta Lake 的架構(gòu)設(shè)計(jì)與開(kāi)發(fā)。
2.推動(dòng) 智能化數(shù)據(jù)治理 體系落地,主導(dǎo)開(kāi)發(fā)與管理 元數(shù)據(jù)、數(shù)據(jù)血緣、數(shù)據(jù)質(zhì)量 核心模塊,引入AI驅(qū)動(dòng)能力。
3.精通 Spark/Flink 等計(jì)算引擎,進(jìn)行深度性能調(diào)優(yōu),保障海量數(shù)據(jù)加工處理的高效與穩(wěn)定。
必備要求:
1.學(xué)歷背景: 碩士學(xué)歷,畢業(yè)于985/211院校
2.工作經(jīng)驗(yàn): 5年及以上大數(shù)據(jù)開(kāi)發(fā)經(jīng)驗(yàn),有 知名互聯(lián)網(wǎng)大廠 或 JG央企 背景。
3.技術(shù)棧: 必須精通 Scala/Java,有豐富的 湖倉(cāng)一體 實(shí)戰(zhàn)經(jīng)驗(yàn),熟悉 數(shù)據(jù)治理 工具(如Apache Atlas),具備云平臺(tái)(阿里云/AWS等)使用經(jīng)驗(yàn)。