數(shù)據(jù)開發(fā)
2-3萬元/月1.Flink實(shí)時(shí)計(jì)算開發(fā)能力,基于Flink開發(fā)高可靠、高性能的實(shí)時(shí)數(shù)據(jù)處理任務(wù),優(yōu)化Flink作業(yè)性能,解決反壓、Checkpoint失敗、狀態(tài)恢復(fù)等生產(chǎn)環(huán)境問題,設(shè)計(jì)并實(shí)現(xiàn)Exactly-Once語義的數(shù)據(jù)處理鏈路,保障端到端一致性
2.元數(shù)據(jù)管理系統(tǒng),構(gòu)建元數(shù)據(jù)采集、實(shí)現(xiàn)數(shù)據(jù)血緣追蹤和影響分析功能
3.數(shù)據(jù)質(zhì)量體系,設(shè)計(jì)并實(shí)現(xiàn)多維度數(shù)據(jù)質(zhì)量檢測(cè)框架(完整性、準(zhǔn)確性、時(shí)效性等),開發(fā)自動(dòng)化數(shù)據(jù)質(zhì)量監(jiān)控系統(tǒng),支持規(guī)則配置、異常告警
任職資格:
1.編程能力,5年以上Java/Scala或Python開發(fā)經(jīng)驗(yàn),精通Flink開發(fā)(DataStreamAPI/TableAPI),有生產(chǎn)環(huán)境調(diào)優(yōu)經(jīng)驗(yàn)
2.大數(shù)據(jù)技術(shù)棧,精通Kafka,熟悉消息隊(duì)列原理與優(yōu)化,熟練使用Hadoop/Hive/Spark等生態(tài)組件
3.工程能力,熟悉分布式系統(tǒng)設(shè)計(jì),能處理高并發(fā)場(chǎng)景,良好的SQL優(yōu)化和數(shù)據(jù)建模能力

深圳福田區(qū)深圳新一代產(chǎn)業(yè)園4棟
相關(guān)推薦查看更多 >
深圳
相同職位推薦
企業(yè)招聘
職位大全
相關(guān)搜索