數(shù)據(jù)開發(fā)
1.5-1.9萬元/月2個數(shù)據(jù)開發(fā)人員,級別還是4-5級,技能要求如下:
??數(shù)據(jù)開發(fā)基礎(chǔ)??:SQL(復(fù)雜查詢、性能優(yōu)化)、腳本語言(Python/Shell)、Linux基礎(chǔ)(常用命令、文件操作、權(quán)限管理)。
??數(shù)據(jù)倉庫與建模??:數(shù)倉分層(ODS/DWD/DWS/ADS)、范式理論(3NF)、維度建模(星型/雪花模型)、指標(biāo)體系設(shè)計(原子指標(biāo)/派生指標(biāo)/復(fù)合指標(biāo))。
??大數(shù)據(jù)組件??:離線(Hadoop/HDFS、Hive、Spark、MapReduce)、實時(Flink、Kafka、SparkStreaming)、數(shù)據(jù)集成(Sqoop、DataX)、元數(shù)據(jù)管理(Atlas)、數(shù)據(jù)質(zhì)量監(jiān)控(Griffin、自研工具)。
??數(shù)據(jù)開發(fā)流程??:ETL/ELT設(shè)計、任務(wù)調(diào)度(Azkaban、Airflow、DolphinScheduler)、數(shù)據(jù)同步方案(全量/增量)、數(shù)據(jù)血緣與依賴管理。

上海靜安區(qū)興業(yè)數(shù)金
相關(guān)推薦查看更多 >
靜安區(qū)
相同職位推薦
企業(yè)招聘
職位大全
相關(guān)搜索
精選職位推薦
上海浦東新區(qū)招管道安裝/維修
面議上海浦東新區(qū)招幕墻安裝、電焊(建交委證)、工地小工
面議上海浦東新區(qū)招光伏安裝
面議招B照貨車司機(jī)
7000-8000元/月上海奉賢區(qū)招水磨石水洗石小工2名,工資面議月結(jié)。
100-300元/天