職位描述
該職位還未進行加V認證,請仔細了解后再進行投遞!
崗位職責:
1、負責數(shù)據(jù)庫Doris集群的部署;
2、負責基于Hadoop/Hive/Spark/Flink構建企業(yè)級離線/實時數(shù)據(jù)倉庫,支撐PB級數(shù)據(jù)存儲與計算;
3、設計并優(yōu)化ETL流程,實現(xiàn)多源異構數(shù)據(jù)(如MySQL、ORACLE、Kafka)的清洗、轉換與加載;
4、參與數(shù)據(jù)中臺架構設計,開發(fā)數(shù)據(jù)服務接口(如RESTful API)供業(yè)務系統(tǒng)調用;
5、診斷并解決Flink實時作業(yè)出現(xiàn)問題,通過調整并行度或優(yōu)化算子邏輯提升吞吐量;
6、保障數(shù)據(jù)中臺穩(wěn)定運行,實現(xiàn)自動巡檢與實時告警,報表需求閉環(huán)管理,保證業(yè)務正常使用;
7、實現(xiàn)數(shù)據(jù)庫性能優(yōu)化和高可用、災備設計方案。
任職要求:
1、本科及以上學歷,計算機科學或相關專業(yè),有3-5年行業(yè)工作經(jīng)驗;
2、精通Java/Scala/Python其中一項,熟悉Linux環(huán)境及Shell腳本編寫。
3、深入理解Hadoop生態(tài)(HDFS、YARN、Hive、Spark、Flink),掌握MapReduce/DAG計算模型
4、具備百萬級TPS場景調優(yōu)經(jīng)驗。
5、精通帆軟FineReport/FineBI,熟悉其數(shù)據(jù)集、參數(shù)、模板等核心功能,掌握DolphinScheduler架構,熟練使用。
6、熟悉Oracle/MySQL/Hive等數(shù)據(jù)庫,具備SQL調優(yōu)能力(如索引優(yōu)化、執(zhí)行計劃分析)。
7、主導過至少1個PB級數(shù)據(jù)倉庫建設項目,有Spark SQL優(yōu)化實戰(zhàn)經(jīng)驗,能通過執(zhí)行計劃分析解決數(shù)據(jù)傾斜問題,熟悉Doris/ClickHouse等OLAP引擎,具備列式存儲優(yōu)化經(jīng)驗。
1、負責數(shù)據(jù)庫Doris集群的部署;
2、負責基于Hadoop/Hive/Spark/Flink構建企業(yè)級離線/實時數(shù)據(jù)倉庫,支撐PB級數(shù)據(jù)存儲與計算;
3、設計并優(yōu)化ETL流程,實現(xiàn)多源異構數(shù)據(jù)(如MySQL、ORACLE、Kafka)的清洗、轉換與加載;
4、參與數(shù)據(jù)中臺架構設計,開發(fā)數(shù)據(jù)服務接口(如RESTful API)供業(yè)務系統(tǒng)調用;
5、診斷并解決Flink實時作業(yè)出現(xiàn)問題,通過調整并行度或優(yōu)化算子邏輯提升吞吐量;
6、保障數(shù)據(jù)中臺穩(wěn)定運行,實現(xiàn)自動巡檢與實時告警,報表需求閉環(huán)管理,保證業(yè)務正常使用;
7、實現(xiàn)數(shù)據(jù)庫性能優(yōu)化和高可用、災備設計方案。
任職要求:
1、本科及以上學歷,計算機科學或相關專業(yè),有3-5年行業(yè)工作經(jīng)驗;
2、精通Java/Scala/Python其中一項,熟悉Linux環(huán)境及Shell腳本編寫。
3、深入理解Hadoop生態(tài)(HDFS、YARN、Hive、Spark、Flink),掌握MapReduce/DAG計算模型
4、具備百萬級TPS場景調優(yōu)經(jīng)驗。
5、精通帆軟FineReport/FineBI,熟悉其數(shù)據(jù)集、參數(shù)、模板等核心功能,掌握DolphinScheduler架構,熟練使用。
6、熟悉Oracle/MySQL/Hive等數(shù)據(jù)庫,具備SQL調優(yōu)能力(如索引優(yōu)化、執(zhí)行計劃分析)。
7、主導過至少1個PB級數(shù)據(jù)倉庫建設項目,有Spark SQL優(yōu)化實戰(zhàn)經(jīng)驗,能通過執(zhí)行計劃分析解決數(shù)據(jù)傾斜問題,熟悉Doris/ClickHouse等OLAP引擎,具備列式存儲優(yōu)化經(jīng)驗。
工作地點
地址:和田地區(qū)策勒縣kpark四號樓16層
??
點擊查看地圖
詳細位置,可以參考上方地址信息
求職提示:用人單位發(fā)布虛假招聘信息,或以任何名義向求職者收取財物(如體檢費、置裝費、押金、服裝費、培訓費、身份證、畢業(yè)證等),均涉嫌違法,請求職者務必提高警惕。
職位發(fā)布者
1589..HR
無錫拈花灣文化投資發(fā)展有限公司
-
旅游·酒店·餐飲服務
-
1000人以上
-
國有企業(yè)
-
環(huán)山西路68號
相似職位
-
devops產(chǎn)品經(jīng)理(020730) 面議應屆畢業(yè)生 不限維沃移動通信有限公司
-
互聯(lián)網(wǎng)產(chǎn)品經(jīng)理(辦公協(xié)同方向)(020729) 面議應屆畢業(yè)生 不限維沃移動通信有限公司
-
游戲性能優(yōu)化專家(020403) 面議應屆畢業(yè)生 不限維沃移動通信有限公司
-
資深圖形算法專家(020401) 面議應屆畢業(yè)生 不限維沃移動通信有限公司
-
圖形顯示專家(020404) 面議應屆畢業(yè)生 不限維沃移動通信有限公司
-
CNC調機員 5000-7000元應屆畢業(yè)生 不限比亞迪股份有限公司

應屆畢業(yè)生
本科
最近更新
1509人關注
注:聯(lián)系我時,請說是在江蘇人才網(wǎng)上看到的。
