二、Hadoop平臺架構師
工作職責:
1. 負責搭建、維護與管理Hadoop平臺,以及Haddop平臺上的數據存儲、維護與優化。
2. 參與基于Hadoop中間件的設計開發工作。
3. 參與離線處理流程和實時處理流程的設計開發工作。
任職要求:
1. 精通分布式數據處理,有三年以上的Hadoop相關開發經驗(Hive,Spark,HBase,Sqoop,Flume等)。
2. 熟悉數據倉庫邏輯架構,熟悉ETL流程、元數據管理、數據質量監控等數據倉庫主要環節。
3. 熟悉Java、Python等開發語言,精通MapReduce,能編寫Hive UDF,熟悉shell腳本。
4. 有較強的ETL性能優化及問題分析、解決能力。
5. 對技術有激情,對代碼有苛刻要求。
6. 有良好的快速學習能力和團隊協作能力。
7. 有高度責任感和敬業精神,善于溝通,積極主動,能夠以目標為導向理解工作中相關任務的處理優先級關系。
工作職責:
1. 負責搭建、維護與管理Hadoop平臺,以及Haddop平臺上的數據存儲、維護與優化。
2. 參與基于Hadoop中間件的設計開發工作。
3. 參與離線處理流程和實時處理流程的設計開發工作。
任職要求:
1. 精通分布式數據處理,有三年以上的Hadoop相關開發經驗(Hive,Spark,HBase,Sqoop,Flume等)。
2. 熟悉數據倉庫邏輯架構,熟悉ETL流程、元數據管理、數據質量監控等數據倉庫主要環節。
3. 熟悉Java、Python等開發語言,精通MapReduce,能編寫Hive UDF,熟悉shell腳本。
4. 有較強的ETL性能優化及問題分析、解決能力。
5. 對技術有激情,對代碼有苛刻要求。
6. 有良好的快速學習能力和團隊協作能力。
7. 有高度責任感和敬業精神,善于溝通,積極主動,能夠以目標為導向理解工作中相關任務的處理優先級關系。
職位類別: 高級軟件工程師
舉報
- 公司規模:50 - 99人
- 公司性質:股份公司
- 所屬行業:IT行業-計算機、互聯網、通訊、電子、儀器儀表等
- 所在地區:上海-浦東新區
- 聯系人:徐方典
- 手機:會員登錄后才可查看
- 郵箱:會員登錄后才可查看
- 郵政編碼:201203
工作地址
- 地址:金科路2889弄長泰廣場C座10層1004室






