崗位職責(zé):1.負(fù)責(zé)大數(shù)據(jù)平臺的搭建、發(fā)布部署及相關(guān)維護(hù)工作;2.負(fù)責(zé)系統(tǒng)的運(yùn)維和主動(dòng)預(yù)防,搭建監(jiān)控機(jī)制以及及時(shí)發(fā)現(xiàn)集群問題,持續(xù)提升系統(tǒng)可用性與穩(wěn)定性;3.跟進(jìn)并處理系統(tǒng)事件,對系統(tǒng)問題及故障解決跟蹤優(yōu)化,負(fù)責(zé)服務(wù)狀況與服務(wù)質(zhì)量報(bào)告,不斷提升集群服務(wù)質(zhì)量;4.梳理優(yōu)化業(yè)務(wù)使用集群的流程和規(guī)范,使集群使用在資源利用、質(zhì)量等方面均達(dá)到較高水平;5.日常跟蹤業(yè)界技術(shù)發(fā)展動(dòng)態(tài),并結(jié)合業(yè)務(wù)發(fā)展需求,研究引入合適的技術(shù)。任職要求:1.3年以上中等規(guī)模集群環(huán)境下的Hadoop/Impala/Hive/Spark集群相關(guān)運(yùn)維經(jīng)驗(yàn);2.對各種HDFS/Yarn/Hive/Impala/Spark/Hbase等相關(guān)參數(shù)調(diào)優(yōu), 性能優(yōu)化等有實(shí)際經(jīng)驗(yàn);3.有實(shí)際踩坑經(jīng)歷, 對于相關(guān)組件的版本跟進(jìn), 補(bǔ)丁跟蹤, bug追蹤等有相關(guān)經(jīng)驗(yàn);4.了解如何處理過各種集群在線版本升級, 數(shù)據(jù)遷移, 集群擴(kuò)容, 穩(wěn)定性監(jiān)控等工作;5.了解計(jì)算機(jī)網(wǎng)絡(luò),熟悉linux,熟悉shell、perl或python等語言;6.熟悉Oracle數(shù)據(jù)庫技術(shù),熟悉Data Stage等ETL工具優(yōu)先;7.熟悉中間件技術(shù),如KafKa、weblogic、MQ等技術(shù);8.積極主動(dòng)、學(xué)習(xí)能力強(qiáng)、溝通能力強(qiáng)、肯吃苦耐勞;
舉報(bào)
舉報(bào)
大數(shù)據(jù)開發(fā)工程師職業(yè)大全:

- 所在地區(qū):廣東-深圳市
- 聯(lián)系人:薛小姐
- 手機(jī):會(huì)員登錄后才可查看
- 郵箱:會(huì)員登錄后才可查看
- 郵政編碼:
工作地址
- 地址:深圳市福田區(qū)天安數(shù)碼城天祥大廈AB座10A 、5B2