大數(shù)據(jù)運維工程師的崗位職責模板

1、大數(shù)據(jù)運維工程師的崗位職責模板大數(shù)據(jù)運維工程師需要負責銀行各類應用系統(tǒng)的運維標準制定和運維管理等工作。下面是小編為您精心整理的大數(shù)據(jù)運維 工程師的崗位職責模板。大數(shù)據(jù)運維工程師的崗位職責模板 1職責：負責公司大數(shù)據(jù)業(yè)務集群的運維工作、集群容量規(guī)劃、擴容及性能優(yōu)化；設計實現(xiàn)大規(guī)模分布式集群的運維、監(jiān)控和管理平臺；參與業(yè)務架構設計，在設計階段給出可運維性改進建議；深入研究大數(shù)據(jù)業(yè)務相關運維技術，持續(xù)優(yōu)化集群服務架構，探索新的大數(shù)據(jù)運維技及發(fā)展方向；負責公司大數(shù)據(jù)平臺的應用監(jiān)控、容量管理，應急響應等；領導安排的其他工作。1、本科及以上學歷，軟件工程、計算機等相關專業(yè)；2、熟悉計算機原理、網(wǎng)絡原理等知

2、識；至少2年以上運維或 開發(fā)工作經(jīng)驗；3、搭建，管理及調優(yōu)Hadoop/HBase/Hive/Flink/Spark/Kafka/Elasticsearch/Flume 等開源 項目優(yōu)先；4、至少掌握java/python/go中的一種語言；5、熟悉 HBase/Flink/mysql/redis 運維優(yōu)先；6、熟悉 zabbix/graphit/grafana 力口分;7、具有很強的分析和解決問題的能力；8、具有攻克難題的強烈興趣，以及提升技術能力的意愿；9、善于主動學習，責任心強，能夠承受較大的工作壓力。大數(shù)據(jù)運維工程師的崗位職責模板2職責：1 .負責公司核心集群的運維工作，保證其高可用和

3、穩(wěn)定性。2 .負責集群容量規(guī)劃、擴容及集群性能優(yōu)化3 .深入研究大數(shù)據(jù)業(yè)務相關運維技術，持續(xù)優(yōu)化集群服務 架構，探索新的Hadoop運維技術及發(fā)展方向。4 .設計實現(xiàn)分布式集群的運維、監(jiān)控和管理平臺。職位要求：1.2年以上中等規(guī)模集群環(huán)境下的 Hadoop/Impala/Hive/Spark 集群相關運維經(jīng)驗。2 .對各種 HDFS/Yarn/Hive/Impala/Spark/Hbase 等相關參數(shù)調 優(yōu)，性能優(yōu)化等有實際經(jīng)驗。3 .有實際踩坑經(jīng)歷,對于相關組件的版本跟進,補丁跟蹤, bug追蹤等有相關經(jīng)驗。4 .實際處理過各種集群在線版本升級,數(shù)據(jù)遷移,集群擴容, 穩(wěn)定性監(jiān)控等工作。5 .

4、熟悉Kerberos安全認證系統(tǒng)，實施過集群權限管理 ,資源 隔離方面的方案規(guī)劃或二次開發(fā)工作。6 .有Cloudera的CM使用經(jīng)驗尤佳。大數(shù)據(jù)運維工程師的崗位職責模板3職責:1 .負責公司大數(shù)據(jù)業(yè)務集群的運維工作(Hadoop/Hbase/Hive/Presto/Yarn/Spark/Storm/Kafka/Elasticsearch /Flume等)確保高可用；2 .負責大數(shù)據(jù)平臺的日常部署、升級、擴容、遷移 ；3 .設計實現(xiàn)大規(guī)模分布式集群的運維、監(jiān)控和管理平臺；4 .參與業(yè)務架構設計，在設計階段給出可運維性改進建議；5 .深入研究大數(shù)據(jù)業(yè)務相關運維技術，持續(xù)優(yōu)化集群服務架構，探索新的

5、大數(shù)據(jù)運維技及發(fā)展方向；6 .兼顧應用系統(tǒng)的運維工作。任職要求：1 .要求掌握java、shell語言，有Spring Cloud微服務架構開 發(fā)經(jīng)驗的優(yōu)先；2 .了解Docker,可以做簡單應用；3 .熟悉Hadoop/Hbase/Hive/Storm/Spark/Kafka/Elasticsearch/Flume 等開 源項目優(yōu)先；4 .熟悉Linux操作系統(tǒng)的配置、管理及優(yōu)化，能夠獨立排查 及解決操作系統(tǒng)層面的問題；5 .掌握puppet、 kerberos應用的優(yōu)先;6 .良好的客戶服務意識，強烈的責任心和使命感，執(zhí)行力強， 富有團隊合作精神；7.對大數(shù)據(jù)方向運維有很高的熱情和興趣，能

6、主動學習了解 相關知識；大數(shù)據(jù)運維工程師的崗位職責模板4職責：1、負責公司服務器日常的維護，包括巡檢、故障排除、數(shù) 據(jù)備份等業(yè)務，保證服務器高質量、高效率運行狀態(tài)；2、負責公司大數(shù)據(jù)產(chǎn)品的現(xiàn)場實施，制定可靠的實施方案 ；3、負責公司大數(shù)據(jù)環(huán)境（hadoop生態(tài)）集群環(huán)境安裝、維護、 部署、優(yōu)化；【任職資格】1、至少2年服務器、大數(shù)據(jù)集群運維經(jīng)驗；2、精通linux運維命令，熟悉Linux的維護和管理，熟悉Shell 腳本開發(fā)，能看懂 Python/Scala優(yōu)先；3、熟悉大數(shù)據(jù)項目實施： 包括不限于hadoop、hive、kafka、hbase、spark、Kudu、Impala等大數(shù)據(jù)生態(tài)的

7、平臺搭建，監(jiān)控， 運維，調優(yōu)、生產(chǎn)環(huán)境；4、熟悉docker技術優(yōu)先；5、熟練使用git版本控制，jenkins持續(xù)集成工具優(yōu)先；6、具備強烈的進取心、自我學習能力，良好的溝通能力和團 隊合作意識。大數(shù)據(jù)運維工程師的崗位職責模板5職責：1、負責公司大數(shù)據(jù)平臺的部署、管理、優(yōu)化、監(jiān)控報警， 保障平臺服務7*24穩(wěn)定可靠高效運行；2、深入理解公司大數(shù)據(jù)平臺架構，發(fā)現(xiàn)弁解決性能瓶頸，支撐業(yè)務和數(shù)據(jù)量的快速增長；3、開發(fā)大數(shù)據(jù)自動化運維、監(jiān)控報警、故障處理相關腳本和工具；4、負責Hadoop/spark/Mysql等集群服務、業(yè)務監(jiān)控、持續(xù) 交付、應急響應、容量規(guī)劃等。任職要求：1、3年以上互聯(lián)網(wǎng)運維

8、相關工作經(jīng)驗，2年以上大數(shù)據(jù)平臺 運維相關工作經(jīng)驗；2、具備一定的故障排查能力，有良好的技術敏感度和風險 識別能力，精通一門以上腳本語言(shell/python等)，熟悉Http/Https、 TCP/IR SMTP等協(xié)議;3、熟悉Hadoop大數(shù)據(jù)生態(tài)圈，包括但不限于 CDH/HDFS/YARN/Hive/Hbase/Kafka/zookeeper/Spark/Flume/Impal a/Hue/Sqoop/Elasticsearch/kibana/MySQL/Oracle 等;4、熟悉Hadoop各組件的原理和實現(xiàn)，有實際部署維護、 管理(包括元數(shù)據(jù)管理)及優(yōu)化經(jīng)驗。弁擁有持續(xù)調優(yōu)能力，運維 管理過大規(guī)模數(shù)據(jù)平臺；5、熟悉Kubernetes(K8s)集群Docker在大數(shù)據(jù)環(huán)境場景的 使用；6、熟悉Linux(redhat/cento