大數據運維工程師的工作職責（精選19篇）
大數據運維工程師的工作職責 篇1
職責：
1、負責和參與公司大數據基礎架構平臺規劃，運維，監控和優化工作，保障數據平臺服務的穩定性和可用性;
2、研究大數據前沿技術，改進現有系統的服務和運維架構，提升系統可靠性和可運維性;
3、負責和參與自動化運維系統及平臺的建設;
4、負責優化部門運維流程提升運維效率。
任職要求：
1、統招本科及以上學歷，計算機相關專業，2年以上互聯網運維工作經驗;
2、熟悉Linux操作系統及常見開源軟件(Nginx,Tomcat,Zabbix等)的配置，管理及優化，能夠獨立排查及解決操作系統層的各類問題;
3、熟悉Hadoop/Kafka/Hbase/Spark/Elasticsearch/Hive的組件原理及運維方式;
4、精通Python,shell,了解JAVA;有良好的系統性能優化及故障排除能力;
5、具有很強的責任心、執行力、服務意識、學習能力和抗壓能力;
6、具備較好的溝通能力、主動性和團隊合作精神。
大數據運維工程師的工作職責 篇2
職責：
1、負責大數據平臺架構的規劃、設計、搭建;
2、負責大數據平臺的運維保障工作;
3、負責運維相關數據分析，以及報表產出;
4、為線上服務高效穩定運行負責，支撐業務和數據量的快速擴張;
5、深入理解大數據平臺架構，發現并解決重大故障及性能瓶頸;
6、研究跟進大數據架構領域新技術并分享。
工作要求：
1、熟悉大數據產品生態圈，包括但不限于HDFS、YARN、Hive、HBase、Spark等;
2、精通Linux/Unix系統;
3、有數據分析經驗優先，精通一門以上腳本語言(shell/perl/python等)，熟悉java/C/C++/Golang等開發語言一種及以上;
4、有2年以上大數據平臺相關運維開發經驗，了解分布式平臺運行的原理，并有實際部署維護經驗;
5、學習能力和主動性強，具有鉆研精神，充滿激情，樂于接受挑戰;
6、良好的服務意識，善于團隊協作，項目管理，主動思考，自我驅動力強。
大數據運維工程師的工作職責 篇3
1.負責公司大數據業務集群的運維工作(Hadoop/Hbase/Hive/Yarn/Spark/impala/kudu等)確保集群環境的穩定可用;
2.負責集群容量規劃、擴容及性能優化;
3.負責大數據集群性能監控與優化，故障處理，數據備份及容災恢復，集群出現異常時，能快速定位問題，并及時給出解決方案;
4.設計實現大規模分布式集群的運維、監控和管理平臺;
5.參與/主導業務架構設計，在設計階段給出可運維性改進建議;
6.深入研究大數據業務相關運維技術，持續優化集群服務架構，探索新的大數據運維技術及發展方向;
7.參與例如服務器維護、項目維護、監控維護等常見運維事務
大數據運維工程師的工作職責 篇4
職責：
1、負責Hadoop、HBase、Hive、Spark等大數據平臺 規劃、部署、監控、系統優化等，確保高可用;
2、負責公司大數據平臺的運維管理工作，集群容量規劃、擴容及性能優化;
3、處理公司大數據平臺各類異常和故障，確保系統平臺的穩定運行;
4、設計實現大規模分布式集群的運維、監控和管理平臺;
5、深入研究大數據業務相關運維技術，持續優化集群服務架構，探索新的大數據運維技及發展方向;
6、為數據倉庫、數據挖掘建模等數據應用項目提供運行環境支持。
崗位要求：
1、掌握Linux操作系統的配置，管理及優化，能夠獨立排查及解決操作系統層的各類問題;
2、熟練掌握Python, shell中的至少一門語言，有Python運維工具開發經驗優先;
3、熟悉 Hadoop生態及高性能緩存相關的各種工具并有實戰經驗，包括但不限于Hadoop、HBase、Hive、Spark、impala、zookeeper、kafka、Elasticsearch、oozie、yarn、Scribe、Flume、Storm等;
4、具有集群運維經驗，以及大負載下的容量評估、問題定位、架構優化等能力優先;有分布式系統(計算/存儲)開發經驗優先;
5、熟悉zabbix/ganglia/Prometheus/grafana系統的組合構件及使用;
6、精通ELK系統，有過大規模ELK配置管理、調優經驗，有過ElasticSearch搜索和分析引擎開發經驗者優先;
大數據運維工程師的工作職責 篇5
職責：
1. 完成大數據平臺日常運維工作(上線/日常監控/問題定位/腳本開發)，涉及HDP/Hadoop/Spark/Tensorflow/Flink/Storm/Presto/Kudu/Alluxio等開源組件;
2. 完成大數據自研平臺工具運營，比如報表平臺、調度平臺和性能監控平臺;
3. 提升系統可靠性，完善監控策略，優化運維流程，提升部門運維效率，保證7*24服務;
4. 參與開源社區建設，提升公司開源影響力;
任職條件：
1. 熟悉Hadoop工作原理，熟悉Hadoop、Hive、Storm、Presto、Flink、 Alluixo、Kudu等開源組件的搭建、維護以及問題定位;
2. 熟悉Linux操作系統，熟練掌握Linux常用命令,了解ansible/puppet;
3. 熟練掌握shell/python/java;
4. 熟悉hive/spark sql工作原理，熟悉SQL語法，掌握數據庫的維護工作;
5. 對自動化運維有一定見解，使用過各種開源工具完成日常運維工作;
6. 有大數據平臺維護經驗優先;
7. 掌握dockerfile，了解大數據與k8s結合者優先;
8. 參與開源社區，有代碼貢獻或者高質量博客文章者優先;
大數據運維工程師的工作職責 篇6
職責：
1.包括應用版本發布、備份、部署、工單處理、監控等;
2.負責應用系統日常維護巡檢工作，編寫運行報告;
3.及時響應并快速定位故障，保障線上業務 724穩定運行;
4.負責業務運營日志數據的統計和分析;
5.負責收集業務平臺日常使用過程中出現問題和對應的產品、研發部門分析、排查和解決，最終優化軟件的性能;
6.負責外部信息對內的知會，內部需求討論結果對外的反饋;
7.能夠通過對日常問題的分析匯總編寫數據分析報告，優化工作流程、提升工作效率和服務質量;
任職要求：
1.全日制大專及以上學歷，計算機相關專業，一年以上相關工作經驗;
2.了解一定的數據庫原理知識;
3.具有較好的溝通、對接反饋及較強的團隊協作精神;
4.愛學習，好專研，耐得住繁瑣細碎的工作形式;
5.有業務系統運維經驗者優先;
6.熟練熟悉Apache、Tomcat、JBoss等中間件，以及Apache+Tomcat/JBoss的集群配置和管理優先;
7.有過云服務器維護經驗者優先;
大數據運維工程師的工作職責 篇7
職責：
1.服務器及應用的安裝、部署、維護、更新、監控等;
2.服務器相關資產管理;
3.負責處理平服務器臺各類故障，問題快速定位和解決;
4.服務器日常運維，應用等自動化、標準化、平臺化;
5.領導安排的其他相關工作。
職位要求：
1.本科及以上學歷，，具有2年以上Linux運維經驗，計算機、通信、信息技術等相關專業。
2.熟悉主流硬件，服務器DELL、HP、IBM等。對UNIX/Linux等操作系統有一定了解;
3.有安裝調試服務器的經驗，包括機架式服務器上架，做硬件raid，安裝操作系統等;
4.至少熟悉一種自動化運維工具，Ansible、 Puppet、SaltStack，無人值守Kickstart等;
5.至少熟悉一種虛擬化云平臺技術，vmware，kvm，citrix，xen，openstack等;
6.良好的溝通能力、學習能力、團隊意識、積極的工作態度;
大數據運維工程師的工作職責 篇8
職責：
1、負責公司Linux服務器的維護、備份、調優;
2、負責本地服務器提供的計算機環境的部署;
2、負責設計實現與運維相關的自動化工具或系統;
4、能夠熟練排查運維過程中出現的服務故障、系統故障、網絡故障;
職位要求：
1.計算機相關專業，2-5年工作經驗，服務過技術型公司;
2.熟練掌握linux服務器的配置和管理，防火墻，VPN等技術;
3.熟練掌握各種軟硬件負載技術框架的安裝調試和技術支持，如lvs，nginx等
4.熟練使用Shell/Python腳本工具進行運維自動化;
5.熟悉GitLab/Wiki等相關技術，及有實際項目使用經驗;
6.有大數據處理軟件運營經驗者優先
大數據運維工程師的工作職責 篇9
職責：
1) 負責駐場保障拉薩機場的中航信離港前端軟件桌面級運維，主要覆蓋安裝、調試、故障受理與解決;
2) 負責西藏分公司拉薩機場離港系統服務器、小型機、網絡設備運維，主要工作包括日常監控、系統演練、應急流程處理、設備安裝于調試;
3) 負責轄區支線機場弱電系統與網絡設備運維，主要業務包括系統巡檢、駐場保障、項目實施等;
4) 負責轄區航空公司弱電系統運維，主要負責桌面級運維;
5) 負責協助業務人員，提供必要的計算機應用技術支持，挖掘客戶潛在需求;
6) 協助行政人員，提供必要的計算機應用技術支持;
任職要求：
1)全日制大專以上學歷，計算機科學與技術及相關專業畢業
2) 適應高原氣候，拉薩市海拔3500米，轄區支線機場海拔超過4000米;
3) 熟練使用OFFICE、WPS、網絡制圖等辦公軟件;
4) 具備優秀的計算機軟硬件知識，熟悉vmware、計算機組裝;熟悉UNIX或LINUX系統操作與維護;熟悉Windows系統運維;
5) 熟悉Oracle、SQLserver數據庫安裝與維護，熟悉 SQL指令;
6) 熟悉網絡設備指令，擁有CISCO企業網絡資質證書、華為資質證書、國家計算機軟考資質證書優先;
7) 愿意在西藏高原地區機場或全國其他機場中短期出差;
大數據運維工程師的工作職責 篇10
1.根據維護及工作要求，對設備、設施及系統進行現場/遠程檢查;
2.能對設備、設施及系統的問題進行簡單故常排除。
3.負責記錄巡檢及故障報告。
大數據運維工程師的工作職責 篇11
職責：
1、負責公司運維和技術支持團隊的日常管理;
2、負責高性能服務器集群、云服務器、虛擬機、大容量存儲設備、加速和鏡像設備的部署和管理;
3、維護各項基礎/應用服務，監控內部外部網絡設備，服務器運行狀態，保障業務穩定運行;
4、制定網絡和設備的運維規范和策略，并實現文檔化;
5、協助快速解決生產設備及環境重大故障或疑難問題，及時處理突發故障;
6、制定和優化運維解決方案，例如容災、防攻擊、擴容、備份等;
職位要求：
1、專科以上學歷，二年以上工作經驗
2、精通各類操作系統、數據庫、應用服務、虛擬化服務
3、精通各類服務器設備、網絡設備、安全設備、存儲設備
4、熟悉HTML、抓蟲，并從事過網站實施相關工作;
5、熟悉LVS的Linux Cluster技術、Nginx、Apache等常用的web服務器技術;;
6、熟悉常見服務器、網絡設備及防火墻等的配置;
7、熟悉VMWare或同類的虛擬化技術;;有大型互聯網產品運維經驗者優先。
大數據運維工程師的工作職責 篇12
職責：
1.負責網絡系統及部分應用系統的管理和運維;
2.硬件維護主要包括PC機/筆記本電腦/打印機/考勤機等終端設備的調配及維護并妥善記錄;
3.協助用戶解決用戶網絡運維問題，遠程或現場支持用戶的項目實施及運維操作;
4.對日常問題進行跟進，并做好記錄，定期提交相關運行報告和工作記錄報告;
5.完成上級交辦的其他工作。
任職要求：
1.計算機相關專業專科以上學歷，男女不限
2.掌握基本網絡知識，網絡故障排查
3.熟悉網絡軟硬件產品，能進行基本的安裝調試;
4。具有較強的溝通及組織協調能力、學習能力及較強的團隊合作精神
5.具有高度的責任心、獨立工作的能力并具備較強的分析、判斷和解決問題能力
6.能接受外派常駐。
大數據運維工程師的工作職責 篇13
職責：
負責公司全球數據中心Linux平臺的運營維護。
參與全球數據中心網絡及監控系統的維護與管理。
深入自動化部署及測試的研究，不斷完善運維流程，實現大規模服務器集群的智能化運維。
不斷挑戰和突破自我，運用云應用領域的前沿科技知識，幫助公司實現運維領域的重大革新。
技能要求：
計算機相關專業，兩年以上 Linux平臺的運維和管理經驗。
熟悉Apache、Nginx等Web Server的配置、優化與排錯。
熟悉MySQL等數據庫的配置、優化與排錯。
熟悉Shell或Python的腳本編寫。
有強烈的團隊協作意識，對工作嚴謹負責，對新技術和未知領域樂于探索。
大數據運維工程師的工作職責 篇14
職責：
1、負責系統運維，解答用戶疑問，處理異常;
2、負責系統用戶操作培訓;
3、負責收集并統計用戶系統需求及初步溝通及分析;
4、負責系統數據庫的基本維護檢查備份。
任職要求：
1、計算機或信息化管理等專業本科及以上學歷;
2、熟悉SQL Server/Postgresql數據庫，熟練掌握SQL 語句的運用;
3、有一定軟件開發語言基礎，熟悉C#語言者優先;
4、熟悉制造企業的生產流程，熟悉鞋服制造企業生產流程者優先;
5、抗壓能力強;
6、良好的溝通及理解能力。
大數據運維工程師的工作職責 篇15
職責:
1、負責云服務器的配置、部署、監控等工作，并通過開發工具持續提升工作效率
2、熟悉運維相關技術，包括運維自動化技術，虛擬化技術，監控技術，網絡技術，容器技術等;
3、協調開發，測試，運維等各個團隊，推進公司DevOps相關工作，提高線上產品運行質量;
4、主動發現生產環境的問題和隱患，通過開源運維工具或自研運維工具提高公司運維交付能力;
5、能夠運用主機監控、日志分析、APM、常用系統性能分析命令等工具進行復雜問題定位，快速響應和處理反饋的問題。
6、快速處理實際運行中遇到的各種系統故障，并對系統可能出現的故障問題進行預防;
7、負責生產環境網絡設備、負載均衡設備及相關業務服務的配置、管理、優化等工作;
任職資格:
1、3年以上大中型在線系統運維工作經驗(有互聯網運維經驗優先);
2、能熟練編寫 Shell或Python腳本，有Python編程能力者優先;
3、熟悉Windows、linux系統及常見服務的安裝配置優化，熟悉常見的負載均衡實現方案并有實際實施經驗(例如 Haproxy、Nginx、OpenResty、LVS等);
4、熟悉NoSQL(Redis、MongoDB、Elasticsearch)、MQ使用場景，能對其進行安裝、配置、調優及快速故障處理
5、熟悉服務器硬件安裝與調優，能夠熟練排查運維過程中出現的各種服務故障、系統故障、網絡故障、安全攻擊等問題，并進行快速處理響應。事后進行相關故障文檔記錄維護;
6、熟練數據庫(SQL Server、MySQL)原理，能對數據庫進行日常增刪查改操作，高可用部署，性能調優;
7、了解Docker、Kubernetes、微服務、持續集成相關知識，有實際運維經驗優先;
8、熟悉交換機、防火墻、路由器等網絡設備的管理和維護，有阿里云、騰訊云、AWS等云平臺的使用經驗優先;
9、具有很強的學習能力，對新技術能深入學習，有良好的團隊協作精神，勇于接受挑戰并能夠承受壓力，樂于和團隊分享技術
大數據運維工程師的工作職責 篇16
職責：
1、熟悉基礎網絡知識，熟悉TCP/IP協議工作原理;
2、熟悉WEB相關技術，包括Apache/Nginx/tomcat、Memcached/redis/mysql等應用服務的安裝、配置和維護;
3、熟悉服務器硬件，具備系統、應用軟件的報錯及故障定位、處理的能力;
4、檢測、跟蹤和分析流行安全漏洞、設計和實施防御方案。
任職要求：
1、專科及以上學歷，專業不限;
2、有linux理論基礎，熱愛技術崗位，能夠及時補充自己技術缺陷;
3、有團隊意識，責任心強，對自己有一定的規劃;
4、至少掌握Shell/Python其中一種腳本編程;
5、批量、自動化管理服務器集群的能力，有較強的技術文檔總結性工作的經驗。
大數據運維工程師的工作職責 篇17
職責：
1.負責卡中心開發測試環境的日常管理和維護工作。
2.負責與開發中心的開發人員溝通資源需求、統計資源狀態。
3.負責KVM虛擬化的的日常運維，包括資源擴容、虛擬機分配、虛擬機性能優化、虛擬機遷移、P2V、鏡像制作等操作。
4.負責IaaS平臺，包括問題描述跟進、配合廠商分析問題、測試和解決。
5.協助對云計算平臺進行日常的配置管理、更新、維護，負責系統架構和應用架構與云計算平臺整合。包括服務器安裝、應用部署、服務監控、故障處理。
6.負責開發測試虛擬機操作系統和數據庫中間件的維護，負責基礎軟件的安裝和配置。
7.負責總結經驗，編寫或修改文檔，完善操作手冊及知識庫。
職位要求：
1.精通Linux操作系統，熟悉shell或python編程。
2.精通OpenStack整體架構，具備基于OpenStack實戰部署運維經驗。
3.精通KVM虛擬化，熟悉KVM、QEMU、libvirt、VirtIO虛擬化相關管理操作命令。
4.熟悉MySQL、postgreSQL等數據庫維護。
5.熟悉nginx/redis以及負責均衡、web中間件的維護。
6.具有豐富的虛擬化故障應急處理能力與經驗，動手能力強，分析、歸納水平高，具備精確快速的故障定位和處理能力。
7.熟悉基礎二層網絡、路由網絡及虛擬化網絡相關配置。
大數據運維工程師的工作職責 篇18
1、負責現有軟件系統的運行維護及監控，提供IT軟硬件方面的服務和支持，保證系統的穩定，包括但不限于日常巡檢、問題排查、跟蹤和統計;
2、負責公司軟件系統的上線測試、協調、驗收和實施工作;
3、負責公司軟件系統關鍵用戶和使用用戶的日常培訓工作，制定詳細培訓計劃，及時解決或協調解決用戶使用系統過程中遇到的問題;
4、熟練掌握主流數據庫(SqlServer、mysql);
5.負責服務器網絡、防火墻、系統安全、病毒防護方案的部署與管理;
6工作積極主動、認真負責、勤勉、踏實、能吃苦的、可適應全國性短期出差。
大數據運維工程師的工作職責 篇19
1.負責Hadoop相關項目日常運行維護、故障排查工作;
2.負責Hadoop集群的監控和配置調優工作;
3.負責Hadoop平臺的用戶管理、權限分配、資源分配;
4.負責集群服務器軟件的安裝、維護、部署、更新;