大數(shù)據(jù)運維工程師的具體職責描述(精選17篇)
大數(shù)據(jù)運維工程師的具體職責描述 篇1
職責:
1、負責分布式大數(shù)據(jù)平臺產(chǎn)品的運維和運維開發(fā),保證其高可用和穩(wěn)定性;
2、負責大數(shù)據(jù)系統(tǒng)架構的可運維性設計、容量規(guī)劃、服務監(jiān)控,持續(xù)優(yōu)化服務架構、集群性能;
3、通過技術手段控制和優(yōu)化成本,通過自動化工具及流程提升大數(shù)據(jù)平臺運維效率;
4、為項目開發(fā)人員提供大數(shù)據(jù)技術指導及解決大數(shù)據(jù)平臺應用中遇到的技術難題;
任職資格:
1、三年以上大數(shù)據(jù)運維相關工作經(jīng)驗,有大型互聯(lián)網(wǎng)公司工作經(jīng)驗者優(yōu)先,全日制本科及以上學歷;
2、熟練掌握至少一門開發(fā)語言,有Java或Python語言開發(fā)經(jīng)驗優(yōu)先;
3、精通Hadoop生態(tài)及高性能緩存相關的各種工具并有實戰(zhàn)經(jīng)驗,包括但不限于Hadoop、HBase、Hive、Presto、Kafka、Spark、Yarn、Flink、Logstash、Flume、ClickHouse等;
4、熟悉Mysql等常用關系數(shù)據(jù)庫,熟練編寫SQL語句,有分布式nosql數(shù)據(jù)庫應用、性能調優(yōu)經(jīng)驗優(yōu)先;
5、熟悉Linux環(huán)境,能夠熟悉使用shell腳本;
6、對大數(shù)據(jù)技術有強烈興趣,有志于往大數(shù)據(jù)方向深層次發(fā)展;
7、具有很強的責任心、執(zhí)行力、服務意識、學習能力和抗壓能力;
8、具備較好的溝通能力、主動性及責任感。
大數(shù)據(jù)運維工程師的具體職責描述 篇2
職責:
1、負責大數(shù)據(jù)集群的日常維護、監(jiān)控、異常處理等工作,保障集群穩(wěn)定運行;
2、負責大數(shù)據(jù)批處理管理以及運維;
3、負責大數(shù)據(jù)集群的用戶管理、權限管理、資源管理、性能優(yōu)化等;
4、深入理解數(shù)據(jù)平臺架構,發(fā)現(xiàn)并解決重大故障及性能瓶頸,打造一流的數(shù)據(jù)平臺;
5、跟進大數(shù)據(jù)前沿技術,不斷優(yōu)化數(shù)據(jù)集群;
6、有華為大數(shù)據(jù)平臺運維經(jīng)驗優(yōu)先;
崗位要求:
1、1年以上大數(shù)據(jù)運維或開發(fā)經(jīng)驗;
2、有良好的計算機和網(wǎng)絡基礎,熟悉linux文件系統(tǒng)、內(nèi)核、性能調優(yōu),TCP/IP、HTTP等協(xié)議;
3、熟悉大數(shù)據(jù)生態(tài),有相關(HDFS、Hive、Hbase、Sqoop、Spark、Flume、Zookeeper、ES、Kafka)的運維及開發(fā)經(jīng)驗;
4、熟練使用shell、python等腳本語言開發(fā)相關運維管理工具;
5、良好的文檔撰寫習慣;
大數(shù)據(jù)運維工程師的具體職責描述 篇3
職責:
1、負責數(shù)據(jù)平臺的運維管理工作(部署、監(jiān)控、優(yōu)化、故障處理);
2、負責Hadoop/Spark/Flink/Elasticsearch/Kafka等系統(tǒng)的架構審核、容量規(guī)劃、成本優(yōu)化;
3、負責大數(shù)據(jù)平臺的用戶管理、權限分配、資源分配;
4、參與數(shù)據(jù)挖掘、機器學習平臺的設計、并給出可執(zhí)行的運維方案;
5、參與數(shù)據(jù)平臺的相關工具開發(fā)(包括自動化部署、監(jiān)控、ETL等);
6、深入理解數(shù)據(jù)平臺架構,發(fā)現(xiàn)并解決故障隱患及性能瓶頸;
7、ETL工具、調度工具、關系型數(shù)據(jù)庫的運維。
任職資格:
1、本科以上學歷,計算機軟件相關專業(yè);
2、1年以上大數(shù)據(jù)相關組件運維經(jīng)驗(hadoop/yarn/hbase/hive/spark/kafka等),1年以上的CDH或HDP維護經(jīng)驗,3年以上系統(tǒng)運維相關經(jīng)驗;
3、深入理解Linux系統(tǒng),能獨立部署開源軟件,熟練掌握一門以上腳本語言(shell/perl/python等),熟悉python開發(fā)語言優(yōu)先;
4、邏輯思維能力強,做事有條理,責任心強,工作積極主動,執(zhí)行力強,有良好的團隊協(xié)作意識。
大數(shù)據(jù)運維工程師的具體職責描述 篇4
職責:
1、負責公司內(nèi)部及項目中大數(shù)據(jù)集群的構建,任務調度、監(jiān)控預警,持續(xù)完善大數(shù)據(jù)平臺,保證穩(wěn)定性、安全性;
2、負責集群容量規(guī)劃、擴容、集群性能優(yōu)化及日常巡檢和應急值守,參與大數(shù)據(jù)基礎環(huán)境的架構設計與改進;
3、深入研究大數(shù)據(jù)業(yè)務相關運維技術,探索新的運維技術及發(fā)展方向。
任職要求:
1、熟悉Linux基礎命令操作,能夠獨立編寫Shell腳本開展日常服務器的運維;
2、熟悉Hadoop生態(tài)圈Hadoop、Kafka、Zookeeper、Hbase、Spark的安裝與調優(yōu);
3、熟悉軟硬件設備,網(wǎng)絡原理,有豐富的大數(shù)據(jù)平臺部署,性能優(yōu)化和運維經(jīng)驗;
4、工作認真負責,有較強的學習能力,動手能力和分析解決問題的能力;
5、能夠利用各種開源監(jiān)控工具、運維工具,HA、負載均衡軟件完成工作任務;
6、熟悉JVM虛擬機調優(yōu);
8、1年及以上相關崗位經(jīng)驗,要有良好的安全和責任意識。
大數(shù)據(jù)運維工程師的具體職責描述 篇5
職責
1. 負責大數(shù)據(jù)ETL系統(tǒng),運維及保障服務穩(wěn)定可用;
2. 負責數(shù)據(jù)采集交換方案以及聯(lián)調測試;
3. 負責采集交換任務的評審和上線;
4. 負責及時排除ETL流程故障,形成知識庫,完善運維文檔;
5. 負責監(jiān)控和優(yōu)化ETL的性能,持續(xù)性地提出改進自動化運維平臺建議
技能要求
1. 計算機科學或相關專業(yè)本科及以上學歷;
2. 熟悉Linux系統(tǒng),熟練編寫shell/perl/python一種或多種腳本語言;
3. 熟悉Hive、Hadoop、MapReduce集群原理,有hadoop大數(shù)據(jù)平臺運維經(jīng)驗者優(yōu)先;
4. 熟悉數(shù)據(jù)庫的性能優(yōu)化、SQL調優(yōu),有相應經(jīng)驗;
5. 抗壓能力強,有強烈的責任心,良好的溝通能力、學習能力及團隊合作能力。
大數(shù)據(jù)運維工程師的具體職責描述 篇6
(1) 負責機房物理環(huán)境各項指標控制與安全管理;
(2) 負責各類服務器的軟硬件的配置安裝和維護管理;
(3) 系統(tǒng)的數(shù)據(jù)保護,容量規(guī)劃,實施調整和監(jiān)控及災難恢復、服務器的性能監(jiān)控與優(yōu)化,配置安全策略;
(4) 為相關接口部門提供技術技持;
(5) 進行各項新應用的系統(tǒng)、網(wǎng)絡測試工作;
(6) 提供服務監(jiān)控和常規(guī)系統(tǒng)健康檢查;
(7) 負責各應用服務器終端用戶帳號注冊、凍結、注銷管理;
(8) 部門經(jīng)理臨時安排其它工作任務處理。
大數(shù)據(jù)運維工程師的具體職責描述 篇7
職責:
1、負責公司網(wǎng)絡維護及網(wǎng)絡安全,各辦公區(qū)域IT規(guī)劃;
2、負責各類終端、網(wǎng)絡、打印機等辦公設備的日常維護及管理;
3、負責桌面運維,病毒的查殺及計算機故障;
4、負責內(nèi)部信息系統(tǒng)建設、維護及數(shù)據(jù)庫備份維護;
5、配合運營中心推動和建設標準化的運維體系和規(guī)范化的運維流程;
6、配合運營中心推動各信息化項目開展。
任職資格:
1、能夠熟練掌握常見IT設備(包括PC客戶端、機房設備、多媒體投影等)故障處理及維護;
2、熟悉Windows server配置管理,精通DNS、DHCP等Windows服務管理配置;
3、熟悉各類主流網(wǎng)絡相關設備(交換機, 路由器, AP等)的配置和安裝;
4、有一年以上IT管理經(jīng)驗,計算機科學、網(wǎng)絡、信息系統(tǒng)或相關專業(yè)優(yōu)先;
5、有信息化項目實施經(jīng)驗優(yōu)先;
6、有責任心,團隊適應力強,抗壓性強,具備良好的溝通能力,具備較強的學習能力,有強烈的進取心。
大數(shù)據(jù)運維工程師的具體職責描述 篇8
職責:
1、負責公司大數(shù)據(jù)平臺自動化運維開發(fā)、監(jiān)控和優(yōu)化工作,保障數(shù)據(jù)平臺服務的穩(wěn)定性和可用性;
2、負責公司Hadoop核心技術組件日常運維工作 ;
3、負責公司大數(shù)據(jù)平臺現(xiàn)場故障處理和排查工作;
4、研究大數(shù)據(jù)前沿技術,改進現(xiàn)有系統(tǒng)的服務和運維架構,提升系統(tǒng)可靠性和可運維性;
任職要求:
1、本科或以上學歷,計算機、軟件工程等相關專業(yè),3年以上相關從業(yè)經(jīng)驗
2、精通Linux運維命令,熟悉Linux的維護和管理,熟悉Shell/Python腳本開發(fā),掌握Scala/JAVA優(yōu)先;
3、熟悉大數(shù)據(jù)項目實施:包括不限于Kafka、Hadoop、Hive、Hbase、Spark等大數(shù)據(jù)生態(tài)的平臺搭建,監(jiān)控和調優(yōu);
4、良好團隊精神服務意識,溝通協(xié)調能力;
大數(shù)據(jù)運維工程師的具體職責描述 篇9
職責:
1、負責公司產(chǎn)品平臺的運行維護,保障系統(tǒng)穩(wěn)定,處理各種運維事故及事件;
2、負責Linux服務器和集群的規(guī)劃、部署、安全、備份、性能調優(yōu)及監(jiān)控;
3、負責在Linux/Java/mysql環(huán)境下,建設運維平臺,監(jiān)控系統(tǒng),日志系統(tǒng)等;
4、資源部署及架構配置,確保產(chǎn)品的功能及性能按要求實現(xiàn);
5、整理各種運維文檔。
任職條件:
1.具備3年以上Linux操作系統(tǒng)運維經(jīng)驗;
2.熟悉linux,docker,以及Mysql,Redis,Nginx,Tomcat,MongoDb等安裝部署;
3.熟練掌握常用命令、Shell腳本編程,docker容器的使用;
4.熟悉Linux系統(tǒng)高可用技術、負載均衡、集群等技術方案;
5.有扎實的Linux功底,熟練操作RedHat,CentOS等版本Linux系統(tǒng);
6.精通MySql集群管理,精通各種備份和恢復技術,熟悉Mysql復制,具備利用系統(tǒng)工具分析和優(yōu)化數(shù)據(jù)庫的能力
7.有大規(guī)模Linux服務器運維管理經(jīng)驗者優(yōu)先。
大數(shù)據(jù)運維工程師的具體職責描述 篇10
職責:
1、負責公司各項目Docker與k8s集群管理、監(jiān)控及相關業(yè)務支撐;
2、負責容器云平臺的監(jiān)控、應急響應等,及時定位及解決性能瓶頸和疑難問題;
3、編寫各種運維腳本,推動業(yè)務自動化運維,確保日常部署工具安全高效進行;
4、負責線上系統(tǒng)的監(jiān)控報警系統(tǒng)的優(yōu)化和開發(fā),確保更佳準確及時的反映線上系統(tǒng)狀態(tài);
5、和團隊成員共同承擔線上7x24小時服務質量保障工作;
任職要求:
1、熟悉服務器、存儲、網(wǎng)絡等基礎設施的管理和運維工作;
2、熟練使用Linux系統(tǒng),具有Linux系統(tǒng)安裝配置和系統(tǒng)參數(shù)優(yōu)化經(jīng)驗,至少熟悉centos和ubuntu。
3、熟悉shell/python腳本語言,有腳本的開發(fā)經(jīng)驗;
4、熟悉虛擬化技術,至少熟悉一種虛擬化管理平臺,如vmware、xen、kvm等;
5、熟悉容器化技術,熟悉docker的常用管理命令,熟悉docker的存儲、網(wǎng)絡管理方式,熟悉鏡像倉庫的搭建和管理。
6、熟悉Apache、Nginx、MySQL、Tomcat、Redis、RabbitMQ、ZABBIX等常用服務的安裝、配置、維護、和調優(yōu);
7、熟悉Kubernetes、有生產(chǎn)環(huán)境kubernetes運維經(jīng)驗者優(yōu)先;
8、工作認真嚴謹,責任心強,抗壓能力強;
9、有阿里云,騰訊云,華為云等至少一家公有云使用經(jīng)驗優(yōu)先考慮
大數(shù)據(jù)運維工程師的具體職責描述 篇11
職責:
1、軟件產(chǎn)品及項目的部署、安裝、升級、維護,確保系統(tǒng)正常穩(wěn)定運行;
2、項目數(shù)據(jù)庫維護、確保數(shù)據(jù)庫正常運行;
3、及時解決客戶在系統(tǒng)使用過程的各種問題,維護好客戶關系以及客戶培訓工作;
4、收集客戶在系統(tǒng)過程遇到的問題,進行分析和確認,并反饋至相關負責人;
5、完成上級安排的其他任務;
任職要求:
1、計算機相關專業(yè),專科及以上學歷;
2、掌握計算機基礎知識,熟悉常用軟件的安裝與使用;
3、對軟件開發(fā)有一定的了解;
4、了解病毒防護、系統(tǒng)漏洞、防護墻等網(wǎng)絡安全知識;
5、具有良好的溝通和語言表達能力,邏輯思維能力強,有責任心,工作態(tài)度端正、積極,有團隊意識及良好的操作規(guī)范意識。
大數(shù)據(jù)運維工程師的具體職責描述 篇12
職責:
1、負責網(wǎng)絡體系規(guī)劃,各系統(tǒng)的運維策略實施及優(yōu)化;
3、負責網(wǎng)絡設備硬件日常運行監(jiān)控,維護及日志分析;
4、負責Linux系統(tǒng)的運維工作,完成系統(tǒng)補丁、調優(yōu)、日常巡檢、故障處理、性能優(yōu)化等工作;
4、負責對網(wǎng)絡攻擊、病毒、漏洞等安全問題進行響應處理;
5、負責Oracle數(shù)據(jù)庫的維護,完成環(huán)境搭建、調優(yōu),日常巡檢、故障處理解決、性能優(yōu)化、數(shù)據(jù)庫升級、遷移和備份恢復等工作。
任職要求:
1、計算機或相關專業(yè), 全日制專科及以上學歷;
2、熟悉華三、思科、深信服等品牌防火墻、路由器、交換機等網(wǎng)絡安全設備,具備CCNP或HCIE證書;
3、具有3年以上IT系統(tǒng)架構規(guī)劃、系統(tǒng)運維、系統(tǒng)監(jiān)控實施相關經(jīng)驗,熟悉Zabbix監(jiān)控系統(tǒng)的搭建和維護;
4、精通Linux系統(tǒng),熟悉Apache、NginX、MySQL、FTP、DNS等常用服務的安裝、配置、調優(yōu)和維護,及相應的集群、容災、單點故障等解決方案;
5、熟悉運維自動化,能夠掌握使用Shell、Perl、PHP、Python、Ruby、Go等至少一種語言;
6、掌握虛擬化解決方案,如VMware 、vSphere 、kvm等;
7、熟練掌握Oracle數(shù)據(jù)庫管理、維護等各種操作,能夠對Oracle、SQL SERVER、Mysql等數(shù)據(jù)庫進行日常維護,如:備份、還原、日志壓縮、數(shù)據(jù)同步、性能調優(yōu)等;
8、善于交流和溝通,具有良好的書面、語言表達能力和團隊協(xié)作意識,同時能夠根據(jù)業(yè)務和項目的需要,積極主動學習相關知識,愿意接受挑戰(zhàn),并能在壓力下工作。
大數(shù)據(jù)運維工程師的具體職責描述 篇13
職責:
1、能貫徹和落實公司的各項管理制度、公司業(yè)務規(guī)范,按時完成相關流程要求的交付物提交;
2、從事網(wǎng)絡安全、通信設備的駐場安裝調試和維護工作(包括定期巡檢、技術支持)等;
3、接收和協(xié)助解決客戶遇到的各種現(xiàn)場技術問題,能夠對用戶的需求給出相應的解決方案;
4、快捷準確并按要求提供所有報告、數(shù)據(jù),如故障處理報告、周報總結等;
5、學習領悟力強,善于主動鉆研,向客戶提供全面優(yōu)質的服務。
任職要求:
1、專科以上學歷,通信或計算機相關專業(yè),一年以上相關工作經(jīng)驗;
2、熟悉掌握CISCO、華為等主流廠商的路由器/交換機設備配置和維護;
3、熟練掌握相關網(wǎng)絡技術、TCP/IP協(xié)議、路由與交換技術等,具有CCNP或HCNP認證或同等經(jīng)驗證者優(yōu)先;
4、具有良好的文檔撰寫能力,語言溝表達能力強,能同客戶建立良好的溝通關系,適應團隊合作,能適應中短期出差;
5、思維清敏捷,具有較強網(wǎng)絡故障排查和解決經(jīng)驗的能力;較強的邏輯分析能力和對問題的診斷能力。
6、了解X86服務器,熟悉LINUX命令等。
大數(shù)據(jù)運維工程師的具體職責描述 篇14
職責:
1、負責智慧化菜場項目上的網(wǎng)絡安全運行與維護;
2、根據(jù)業(yè)務需求進行調試、優(yōu)化和部署;
3、負責弱電的設計與設備配置;
4、現(xiàn)場的技術支持及運維服務。
崗位要求:
1、專科及以上學歷,計算機相關專業(yè);
2、1年及以上IT相關工作經(jīng)驗,有項目經(jīng)驗的優(yōu)先考慮;
3、熟練掌握網(wǎng)絡設備的配置及網(wǎng)絡維護知識;
4、熟練掌握Windows Server或Linux;
5、優(yōu)秀的溝通能力,較強的服務意識。
IT運維工程師工作的職責4
1. 負責公司網(wǎng)絡、基礎設施及服務器,交換機的日常維護巡檢,保持公司區(qū)域
內(nèi)各機房運行環(huán)境的良好狀態(tài),記錄環(huán)境數(shù)據(jù);
2. 對公司IT基礎網(wǎng)絡及其他運營設備進行安裝、硬件維護、硬件故障處理等工作;
3. 日常問題及突發(fā)事件的及時響應反饋并解決跟進故障處理;
4. 對公司所有IT設備及備件壞件定期檢查、檢修、替換和保修;
5. 協(xié)助客戶進行現(xiàn)場資產(chǎn)管理,包括線上、線下設備(包含配件或者備件)的統(tǒng)計與登記,確保重要區(qū)域的資產(chǎn)安全;
6. 按照客戶的要求,嚴格執(zhí)行相應的各項規(guī)范;
7. 按照客戶的要求,按時提供日常各類報告,包括運維日報、資產(chǎn)月報等;
8. 配合公司及客戶進行定期的資產(chǎn)盤點;
9. 能 7x24 小時故障響應;
10.輔助信息安全管理工作。
大數(shù)據(jù)運維工程師的具體職責描述 篇15
職責
1、進行業(yè)務系統(tǒng)的維護
2、指導用戶正確使用操作軟件各業(yè)務模塊;
3、分析并解決軟件使用過程中的問題,對軟件故障進行測試定位;
4、處理相關數(shù)據(jù);
5、配合項目經(jīng)理完成相關任務目標;
任職資格:
1、計算機相關專業(yè),本科以上學歷;
2、優(yōu)秀應屆畢業(yè)生可考慮;有稅務行業(yè)信息化相關工作經(jīng)驗者可破格錄取;具備軟件開發(fā)能力者優(yōu)先。
3、熟悉JAVA編程語言及熟練操作SQL,具備一定數(shù)據(jù)庫知識。
4、能熟練使用所負責的軟件模塊;
5、良好的良好的溝通能力、團隊合作精神。
大數(shù)據(jù)運維工程師的具體職責描述 篇16
職責:
1、負責客戶內(nèi)部視頻會議系統(tǒng)及各應用系統(tǒng)日常管理維護;
2、負責客戶的PC、服務器、存儲設備的日常維護工作。
3、負責部署相關應用平臺,并提出平臺的實施、運行報告;
4、負責配合客戶搭建測試平臺,協(xié)助開發(fā)設計、推行、實施和持續(xù)改進;
5、負責日常系統(tǒng)維護,及監(jiān)控,提供IT軟硬件方面的服務和支持,保證系統(tǒng)的穩(wěn)定。
任職要求:
1.專科或以上學歷,計算機相關專業(yè),2年以上相關工作經(jīng)驗,有系統(tǒng)運維工作經(jīng)驗者優(yōu)先;
2.熟悉Windows/Linux系統(tǒng)安裝、維護、監(jiān)控及日常維護;
3.了解各大廠商的服務器、存儲等硬件設備的基本安裝調試;
4.有一定網(wǎng)絡技術基礎,了解TCP/IP網(wǎng)絡原理,熟悉交換機、路由器、防火墻配置更佳;
5.熟悉VMware軟件環(huán)境的管理及維護,有虛擬化項目實施經(jīng)驗或VMware VCP認證者優(yōu)先;
6、具備自我管理能力、溝通能力、團隊精神和責任服務意識,能組織并實施技術相關工作,較好的解決問題的優(yōu)先。
大數(shù)據(jù)運維工程師的具體職責描述 篇17
職責
1、負責PC_SERVER的日常運維與管理;
2、系統(tǒng)集成項目的項目實施;
3、PC服務器系統(tǒng)運維的優(yōu)化和改進;
4、善于發(fā)現(xiàn)系統(tǒng)問題,并提出優(yōu)秀的解決方案;
任職資格
1、計算機、電子類本科學歷以上,有二年以上相關工作經(jīng)驗;
2、熟悉Linux、VMware ESX、Windows Server等主流操作系統(tǒng),有一定的運維管理經(jīng)驗。
3、精通品牌服務器(重點惠普和戴爾)的管理維護,熟悉廠商的支持流程,能熟練判斷相關軟硬件故障;
4、具有較好的技術文檔編制能力,良好的溝通能力;
5、較強的表達能力及與客戶溝通能力,良好的分析問題和實際動手能力,良好的學習和創(chuàng)新能力;
6、有PC_SERVER設備應用系統(tǒng)維護、調試經(jīng)驗者優(yōu)先考慮;
7、有相關系統(tǒng)認證、硬件廠商認證證書者優(yōu)先考慮;
8、較強的組織、協(xié)調、溝通能力,良好的分析問題和實際動手能力,良好的學習和創(chuàng)新能力;
10、具有解決突發(fā)事件的能力;有團隊精神、刻苦鉆研精神,工作認真細致、有責任心,能承受工作壓力。