大數據開發工程師的工作職責模板(精選27篇)
大數據開發工程師的工作職責模板 篇1
職責:
1.負責金融銀行大數據系統相關模塊的數據架構及研發實施工作
2.依據業務場景、分析需求提供技術解決方案并加以實現;
3.與客戶業務部門對接,解決數據建模、報表和報告在系統開發遇到的問題;
任職資格:
1.具備3年以上DW系統建設經驗,了解BI系統,有數據管理經驗,有維度建模相關經驗,了解數據倉庫建設過程中的挑戰與問題
2.精通多系統數據融合、清洗、轉換、整合,具備海量數據加工處理相關經驗
3.熟悉業界數據倉庫建模方法、元數據管理、數據質量體系管理
4.掌握大型數據庫開發技術(ORACLE/DB2等),有豐富的數據庫模型設計和優化經驗
5.熟練掌握Unix/Linux常規命令、工具及Shell編程
6.掌握一門或多門編程語言優先,如Java、Python、scala等
7.熟悉Hadoop、spark、kafka等大數據生態相關技術,有相關實踐經驗著優先8.良好的語言溝通與表達能力和自我驅動動力9.具備銀行項目設計、開發、優化等經驗者加分
大數據開發工程師的工作職責模板 篇2
職責:
1、 參與ODS系統或Hadoop 系統數據庫相關開發,包括數據倉庫的數據模型設計(ODS層設計、基礎數據層設計、匯總層設計等);
2、 參與ETL Mapping設計及開發工作;
3、 參與客戶/用戶畫像、經營管理、產品畫像、營銷活動等主題域建設工作。
資質要求:
1.計算機相關專業本科及以上學歷,優秀者放寬至大專;
2.有大型數據庫(ORALCE/MSSQL SERVER等)開發經驗,有Sybase IQ\HIVE\Spark SQL開發經驗者優先;
3、有較強的SQL編程能力,熟練編寫存儲過程,能設計各種復雜的業務處理、統計分析語句,精通sql性能優化;
4、具有數據倉庫、ods、BI商務智能項目經驗者優先,具有金融行業項目背景者優先;
5、較好的溝通理解能力,態度踏實,積極上進。
大數據開發工程師的工作職責模板 篇3
1、負責數據倉庫和大數據處理模塊的架構設計和開發;
2、負責實現基于Spark框架的分布式計算框架的設計和開發工作;
3、負責Spark技術研究和通用數據平臺的性能調優;
4、負責大數據項目中,基于kafka、flume、spark streaming、Spark SQL等相關技術的海量數據的處理、分析、統計、挖掘工作。
5、熟悉Scala/Java語言,對Scala/Java原理、底層技術有深入研究者優先;
6、有過海量數據系統開發經驗者優先;
7、熟悉Hadoop/Spark生態系統組件的使用,至少有2年以上的Spark開發經驗;
8、寫過推薦系統的優先考慮
大數據開發工程師的工作職責模板 篇4
職責
1、負責公司大數據平臺建設工作,完成Hdaoop/Spark搭建部署,根據業務需要進行開發;
2、開發實現網絡爬蟲并爬取所需數據,有效存儲到大數據平臺;
3、對平臺數據做預處理,滿足數據展現及后續機器學習等系統使用;
4、根據業務需要,應用大數據實時分析技術、可視化技術等,并對平臺發展規劃進行設計。
任職資格
1、本科及以上學歷,計算機相關專業;
2、熟悉數據倉庫和數據建模相關技術細節,有編程經驗,熟悉SQL/Hadoop/Hive/Hbase/Spark等大數據工具;
3、具備海量數據處理經驗,或有互聯網行業數據挖掘工作經驗;
4、1年以上崗位經驗優先,本科應屆有意向的,可優先培養。
大數據開發工程師的工作職責模板 篇5
職責:
1、獨立負責工作小組,并對下級成員進行監督;
2、具備資源整合以及對軟件項目全局把控的能力;
3、負責軟件項目的系統設計和需求分析;
4、制定軟件項目開發計劃,并按時完成功能模塊的設計、開發以及編程任務;
5、積極配合并完成主管下達的任務,并能夠對軟件部門的發展規劃提出意見;
任職條件
1、大數據相關開發經驗3年以上,至少具備2年以上java開發經驗;
2、有基于hadoop的數據抽取、轉換、加載的開發相關經驗;
3、熟練掌握hadoop生態的相關知識,如hive,hbase,flume.kafka,storm,spark,mapreduce等;
4、熟悉Linux操作系統。熟悉linux各項基本操作,至少掌握一門腳本語言;
5、熟練數據倉庫,對多維數據建模有深入理解;
6、有BI數據平臺、數據倉庫、日志采集、多維數據倉庫設計、開發、架構經驗者優先;
7、思維敏捷,有較強的鉆研學習能力,較好的溝通能力、團隊合作;
大數據開發工程師的工作職責模板 篇6
職責:
1、參與系統需求分析、架構設計和概要設計;
2、獨立進行系統功能模塊的分析設計和核心功能的開發;
3、負責解決開發過程中的技術問題;
4、有能力參與需求分析、軟件設計、計劃制定與一些技術文檔的編寫工作;
5、定期向上級主管匯報工作情況。
任職要求:
1、有扎實的Java開發經驗,具有3年及以上Java開發經驗,計算機相關專業;
2、具備良好的面向對象編程經驗,具有較強的分析設計能力;
3、熟練HTML/CSS/Javascript/JQuery等前端開發;
4、精通MySQL,Oracle,熟練掌握SQL,存儲過程編寫等;
5、熟悉SpringMVC等Java框架,精通Springboot,MyBatis,Hibernate,Netty,Mina優先;
6、有開發系統接口經驗;
7、有客戶現場開發經驗;
8、善于學習與溝通,具有團隊精神;
大數據開發工程師的工作職責模板 篇7
1、負責音視頻會議系統功能的開發實現;
2、負責音視頻會議系統程序功能定制和問題處理;
3、負責實時音視頻通信和傳輸SDK的業務功能設計與開發,主要內容包含但不限于音視頻、網絡傳輸等。
大數據開發工程師的工作職責模板 篇8
職責:
1、 規劃及建設大數據平臺;
2、 負責大數據存儲系統、分布式計算系統、挖掘算法等設計、研發以及維護、優化工作;
3、負責分析、挖掘、對抗各種產品安全層面的惡意行為;
4、 參與項目的系統設計和核心代碼開發,指導和培訓其他工程師;
5、 整理和提交技術文檔,負責核心功能模塊的代碼編寫和測試工作。
崗位要求:
1、 計算機、統計學等相關專業本科及以上學歷,具有深厚的數學、統計學和計算機相關知識,精通數據倉庫和數據挖掘的相關技術,3年以上大數據開發相關經驗;
2、具有非常扎實的Java基礎,熟悉Shell、Python、R、Scala等一種以上語言;
3、算法基礎扎實,熟悉常見的數據結構,了解分布式算法和分布式系統的技術原理;
4、精通MapReduce設計方法或Spark計算框架、對NoSQL,Hadoop、Hbase、Spark、Hive等主流云計算,大數據相關軟件有充分的了解,并且有實踐經驗,能解決應用中的復雜問題;
5、熟悉大數據處理相關技術,包括但不限于Hadoop、Hive、Hbase、Impala、Spark,Kafaka、Flume、Sqoop、Storm、Redis等;
6、研讀過Hadoop、Hbase、Hive源代碼者,能夠在特定業務中進行定制改造者優先;
7、具有海量數據處理、數據挖掘、數據分析相關項目的工作經驗者優先。
大數據開發工程師的工作職責模板 篇9
1、配合架構師完成系統設計和工作任務分派;
2、負責平臺分布式與高可用的核心模塊設計與實現;
3、分析系統所產生的問題,并提出解決方案解決系統問題,以保障系統能夠按照需求正確達成預期效果;
4、跟蹤和分析現網平臺,以提高生產系統的健壯性、可復用性;
5、指導和幫助組員,以確保產品質量和進度。
大數據開發工程師的工作職責模板 篇10
1.負責MES、WMS、QMS、TMS、SPC等制造相關系統的開發、維護工作,保證系統快速、穩定地運行;
2.分析各制造相關部門的需求,對合理需求給出解決方案,并在系統中實現;
3.負責相應系統中權限等設置,保證公司的信息安全;
4.結合系統運行中出現的情況和實際業務狀況,對業務部門提出合理的改善建議。
任職資格:
1.本科及以上學歷,計算機相關專業,英語水平四級及以上,口語流利者更佳;
2.在制造行業MES領域5年以上開發工作經驗。深入研究過一套以上成熟的MES解決方案,能夠根據業務需求,提出改善建議。對制造行業信息化的發展趨勢,有自己的獨到見解;
3.熟練掌握C#、C/C++等開發語言,能夠熟練編寫WCF、WebService,熟悉jquery等前端腳本框架。在Oracle和sqlserver數據庫下,精通SQL編寫和調優,特別是對大批量數據處理需要有相關經驗;
4.溝通和表達能力良好,富有團隊協作精神。有作為項目負責人帶領外包、顧問、組員按時完成目標和做項目管理的能力;
5、在大型電子制造行業信息或開發部門有過多年開發經驗的人員優先考慮。
大數據開發工程師的工作職責模板 篇11
職責:
1、負責核心業務研發;
2、負責重點技術問題的分析與處理;
3、深入理解業務需求,分析和發現系統瓶頸,推動系統性能的提高;
4、進行詳細設計、代碼開發,配合測試,高質量完成項目;
任職要求:
1、全日制統招,本科以上學歷, 計算機相關專業;
2、2年以上Java開發經驗;非本科以上學歷需4年以上開發經驗;有過中大型項目開發經驗者或者分布式項目經驗者優先考慮。
3、熟練掌握Spring、 SpringMvc、Struts2、Hibernate等開發技術;了解JAVA多線程及并發。
4、熟悉XML、HTML、Javascript、CSS的使用和應用開發以及 AJAX技術。
5、熟練掌握常用數據庫使用,熟悉mysql、Oracle、postgresql等數據庫中的一種或多種。
6、熟悉了解中間件(redis、nginx等)。
7、精通常見的Java 開發工具idea,熟悉常見的Java Web容器Tomcat等 。
大數據開發工程師的工作職責模板 篇12
職責:
1、 負責公司大數據平臺數據處理工具ETL、流處理平臺等建設,功能規劃,平臺演進,維護調優等;
2、 結合公司業務特征,負責公司數據倉庫規劃、數據倉庫建設、數倉管理等;
3、 負責大數據處理技術研究及新技術引進,參與超大規模實時/離線數據計算框架,存儲、查詢、可視化解決方案的設計,研發;
4、 負責公司業務數據倉庫模型建設及全業務數據域打通;
5、 負責BI報表和可視化項目,和客戶深度溝通,理解客戶的業務挑戰,提供解決方案,制定開發計劃并執行,支持各單位日常數據需求和任務;
任職資格:
1、 熟練掌握關系型數據庫,例如:Oracle、Mysql、Vertica等;熟悉NoSql數據庫,例如HBase、Redis、MongodDB等;具備豐富的數據庫管理和運維調優經驗;
2、 熟悉數據倉庫領域知識和技能者優先,包括但不局限于:元數據管理、數據開發測試工具與方法、數據質量、主數據管理,數據打通等;
3、 有從事分布式數據存儲與計算平臺應用開發經驗,熟悉Hadoop生態相關技術并有相關實踐經驗著優先,如Hdfs、Mapreduce、Hive、Hbase、Spark、Storm;
4、 精通數據預處理、檢驗、清洗、分析方法,精通各種常用統計檢驗方法;熟練掌握一門或多門編程語言,并有大型項目建設經驗者優先,如Java、Python、Shell和scala等;
5、精通Linux,熟悉日常運維、搭建常見服務器、定位解決日常問題的能力,具備ETL開發經驗優先;
6、 良好的語言溝通與表達能力,有豐富的數據開發經驗,較強的數據、平臺、技術理解能力;
7、 具備數學類、計算機類等相關專業統招本科及以上學歷,具有3年及以上大數據開發工作經驗,有互聯網行業背景優先。
大數據開發工程師的工作職責模板 篇13
職責:
1、負責公司產品JAVA端的系統設計與研發;
2、負責公司軟件系統的長期維護和優化;
3、研究項目技術細節,參與技術方案討論,進行系統框架和核心模塊的詳細設計,編寫相應的技術文檔;
職位需求:
1、計算機及相關專業,大專或以上學歷,兩年以上JAVA開發經驗;
2、熟悉掌握Struts2、Spring、Hibernate/MyBatis框架技術,熟悉TCP/IP通信協議;
3、了解Spring Cloud、Spring Boot、CXF、RESTful微服務框架技術;
4、熟悉MySQL、Oracle等主流數據庫的開發,能進行數據庫設計;
5、熟悉HTML、CSS、JavaScript、JOSN、XML等Web前端開發技術,熟悉jQuery、Ajax技術;
6、熟悉Maven/Gradle等項目構建管理工具,SVN/Git版本管理;
7、了解Linux/Unix系統基本命令操作;
8、責任心強,有良好的溝通能力、學習能力。
大數據開發工程師的工作職責模板 篇14
職責
1、負責公司產品運營相關網站后端快速響應開發;
2、負責公司運營支持相關系統開發;
3、負責設計和開發一些內部工具,提高網站整體性開發效益,保證一定的質量;
4、負責相關APP接口開發;
5、配合移動部門與產品部門實現服務器端相關接口開發。
任職資格
1、計算機或相關專業,本科以上學歷;
2、熟練使用PHP進行程序開發,至少一年以上的PHP項目開發經驗,有模板開發經驗;
3、熟悉Linux系統,至少一年以上Linux平臺開發經驗;
4、掌握WEB編程相關知識JavaScript,CSS,XML,HTTP協議;
5、熟悉大數據量下數據庫(MSSQL、MySQL)的性能管理及優化,具有一定的數據庫規劃能力;
6、有大型網站開發經驗者優先;
7、較強的責任心及團隊合作精神,有獨立解決問題的能力。
大數據開發工程師的工作職責模板 篇15
職責:
1、負責產品平臺的研發、維護和升級,完成系統框架、核心代碼、主要功能的指導編寫;
2、深入理解業務需求,完成模塊設計、編碼,制定技術文檔和開發規范,并對開發過程進行持續改進;
3、主導項目關鍵技術問題的攻關,負責組織技術架構、解決方案的評審,對團隊開發人員進行代碼質量審核、技術指導和監督;
4、對開發團隊進行技術指導和培訓。
任職要求:
1、本科以上學歷(必須有學歷學位證書,學信網可查),5年以上Java開發工作經驗;
2、專業知識及技能:
1)精通Java、熟練使用Spring、Spring MVC、MyBatis、Hibernate、struts2 等主流開源框架;
2)熟悉html、css、javascript、jQuery、bootstrap等前臺技術;
3)熟練tomcat/was、maven、svn,熟悉mysql、oracle等關系型數據庫及NOSQL,如redis、hbase等;
4)熟練使用JBPM,ACTIVITY 中任意一種流程技術,熟悉Lucene 等開源技術.
5)熟悉Linux環境,有大型電商平臺架構經驗優先;良好的學習能力和團隊合作意識;
6)具有良好的表達和溝通能力,思路清晰,較強的責任心、團隊精神以及動手能力,能承擔較大工作壓力;
7)對元數據、數據治理 有相關開發經驗者優先;
大數據開發工程師的工作職責模板 篇16
職責:
1.參與產品需求分析及評審,設計產品解決方案;
2.負責系統架構、數據庫、接口設計等工作;
3.負責系統核心代碼開發;
4.參與日常開發和測試工作,解決開發中的技術問題;
5.解決日常和線上系統問題,及時處理系統問題;
崗位要求:
1.計算機或相關專業本科及以上學歷,1年以上工作經驗;
2.熟練掌握Java語言,有服務器端開發經驗者優先;
3.熟悉 SSH 開發框架,具備maven實際項目使用經歷,具備接口編程思想,有大型應用開發經驗者優先;
4.熟練應用HIBERNATE持久層技術以及JPA、Spring、SpringMVC,Mybatis等;
5.熟悉MySql,Oracle,具備一定的數據庫設計優化能力;
6.有dubbo框架使用經驗優先,有分布式開發、高并發性能調優經驗者優先
7.具備扎實的數據結構及算法基礎;
8.優秀的學習能力、分析和解決問題的能力及強烈的進取心;
9.誠懇、踏實,對技術與工作充滿熱情,具備良好的溝通能力和團隊合作精神.
大數據開發工程師的工作職責模板 篇17
1、參與項目整體設計開發實施
2、獨立完成功能模塊的開發,并負責各個功能及模塊的接口設計工作
3、編寫核心代碼與組件
4、負責系統的性能優化和技術難點攻關
5、編寫開發及技術文檔
6、研究與項目有關的新技術,并能應用到項目開發中
7、熟悉ThinkPHP、CI、Laravel、easySwoole等框架,了解Vue、Layui等前端框架,對高并發有實戰經驗
8、掌握Linux/Windows等操作系統、Web環境配置的各種優化方案
9、熟練掌握使用數據庫MYSQL,熟練使用Redis、MongoDB、Memcache
10、具備較強的程序部署、調試及程序故障分析能力,掌握Python、Shell變成
大數據開發工程師的工作職責模板 篇18
職責:
1. 根據客戶需求,負責產品設計和開發工作;
2. 根據公司的質量要求,對所負責開發的產品進行單元測試;
3. 承擔部分新技術試驗和研究,并應用到公司產品中;
4. 能夠高效解決項目開發中遇到的問題;
5. 保質保量及時的完成公司下達的任務;
崗位要求:
1. 熟練使用PHP,熟悉ThinkPHP框架者優先;
2. 熟練使用Web前端技術,例如HTML/HTML5、JS、JQuery、CSS等;
3. 熟悉SQL語言,熟悉MySQL等數據庫的應用開發;
4. 具備良好的代碼編程習慣及較強的文檔編寫能力;
5. 具備良好的團隊協作精神,極強的責任心;
6. 具有大型互聯網應用開發經驗者優先。
大數據開發工程師的工作職責模板 篇19
職責:
1、維護現有學歷平臺的穩定;
2、針對需求進行定制開發;
3、針對現有數據庫和平臺進行相關優化;
4、按時完成自己的開發工作,并做好單元測試;
5、及時修改測試人員反饋的bug;
6、撰寫相關的開發文檔。
任職資格:
1、3年以上c# ,Asp.net,webform,mvc編程經驗。熟悉.net運行機制;
2、熟悉面向對象編程,精通c# 對象 、接口、委托等基礎概念及應用;
3、3年以上sqlserver數據庫使用經驗,熟悉編寫存儲過程,能對sql語句進行性能優化;
4、掌握html、js、css客戶端技術,熟練使用ajax、jquery;
5、熟練掌握Sql Server 20xx/20xx數據庫開發,能夠使用索引、視圖、查詢優化、存儲過程、數據庫作業等技術;
6、具有SQL語句調優和數據庫調優工作經驗。
大數據開發工程師的工作職責模板 篇20
職責:
1. 參與公司項目或產品的前期調研、需求整理、設計、開發、部署等工作:
2. 按照設計的功能,協助公司開發工程師完成相關模塊的代碼編寫工作;
3. 整理公司項目或產品的技術文檔;
4. 參與公司項目或產品的驗收工作;
任職要求:
1、基本了解JAVA開發語言,了解面向對象的軟件設計方法;
2、熟悉XML、JSON、XSLT技術;
3、學習能力強,工作熱情高,富有責任感,工作認真、細致、敬業,責任心強;
大數據開發工程師的工作職責模板 篇21
1. 參與MES、設備管理系統等項目開發和實施,配合項目經理按時交付高質量的開發成果;
2. 參與項目的需求調研,系統設計,需求評審及系統設計報告;
3. 系統模塊設計與編碼工作;
4. 項目的系統維護、技術支持及日常問題處理。
任職要求:
1、大專或以上學歷,計算機相關專業,三年以上MES系統相關模塊的開發經驗。
2、精通Asp.net、C#開發語言,熟悉B/S架構,熟悉ajax、javascript、css、html等前端技術;熟練使用Visual Studio開發環境進行開發、調試和單元測試;
3、熟悉SQL Server數據庫,能熟練編寫SQL語句進行數據庫操作,能獨立編寫視圖、存儲過程、函數,對數據庫編程有較強的調試、優化能力;
4、具備較強的文檔撰寫能力(包括需求分析、概要設計/詳細設計等);
5、具有較好的溝通能力和良好的團隊合作精神
6、可適應不定期出差。
大數據開發工程師的工作職責模板 篇22
職責
1、負責產品開發;
2、負責指導、處理、協調和解決項目中出現的技術問題;
3、根據公司產品的版本管理規范,完成所負責項目的服務器代碼的版本歸檔、版本變更、版本發布工作。
4、負責處理線上版本緊急技術問題,線上版本bug處理;
5、負責服務器系統優化,提高性能。
任職資格
1、軟件基礎理論知識扎實,具有良好的數據結構、算法功底;
2、精通java,對分布式計算、數據挖掘有深入了解者優先;
3、熟悉Hadoop、Storm、HBase、Hive等框架者優先;
4、具備良好的團隊意識及創新思維、自我激勵能力,善于與人合作;
5、具有良好的表達與溝通能力以及獨立思考并解決問題的能力。
大數據開發工程師的工作職責模板 篇23
職責:
1、依據客戶需求完成大數據項目的數據分析及建模;
2、進行大數據核心算法的編寫;
3、參與項目的需求分析、系統設計、編碼工作;
4、參與開發過程中相關新技術的研究和驗證。
5.協助承擔架構性的體系設計和改造工作,配合制定技術實施方案,按照總體設計組織子系統的設計和開發。
任職要求:
1、精通數據建模、數據體系建設,具備數據倉庫架構設計、模型設計和處理性能調優等相關經驗;
2、具有豐富的基于hadoop體系的數據平臺、數據倉庫建設經驗,精通基于hadoop源碼的開發、優化改造及成功應用案例;
3、精通hadoop生態體系各項技術,如kafka、flume、hive、impala、hbase、spark等,具有100+節點hadoop集群的開發、運維經驗;
4、具有對大型hadoop集群的硬件規劃能力;
大數據開發工程師的工作職責模板 篇24
1、負責數據管控產品的實施落地;
2、負責數據管控平臺、數據標準模塊、數據質量模塊、元數據管理模塊的實施部署;
3、負責業務流程的推廣與控制,保證項目順利落地;
4、負責管控平臺部分功能的定制開發;
5、負責對數據管控平臺各模塊的內容進行培訓。
大數據開發工程師的工作職責模板 篇25
1、負責移動端APP功能設計和重構,優化現有APP架構,性能以及用戶體驗。
2、配合產品經理,后端開發及測試完成APP功能迭代開發和交付。
3、協調APP團隊協作,技術支持和進度管理。
大數據開發工程師的工作職責模板 篇26
職責:
1. 按質、按量、按時的完成代碼開發任務。
2. 根據項目需要,撰寫及修改相應的文檔。
3. 完成在各個測試階段BUG的修改
4. 按照編碼規范編程,并編制貫穿整個軟件開發周期的文檔資料
任職條件
1. 大專以上學歷,年齡不超過35歲,熱愛編程開發,計算機,軟件相關專業的應屆生也可培養。
2. 會PHP/MySQL開發, 熟悉基于PHP的面向對象編程思想,
3. 熟悉WEB應用框架(Codelgniter、Zend Framework、Symfony、ThinkPhp或其它);
4. 熟悉MySQL數據庫應用開發,熟悉MySQL日常維護、性能優化等基本操作技能;對SQL Server, Oracal等有一定認識了解
5. 謙虛好學,積極上進。
大數據開發工程師的工作職責模板 篇27
1.具有無線路由器產品系統開發經驗,熟悉主流無線路由器芯片方案開發,具有IPQ平臺開發經驗者優先;
2.熟悉基于OpenWRT或Linux的無線路由固件開發,能夠對路由固件系統進行裁剪和定制開發;
3..對路由網關產品內核及iptable,網卡驅動,網絡協議棧有相當了解,熟悉DNS、DHCP、NTP、HTTP等應用層協議;
4.精通Linux網絡體系結構或其它嵌入式系統C語言編程,SHELL編程。
5.熟悉無線路由器底層開發,熟悉網絡編程及相關網絡協議,熟悉luci深度定制。