大數據開發工程師的主要職責(通用30篇)
大數據開發工程師的主要職責 篇1
職責:
1、負責公司大數據平臺建設;
2、根據業務需求,制定數據倉庫和數據分析平臺的實施和持續更新;
3、攻克技術難關,保證大數據系統的穩定運行;
4、完成大數據產品的開發。
職位要求:
1、計算機相關專業全日制專科及以上學歷,大數據相關經驗;
2、熟悉Java或Scala語言,熟悉Spark,Hadoop,Kafka,Hive,HBase,ZooKeeper等大數據相關技術;
3、精通SQL語句并對Redis,Mongodb等NoSQL數據庫有一定經驗;
4、對于高并發、高穩定可用性、性能、大數據處理有過實際項目產品經驗者優先;
5、責任心強,工作踏實,有團隊協作精神,溝通能力強者優先。
大數據開發工程師的主要職責 篇2
職責:
1.負責公司環保大數據平臺的架構與搭建;
2.負責需求分析,根據客戶應用需求規劃大數據平臺架構;
3.負責將大數據平臺部署至私有服務器群、私有云或公有云;
4.負責在企業內部進行數據平臺原型開發與數據實時交互、存儲性能測試;
5.負責與數據挖掘算法交互的架構設計與開發。
任職要求:
1.計算機相關專業,全日制本科以上學歷;
2.具有3年以上大數據相關應用開發經驗,有Java開發經驗更佳;
3.至少熟悉一種流行的大數據編程框架,如Spark,Storm,Flink等;
4.熟悉大數據生態圈常用技術如RocketMQ,Kafka,Flume,Zookeeper等;
5.熟悉Hadoop安裝、調試、發布配置應用,熟悉Linux操作系統更佳;
6.至少熟悉TIDB,MySQL,SQLServer其中一種數據庫;
7.學習能力強,對技術有熱情,關注技術發展方向;
8.具有工業物聯網、智慧型環保項目背景者優先。
大數據開發工程師的主要職責 篇3
職責:
1、負責公司項目應用監測數據,分析軟件大數據平臺的代碼開發;
2、負責大數據體系架構設計和應用產品的研究;
3、負責大數據平臺及應用場景的構建、部署、測試;
4、編寫軟件研發相關技術文檔;
5、編寫產品研發相關任務單計劃,階段性代碼、技術方案和軟件產品及時提交至配置管理理庫;
6、Spark程序的研發,sqoop腳本開發和商家用戶行為等離線分析數據;
7、kudu,kylin等技術調研,編寫軟件研發相關技術文檔;
8、SUNMI數倉設計架構以及ETL流程開發;
9、建立多維度,多體系的用戶標簽體系以及用戶行為數據庫。
崗位要求 :
1、本科以上學歷,4年以上?工作經驗,2年以上Hadoop平臺的相關研發經驗,具有良好的需求分析,方案設計,架構設計,程序編寫、測試能力;
2、熟悉J2EE或Python平臺開發,有良好的Java或Python語言功底;
3、了解Linux/Unix操作系統,了解腳本編程(Shell/Python其中一種);
4、具備數據中心資源管理(YARN)、監控(ClouderaManage)、調度(Azkaban)等系統研發經驗者優先,具備分布式系統研發經驗者優先;
5、熟悉hadoop以及其?生態圈系統上的hive、hbase、sqoop、spark、spark-streaming等技
術,懂hadoop源碼者優先;
6、熟悉Kylin有OLAP平臺設計和開發經驗優先;
7、具有應用大數據技術處理TB級以上數據的項目開發經驗者優先;
8、有較清晰的代碼編寫規范,邏輯性強,工作態度認真,良好溝通能力和團隊合作精神。
大數據開發工程師的主要職責 篇4
職責:
1. 負責機票酒店大數據項目的評估、設計及關鍵模塊研發;
2. 參與公司大數據平臺及聯機分析系統的建設;
3. 機器學習算法討論、評估及算法的最終編碼實現;
4. 數據平臺開發規范制定,數據建模及核心框架研發;
任職要求:
1. 本科及以上學歷,計算機或數學相關專業,三年以上相關工作經驗;
2. 掌握Java、Python、Scala等 中的一到兩種語言;
3. 熟悉Mongodb、Hive、Hbase、Redis等NoSQL數據庫開發和調優;
4. 熟悉數據相關開源框架和工具,如ZooKeeper、Spark、Flink、Impala、Kylin 等;
5. 對數據結構和機器學習算法有一定的了解;
6. 具有海量數據處理、數據挖掘、數據分析相關項目的工作經驗者優先;
7. 有機票酒店等旅游行業數據開發經驗者優先。
大數據開發工程師的主要職責 篇5
職責:
1、 負責基于Hadoop/Spark平臺架構的開發、設計和布局 ;
2、 完成系統框架的設計和核心代碼的編寫;
3、 針對海量的用戶行為數據進行統計、分析與挖掘,不斷提高系統運行效率;
4、 負責對數據進行分析,為項目組提供大數據技術指導及分析手段支撐;
5、 負責大數據平臺的性能監控和持續優化;針對需求提供大數據分析技術解決方案 ;
6、 大數據平臺的運維工作,持續完善大數據平臺,保證穩定性、安全性;
7、 熟練使用大數據ETL數據抽取工具;
8、領導安排的其他工作。
任職資格:
1、 3年互聯網行業開發經驗,計算機或相關專業本科以上學歷;
2、 精通Hadoop大數據平臺架構,具有扎實的Java/Python等開發語言;并可以開發高效可靠的代碼;
3、 具有較強的數據分析、數據挖掘的能力;
4、 熟悉spark、Hive、storm等計算框架者優先,對分布式存儲和計算原理有較深的理解;
5、 嚴密的數學思維、突出的分析和歸納能力、優秀的溝通表達能;
6、 個性開朗,對技術鉆研好學、邏輯思維能力強,溝通能力優秀,有團隊合作精神。
大數據開發工程師的主要職責 篇6
1、負責FPGA需求分析及功能設計;
2、負責FPGA邏輯設計、綜合及驗證;
3、負責FPGA邏輯仿真及時序分析;
4、負責FPGA設計文檔、接口文檔及仿真測試文檔的編寫;
5、負責FPGA程序的庫文件、版本控制。
大數據開發工程師的主要職責 篇7
職責:
1、 負責參與系統框架的設計和不斷優化,參與系統設計;
2、 根據用戶的需求,分析并給出最優的技術解決方案;
3、 根據開發規范與流程獨立完成模塊的設計、編碼以及相關文檔;
4、具有獨立分析和解決問題的能力。
任職要求:
1、全日制本科學歷,計算機相關專業。
2、有1年及以上J2EE開發經驗,充分掌握面向對象編程思想并有較好的設計模式基礎,熟悉常用算法和數據結構;
2、熟悉Spring、Hiberate、jQuery等開發框架、了解其原理和實現機制;
3、熟悉MYSQL等關系型數據庫,掌握PL/SQL、存儲過程、觸發器、視圖的編寫;
4、熟悉Apache,Tomcat等主流Web應用服務器;
5、精通HTML+CSS+JS編程,熟悉HTTP 協議以及瀏覽器原理;
6、熟悉主流前端框架,包括但不限于Bootstrap、Vue、Anglajs等;
7、有WebGIS開發經驗者優先;
8、具有大型網站開發經驗者優先。
大數據開發工程師的主要職責 篇8
1.結合項目或產品涉及的具體業務場景,對數據進行清洗、計算與加工;
2.思路清晰,可快速響應數據處理的需求,評估并給出合理的解決方案,并采用合理的方式處理需求;
3.積極主動,能夠與團隊成員進行有效溝通,并完成數據處理結果的.核對與對接;
4.完成上級交辦的工作或任務。
大數據開發工程師的主要職責 篇9
職責:
1、根據業務需求快速實現原型開發,快速迭代;
2、實現服務器端統計、分析系統開發;
3、熟悉業務模型,并根據業務模型進行數據分析,提供業務優化支持;
4、根據系統編寫開發文檔,進行團隊協同開發。
任職要求:
1、大專及以上學歷,3~5年以上PHP開發經驗;
2、精通PHP語言、熟悉PHP常見的開源框架、了解smarty引擎、 PHP 緩存技術、熟悉 ajax 技術和常用的Javascript 庫;
3、精通 Mysql 管理及 Sql 性能調試,擁有優秀的數據庫設計能力,對數據庫的基本理論及其內部實現機制有比較深刻的理解;
4、熟悉memcache、redis緩存系統,對服務器端程序的部署、架構、調優有一定的了解;
5、有良好的編程習慣,包括良好的代碼風格,單元測試,代碼審查,具有比較強的責任心;
6、學習能力強,對技術有鉆研精神,具有良好的自學能力和獨立解決問題的能力;
7、熟悉Linux/Unix,在其上有豐富的開發經驗;
8、熟練使用svn版本控制工具。
大數據開發工程師的主要職責 篇10
職責:
1.參與基于LNMP的網站架構設計與開發;
2.參與網站服務器性能優化工作,如數據庫優化,緩存優化,分布式集群等;
3.參與日常網站業務開發工作,包括后臺與前端。
任職要求:
1.統招計算機相關專業本科學歷以上;
2.扎實的編程基礎(c/c++,數據結構,算法),3年以上網站開發經驗;
3.精通PHP+MYSQL編程以及主流的PHP框架(Yii2,Zend),熟悉面向對象編程及MVC模式;
4.熟練掌握XHTML、CSS、DIV、Javascript、jquery等前端頁面技術;
5.學習能力強,熱愛技術,寬廣的技術視野;
6.強烈的責任感和良好的團隊合作精神;
7.有數據庫優化、高并發互聯網應用開發經驗優先;
8.掌握多門語言,雙端開發者優先。
大數據開發工程師的主要職責 篇11
1、負責公司內部業務系統的開發;
2、參與需求分析,與用戶溝通,為用戶問題提供解決方案;
3、參與系統設計、編寫文檔;
4、按照工作流程,完成開發過程中的單元測試、評審、代碼或文檔交付等工作。
大數據開發工程師的主要職責 篇12
崗位職責:
1.負責游戲核心架構的搭建以及技術攻關;
2.負責手游客戶端的開發工作,獨立設計開發相應的游戲模塊;
3.與項目組美術/策劃人員深入溝通,準確實現開發需求;
4.和服務器工程師配合,實現客戶端端和服務器的數據交互;
5.與測試人員配合,了解并解決產品中存在的問題,對產品細節能有很好的把握。
6.具備良好的編程習慣和代碼規范,獨立解決問題能力強,要懂得團隊合作,誠信正直,富有激情,責任心強;
任職資格:
1.計算機軟件或相關專業本科以上,具備扎實的數據結構與算法基礎;
2.2年以上游戲開發經驗,至少2年以上C++開發經驗,熟悉cocos2d-x游戲引擎,參與過完整的手游開發流程;
3.精通C/C++編程語言,熟悉js等腳本語言,熟悉Objective-c,對C++和數據結構有深刻理解和深厚功底;
4.具有良好的團隊合作精神,邏輯思維能力強,善于溝通。
5.熱衷于技術鉆研,工作踏實誠懇,認真負責,有良好的抗壓能力。
大數據開發工程師的主要職責 篇13
1、協助開發人員SQL調優;
2、負責軟件產品發布過程的數據庫備份/恢復,包括相關腳本的編寫、數據庫腳本版本控制;
3、負責數據庫方案規劃,及新數據庫技術或工具的研究/引入;
4、通過運用一系列工具和編寫腳本,完成對開發/測試/生產/容災環境的數據庫的搭建、配置等工作,實現數據庫持續快速交付;
5、完善數據庫監控自動化,包括基礎設施部分和性能部分;
6、參與項目上線版本評審;
7、引進sql審核工具,制定數據庫用戶密碼策略,完善安全管控;
8、編寫各類數據庫規范性文。
大數據開發工程師的主要職責 篇14
職責描述:
1、負責主線產品app及web系統、小程序,推廣活動等前端頁面的開發和優化,以及小程序開發。
2、與設計、產品及市場人員溝通,保證產品的質量和開發進度。
3.、持續的優化相關的產品的質量、性能、用戶體驗技能。
任職要求:
1、兩年以上web前端工作經驗,有獨立完成h5的工作的經驗。
2、精通html,css3,es63、熟練運用常用框架,至少一種(vue,angular,react,reactnative)。
4、熟練運用各種自動化構建工具(webpack,gulp,grunt等)
5、對性能優化有深刻的理解和認識。
6、有mobileweb的`開發經驗,能開發兼容移動版瀏覽器的應用,并且能實現各種交互效果。
7、良好的編碼風格、最好有代碼潔癖。
大數據開發工程師的主要職責 篇15
1. JAVA基礎扎實:精通多線程編程,熟悉分布式,緩存,消息隊列等機制;熟悉JVM,包括內存模型、類加載機制以及性能優化;熟悉dubbo協議開發
2. 對各種開源的框架如Spring、Hibernate等有深入的了解,對框架本身有過開發或重構者可優先考慮
3. 精通關系型數據庫設計及SQL,精通unix/linux操作系統 4. 具備良好的`識別業務關鍵需求和設計領域模型的能力
5. 熱愛技術,工作認真、嚴謹,對系統質量有近乎苛刻的要求意識,善于溝通與團隊協作
6. 了解電商搜索功能架構和實現者優先。
大數據開發工程師的主要職責 篇16
1、負責系統功能定義,程序架構、接口等的設計、研發、及測試工作;
2、分析用戶需求和軟件設計的可行性,協助部門經理確定研發的時間和成本;
3、負責或協助制定技術解決方案,承擔核心功能、公共核心模塊的設計編寫,對項目中遇到的技術問題進行技術攻關;
4、主導并協調項目過程中的相關文檔編制及代碼質量控制;
5、通過對新零售業務的理解,對現有產品和系統進行改進和優化;
6、配合部門經理完成相關任務目標;
大數據開發工程師的主要職責 篇17
職責:
1、負責保理業務系統的需求設計、開發、測試驗收和升級完善。
2、負責與軟件系統開發商對接,制定項目計劃,合理控制項目實施進度,確保按時、高質量的完成符合業務需求和高質量的產品;
3、負責對應用運維崗位人員的進行培訓、協調解決使用中遇到的技術問題。
任職資格:
1、3年左右保理、供應鏈金融、小貸網貸系統等開發經驗;
2、有熟悉新技術和成熟技術,對系統在金融業務應用方面有較深入的了解;
3、熟悉金融業務系統架構,具有較強的用戶需求分析能力和系統研發能力;
4、有金融公司系統運維經驗,對銀行業務較熟悉,有在金融機構工作的經歷,懂金融保理業務更佳。
大數據開發工程師的主要職責 篇18
1. 參與產品組件的設計, 開發, 維護;
2. 根據產品需求完成模塊設計、編碼、測試工作;
3. 負責代碼的重構和升級,保證代碼的長期穩定性;
4. 能按照項目計劃,按時提交高質量的代碼,完成開發任務;
5. 協作完成大型業務系統,數據分析系統等,接口設計開發、存儲、測試等工作。
大數據開發工程師的主要職責 篇19
職責:
1、負責根據需求調研結果,進行功能設計、詳細設計;
2、負責需求和設計過程中相關文檔的編制;
3、負責核心代碼的編碼和單元測試;
4、對技術難點進行攻關,并負責知識發布和知識傳遞。
任職要求:
1、全日制公立本科以上學歷,計算機相關專業;
2、有3年以上基于J2EE B/S結構軟件的開發經驗;
3、熟悉HTML、JavaScript、AJAX等相關WEB技術,熟練掌握JQuery類庫;
4、熟悉Servlet、JSP、JavaBean、XML等知識;
5、熟悉spring、springMVC、mybatis框架;
6、熟悉數據庫開發,熟悉ORACLE等;
7、有良好的學習能力、團隊協作能力,主動溝通能力;
8、愛崗敬業,服從指揮,認真負責;
大數據開發工程師的主要職責 篇20
職責:
- 負責Web應用的后端開發
- 負責后端應用的架構設計
- 優化當前系統的代碼結構,支撐不斷增加的需求
- 提高系統并發能力
- 產品的日常維護,系統部署等
任職資格:
- 本科及以上學歷,5年以上PHP開發經驗,精通PHP+MySQL編程
- 熟練LNMP體系架構, 熟悉MVC編程思想和結構
- 熟悉yii優先
- 熟練掌握MySQL的操作,具有優化sql方面的經驗
- 熟悉redis緩存技術
- 有MangoDB經驗優先
- 熟悉常用設計模式,良好的代碼風格
- 做事積極主動、認真踏實,學習能力強,富有責任心,良好的團隊合作能力
- 有一定的管理經驗
- 熱衷于新技術的探索和研究,對最新的前端技術有獨特的見解
大數據開發工程師的主要職責 篇21
職責:
1、與產品工程師緊密工作在一起,主導PHP后端核心代碼開發、系統優化等工作。
2、優化數據庫設計規范、優化代碼結構,合理統籌指導PHP后端組員工作安排。
3、按照項目進度計劃完成開發任務并及時解決項目技術問題;
工作經驗:
崗位要求:
1、2年以上工作經驗,熟悉Thinkphp,Larave框架開發。熟悉Linux操作系統。
2、熟悉mysql.Redis,及其性能伏化,能獨立設計良好的數據結構。
3、有分布式布署經驗、有高并發情況經驗者優先.
4、有技術博客或github開源項目者優先.
大數據開發工程師的主要職責 篇22
1、負責數據平臺相關業務系統
2、各數據等系統的設計、研發和維護
3、全棧式研發,可以不重度考慮前端設計
4、參與分析部門、算法部門、數據產品部門的需求對接與開發
5、與部門內的DBA、爬蟲、算法協作完成項目要求
大數據開發工程師的主要職責 篇23
1、 負責醫療器械設備的機械方案設計、項目評估;現有儀器設備的改進設計;
2、 完成相關圖紙繪制、3D模型及加工圖紙的轉化、設計數據的輸出;機械相關零部件的選型、采購清單的編制與輸出;
3、 制作設備的機械BOM表;
4、 產品的安裝、調試及驗證。
大數據開發工程師的主要職責 篇24
負責公司電商平臺、內部管理系統架構設計及優化;
與產品經理和業務部門協調合作,參與設計方案,確定實現方案并最終實現代碼;
主要用php開發,但不限于php,會涉及JavaScript,CSS,HTML,Shell等;
領導或參與技術問題的攻關,解決技術上遇到的瓶頸問題;
參與技術規范的建立、維護、審核(代碼規范、數據庫命名、使用規范等);
對代碼質量負責,參與代碼評審,保證代碼的精簡,無錯和執行效率;
每月在自己負責的模塊上,盡可能重構代碼,優化設計;
大數據開發工程師的主要職責 篇25
1、根據公司產品發展方向,負責/參與新產品開發;
2、負責產品的頁面制作及維護,根據設計圖完成頁面html5應用的編碼;
3、根據產品需求,分析并給出最優的頁面前端結構解決方案;
4、根據產品設計,利用HTML5相關技術開發網站、手機、平板電腦等多平臺上的前端應用;
5、編寫可復用的用戶界面組件;
6、協助后臺程序員完成功能鑲嵌和調試;
7、有微信小程序開發經驗者優先。
大數據開發工程師的主要職責 篇26
職責:
1、 負責部門團隊技術人員培養,公司各平臺后端功能設計及優化;
2、 參與項目框架設計、系統分析及流程控制、溝通對接等工作;
3、 獨立或者分組進行針對項目需求的功能開發和優化;
4、 擁有良好的代碼習慣,要求結構清晰,命名規范,邏輯性強,代碼冗余率低;
5、 根據項目開發進度和任務分配,開發相應的應用模塊;
6、 根據需要不斷修改完善項目功能,參入核心代碼的編寫;
7、 負責核心模塊代碼研發工作,尤其服務端產品的架構分析、數據庫、算法策略設計及核心研發;
8、 確保代碼規范及代碼質量;
9、 遇到關鍵技術難題時,及時進行問題定位、解決方案設計及驅動落實;
任職資格:
1、 計算機相關專業本科及以上學歷,3年以上PHP開發經驗,大廠經驗優先;
2、 具有抓取開發經驗、MySQL索引優化、查詢優化和存儲優化經驗、PHP緩存技術、靜態化設計方面的經驗,要求隨時隨地貫徹最優化開發的思想,所負責的項目須能承擔繁重的訪問壓力;
3、 精通PHP/MySQL開發,精通memcache、squid、redis等緩存技術者優先;
4、 有大流量并發網站工作經驗,有創新思維并勇于挑戰新事物;
5、 具有大數據量、高訪問量、高并發網站設計開發經驗;
6、 熟悉掌握HTML、JS 、CSS 等前端技術 ;
7、 具備良好的編程習慣,熟練掌握OOP編程和常見設計模式 ;
8、 具備團隊開發經驗,熟練掌握SVN 、Git 等常見工具的使用 ;
10、 責任心強,良好的對外溝通和團隊協作能力,能承受工作壓力。
大數據開發工程師的主要職責 篇27
職責描述:
1、負責機器翻譯引擎部分功能的開發優化(比如語言自動檢測、預處理優化等)
2、負責知識圖譜后端引擎的開發
3、只需要負責算法的具體實現即可。不需要承擔算法設計的任務
任職要求:
1、計算機及相關專業(本科3年以上)
2、熟練掌握開發語言C++或者C,熟悉網絡編程,多線程編程
3、熟悉linux開發環境、熟悉至少一種腳本語言(如Python、Shell等)
4、良好的.編程規范(日志記錄、異常處理、代碼格式、代碼注釋、svn注釋)
5、其他:較強的團隊合作、邏輯思維能力;性格踏實穩定,抗壓能力強
大數據開發工程師的主要職責 篇28
職責:
1.負責PC和移動端的Web前端架構設計和開發,并配合后端開發人員完成產品的開發工作;
2.負責內容分享、推廣活動等H5頁面的開發和優化;
3.和Android/iOS小伙伴們緊密合作,開發Hybird App;
4.能根據產品設計原型獨立完成網頁的構建;
5.參與產品設計討論,和產品團隊一起討論如何構建新穎的產品功能以及極致的用戶體驗。
經驗及行業背景:
1.3年及以上Web前端相關工作經驗;
2.精通HTML/CSS/Javascript,熟悉JS性能優化,熟練使用各種調試、抓包工具,能獨立歸納、分析和解決問題;
3.熟悉jQuery、EasyUI、Bootstrap等JS框架;
4.熟練編寫H5,以及常見的特效頁面;
5.對瀏覽器兼容性、代碼可維護性、前端性能優化等有深入研究;
6.熱愛互聯網,善于溝通,有較強的學習能力、抗壓能力和團隊合作精神。
7.比起你的工作經驗和專業能力,我們更看重你的激情和學習能力。
大數據開發工程師的主要職責 篇29
職責:
1.獨立完成項目的系統分析、設計、并主導完成詳細設計和編碼的任務,確保項目的進度和質量;
2.針對業務,進行數據庫設計和優化;
3.時刻關注并學習新技術,并能夠在實踐中應用,帶領后端團隊共同進步,完成每月的常規發布任務;
4.能夠帶領團隊解析需求,商討具體開發方案,對技術團隊的開發質量把關 。
任職要求:
1.3-5年java開發經驗,java基礎扎實,熟悉I/O、多線程、集合等基礎框架。
2.熟悉linux、虛擬化以及容器技術及云服務的發展方向。
3.熟悉web開發、熟練使用Spring家族框架。
4.精通使用常用的設計模式。
5.責任心一定要強,逆商要高。
6.能接受保險項目的外包(工作地還是在本公司)。
7.要有一定的管理、協調能力,能夠迅速定位問題并推進直至解決。
大數據開發工程師的主要職責 篇30
職責:
1、參與數據類項目需求分析和總體架構設計, 對項目開發工作提出解決方案;
2、根據開發進度和任務分配,完成相應模塊軟件的開發、編程任務;
3、解決日常開發中遇到的技術問題,根據需要不斷修改完善軟件;
4、根據公司技術文檔規范編寫相應的技術文檔以及編寫相應的說明書。
任職資格:
1、計算機科學、軟件工程等相關理工類專業本科/碩士學歷;
2、熟悉Teradata、DB2、Oracle等主流數據倉庫模型設計之一;
3、熟悉oracle、Mysql等數據庫及SQL開發,Teradata、DB2、Oracle等主流數據倉庫模型設計之一;
4、熟悉JBOSS、Tomcat、Weblogic、Websphere等一種或多種主流應用服務器;
5、具有良好的溝通交流能力、合作精神及主動學習精神,能夠接受全國范圍內的出差。