數(shù)據(jù)倉庫工程師的職責(精選19篇)
數(shù)據(jù)倉庫工程師的職責 篇1
職責:
1. 負責企業(yè)級數(shù)據(jù)倉庫架構(gòu)設計、建模以及ETL開發(fā),構(gòu)建可擴展的數(shù)據(jù)倉庫解決方案;
2.負責公司日常運營報表開發(fā)維護,和業(yè)務及分析部門溝通協(xié)作,提供多層面數(shù)據(jù)服務;
3.提供完善的數(shù)據(jù)保障體系,包括元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量、數(shù)據(jù)安全等;
崗位要求
1. 計算機或相關(guān)專業(yè)本科及以上學歷 ;
2. 具有豐富的數(shù)據(jù)開發(fā)經(jīng)驗,對數(shù)據(jù)處理、數(shù)據(jù)建模、數(shù)據(jù)分析等有深刻認識和實戰(zhàn)經(jīng)驗;
3. 熟悉SQL,有一定的SQL性能優(yōu)化經(jīng)驗;
4. 熟練掌握Java語言,MapReduce編程,腳本語言Shell/Python/Perl之一;
5. 業(yè)務理解力強,對數(shù)據(jù)、新技術(shù)敏感,對云計算、大數(shù)據(jù)技術(shù)充滿熱情;
6. 積極樂觀、誠信、有責任心;具備強烈的進取心、求知欲及團隊合作精神;
數(shù)據(jù)倉庫工程師的職責 篇2
職責:
1、負責數(shù)據(jù)倉庫架構(gòu)、元數(shù)據(jù)、數(shù)據(jù)質(zhì)量、血緣分析等環(huán)節(jié)的設計與實現(xiàn),構(gòu)建可擴展的數(shù)據(jù)倉庫和分析解決方案;
2、負責將BI、運營、產(chǎn)品、客服等業(yè)務部門的需求抽象成數(shù)倉模型并落地;
3、負責參與智能用戶畫像體系開發(fā)與建設;
4、負責數(shù)據(jù)工具、數(shù)據(jù)產(chǎn)品及其他數(shù)據(jù)需求的開發(fā)。
技能要求:
1、有數(shù)據(jù)倉庫需求調(diào)研和需求分析經(jīng)驗,能根據(jù)業(yè)務需求設計數(shù)據(jù)倉庫模型,并對數(shù)據(jù)倉庫數(shù)據(jù)模型進行管理,保證數(shù)據(jù)質(zhì)量,熟悉kimball架構(gòu);
2、精通sql開發(fā),有較豐富的Hive sql性能調(diào)優(yōu)經(jīng)驗優(yōu)先;
3、熟悉spark structured streaming、flink中至少一種流式處理計算框架,有相關(guān)開發(fā)經(jīng)驗;
4、熟悉大數(shù)據(jù)存儲處理組件,包括但不限于Hive/HDFS/HBASE/presto/Druid/kylin/impala;
5、熟練掌握Linux各種命令行工具,良好的shell功底。
數(shù)據(jù)倉庫工程師的職責 篇3
職責:
1、參與數(shù)據(jù)倉庫架構(gòu)設計、建模和ETL開發(fā);
2、參與數(shù)據(jù)治理工作,提升數(shù)據(jù)易用性及數(shù)據(jù)質(zhì)量,與數(shù)據(jù)工具團隊緊密合作;
3、理解并合理抽象業(yè)務需求,發(fā)揮數(shù)據(jù)價值,與業(yè)務團隊緊密合作。
任職要求:
1、計算機、數(shù)學、統(tǒng)計相關(guān)專業(yè)專科及以上學歷,其中2年以上數(shù)據(jù)倉庫開發(fā)經(jīng)歷;
2、精通數(shù)據(jù)倉庫實施方法論、深入了解數(shù)據(jù)倉庫體系,并支撐過實際業(yè)務場景;
3、具備較強的編碼能力,熟悉sql,python,hive,spark,kafka,storm中的多項,有至少TB以上級大數(shù)據(jù)處理經(jīng)驗;
4、對數(shù)據(jù)敏感,認真細致,善于從數(shù)據(jù)中發(fā)現(xiàn)疑點;
5、善于溝通,具備優(yōu)秀的技術(shù)與業(yè)務結(jié)合能力。
6、有電力行業(yè)經(jīng)驗者優(yōu)先
數(shù)據(jù)倉庫工程師的職責 篇4
職責:
1. 針對業(yè)務問題進行分析,深入了解業(yè)務需求,為業(yè)務部門提供數(shù)據(jù)支持;
2. 搭建業(yè)務分析模型或業(yè)務分析指標體系,統(tǒng)一數(shù)據(jù)指標分析口徑;
3. 參與報表需求調(diào)研和需求分析;
4. 參與報表開發(fā)工作;
5. 參與ELT相關(guān)的設計方案和開發(fā);
崗位要求
1.4年及以上BI開發(fā)經(jīng)驗;
2.熟悉數(shù)據(jù)倉庫建模理論,有建模經(jīng)驗;
3.熟悉掌握SQL語言嗎,熟悉PL/SQL編程,熟練掌握存儲過程開發(fā);
4.具有較強的業(yè)務理解能力,溝通能力;
5.熟悉常用ETL技術(shù);
6.熟悉Hive、HBase、Spark等大數(shù)據(jù)者優(yōu)先;
數(shù)據(jù)倉庫工程師的職責 篇5
職責:
1、構(gòu)建數(shù)據(jù)挖掘模型,推動業(yè)務精確營銷實踐;
2、根據(jù)業(yè)務需求開展數(shù)據(jù)分析與建模工作,提供相關(guān)的模型和算法支撐;
3、構(gòu)建數(shù)據(jù)挖掘與建模解決方案,指導應用設計與開發(fā);
任職要求:
1、具有數(shù)學統(tǒng)計、計算機相關(guān)專業(yè)的本科及以上學歷
2、兩年以上相關(guān)工作經(jīng)驗;
3、精通各種分類、聚類、預測、關(guān)聯(lián)模型算法與原理;
4、精通SAS、MATLAB、CLEMENTINEL等主流數(shù)據(jù)挖掘工具的使用方法,并具有大型數(shù)據(jù)挖掘項目的成功實施經(jīng)驗;
5、對數(shù)據(jù)與業(yè)務有足夠敏感性,具有極強的利用數(shù)據(jù)分析、挖掘,解決業(yè)務問題的能力;
6、對數(shù)據(jù)挖掘方法論有較深刻的理解,能獨立規(guī)劃數(shù)據(jù)挖掘模型解決方案并實施;
7、熟悉linux環(huán)境和命令,能編寫簡單的shell腳本。
8、熟悉MySQL、Oracle、SqlServer、PostgreSQL、NoSql、NewSql等主流數(shù)據(jù)庫,精通mysql,oracle者優(yōu)先。
數(shù)據(jù)倉庫工程師的職責 篇6
職責:
1. 與客戶溝通,確定需求邊界。能根據(jù)客戶的表述進行需求文檔的編寫和需求的拆分;
2. 配合公司市場人員獲取需求;
3. 進行需求可行性研究;
4. 參與需求調(diào)研和產(chǎn)品定義評估,業(yè)務需求討論與設計;
5. 根據(jù)產(chǎn)品定義實現(xiàn)詳細需求分析文檔、用戶手冊編寫并協(xié)助解決測試問題;
6. 參與整個產(chǎn)品開發(fā)流程,與開發(fā)測試團隊一起保證最終產(chǎn)品發(fā)版。
任職要求:
1.計算機,軟件工程等相關(guān)專業(yè),本科以上學歷;
2.具有2年以上軟件項目分析經(jīng)驗,參與過項目(或產(chǎn)品)的規(guī)劃設計、需求分析工作;
3.較強的用戶需求判斷、引導、控制能力;優(yōu)秀的文字表達、業(yè)務理解、交流能力;
4.團隊合作精神;
5.要求至少2年從事離散電子制造行業(yè) MES系統(tǒng)相關(guān)從業(yè)經(jīng)驗,熟悉業(yè)界知名MES產(chǎn)品優(yōu)先。
數(shù)據(jù)倉庫工程師的職責 篇7
1,為客戶提供固態(tài)存儲(SSD)產(chǎn)品和方案的技術(shù)講解、產(chǎn)品演示,配合銷售人員完成銷售指標;
2,為客戶提供技術(shù)支持,解決客戶使用過程中的技術(shù)問題;
3,針對客戶反饋的深度問題,負責與產(chǎn)品和研發(fā)團隊溝通做出解決方案;
3,負責項目案例整理、分析、總結(jié)和共享推廣。
數(shù)據(jù)倉庫工程師的職責 篇8
1、 參與數(shù)據(jù)平臺的定義,規(guī)劃,設計和項目監(jiān)督;
3、 與技術(shù)部和基礎設施團隊協(xié)助,完成數(shù)據(jù)倉庫的建設與推進;
4、 協(xié)助經(jīng)理從技術(shù)層面完成所有的技術(shù)實施架構(gòu),包括hadoop大數(shù)據(jù)平臺、數(shù)據(jù)倉庫、數(shù)據(jù)模型、etl、olap、報表平臺、元數(shù)據(jù)管理、主數(shù)據(jù)管理、分布式數(shù)據(jù)平臺等;
5、 參與建立和維護技術(shù)規(guī)范、流程、文檔,確保和項目需求保持同步;
6、 參與Informatica服務工作,包括Informatica性能調(diào)優(yōu),服務的安裝發(fā)布,及客戶現(xiàn)場培訓。
數(shù)據(jù)倉庫工程師的職責 篇9
1. 維護和管理桌面電腦及外設連接設置,并保證電腦及外設連接設置能正常運行;
2. 對硬件故障、軟件、電子郵件和附屬設備等基本問題進行處理解決;
3. 對計算機、無線網(wǎng)絡設備、打印機、掃描等設備的安裝和設置;
4. 保證我司各職場PC機及外設設備的正常運行;
5. 完成直屬上級指派的其他工作任務。
數(shù)據(jù)倉庫工程師的職責 篇10
1) 從事圖像處理及模式識別項目的開發(fā);
2) 負責識別算法的訓練、優(yōu)化;
3) 協(xié)助完成項目開發(fā)和相應的文檔管理;
4)從事人工智能深度學習項目的開發(fā);
5)數(shù)字圖像及視頻處理算法開發(fā),應用模塊實現(xiàn)。
數(shù)據(jù)倉庫工程師的職責 篇11
職責:
1.負責MPP數(shù)據(jù)庫日常維護,業(yè)務數(shù)據(jù)收集整理,對多種數(shù)據(jù)源的進行集成;
2.負責BI平臺搭建和日常維護、需求調(diào)研、模型設計工作;
3.涉及部分ETL設計、模型設計、開發(fā)工作;
4.協(xié)助解決BI平臺運行日常問題;
5.本職位上班地點:佛山順德區(qū)。
任職資格:
1.一年以上相關(guān)工作經(jīng)驗;
2.熟悉Oracle、DB2等主流數(shù)據(jù)庫,并對分布式數(shù)據(jù)庫有了解,如果熟悉MPP數(shù)據(jù)庫優(yōu)先考慮;
3.掌握BI相關(guān)工具,用過如ETL工具kettle;
4.接觸并使用過前端報表開發(fā)工作;
5.良好的溝通能力和獨立工作能力,良好的團隊合作意識與責任心,良好的文檔編寫能力。
數(shù)據(jù)倉庫工程師的職責 篇12
職責:
1.負責VIVO公司級的數(shù)據(jù)集市和數(shù)據(jù)倉庫的設計和開發(fā)
2.負責基于用戶行為的用戶標簽探索和開發(fā)
3.負責基于業(yè)務需求的數(shù)據(jù)中間層和可視化開發(fā)
4.負責各類分類和預測模型的開發(fā)
任職資格:
1.本科學歷,數(shù)統(tǒng)、計算機相關(guān)專業(yè)。
2.了解hadoop\spark生態(tài),有完整倉庫設計和開發(fā)經(jīng)驗。
3.精通hql調(diào)優(yōu),shell\python,熟練使用常規(guī)機器學習算法。
數(shù)據(jù)倉庫工程師的職責 篇13
職責:
1、編制水文水資源信息化項目有關(guān)的科研報告、實施方案、投標文件等;
2、負責與客戶進行業(yè)務溝通,挖掘和把握客戶的需求;
3、在項目實施過程中,對階段成果進行功能性測試;
4、協(xié)助項目經(jīng)理在項目實施過程中進行匯報、溝通;
5、帶領(lǐng)團隊進行需求調(diào)研,包括需求調(diào)研計劃編制、需求調(diào)研實施、系統(tǒng)原型設計、需求規(guī)格說明書編寫、推進需求評審等;
6、掌握軟件開發(fā)與數(shù)據(jù)庫基礎知識,輔助項目實施工作;
7、負責需求變更的跟蹤管理;
8、編制項目過程文檔,完成各類匯報與項目驗收等工作,承擔培訓及后期維護工作;
9、配合項目經(jīng)理,帶領(lǐng)團隊針對項目中的數(shù)據(jù)進行規(guī)劃、整理,掌握行業(yè)發(fā)展現(xiàn)狀,了解行業(yè)動態(tài),分析政策信息。
任職要求:
1、從事水利行業(yè)需求分析等相關(guān)經(jīng)驗3年以上,最好做過2個以上大中型項目(300萬以上),熟悉軟件開發(fā)者更佳;
2、本科及以上學歷,碩士研究生優(yōu)先考慮;
3、有良好的計算機基礎,了解軟件設計和開發(fā)基本原理;
4、熟悉水文、水資源、地下水、水環(huán)境等業(yè)務者優(yōu)先,具備應用系統(tǒng)初步設計能力;
5、有較強的文檔編寫能力;
6、具備良好的系統(tǒng)分析、邏輯思維和抽象概括的能力;
7、具備獨立工作能力和團隊合作精神,細心、責任感強;
8、 對用戶體驗方面的理論有一定的了解和認識,并能有效運用于產(chǎn)品設計工作中;
9、熟悉需求調(diào)研方法,有較強的業(yè)務流程及業(yè)務模型分析設計能力。
10、優(yōu)先考慮具有水利行業(yè)軟件需求分析經(jīng)驗的人員。
數(shù)據(jù)倉庫工程師的職責 篇14
1負責公司設備TPM管理制度及相關(guān)文件的編制,并組織實施
2負責組織對公司設備操作人員進行有關(guān)設備知識方面的培訓、考試及操作證辦理工作,提升操作者技能;
3負責對公司設備操作點檢、保養(yǎng)執(zhí)行過程的監(jiān)督和檢查并考核;
負責設備點檢、保養(yǎng)問題推動處理;
4負責組織公司設備部門與制造部門設備定期碰頭會,收集問題,組織制定實施計劃并跟蹤、檢查落實情況;
5負責設備安全、維修安全管理,對過程執(zhí)行情況進行監(jiān)督和檢查
6持續(xù)開展TPM,減少或避免設備故障發(fā)生
數(shù)據(jù)倉庫工程師的職責 篇15
1.熟悉染色陽極制程原理及參數(shù),具備獨立開發(fā)染色陽極調(diào)色經(jīng)驗;
2.對陽極制程有獨到見解,具備獨立解決制程中常見問題能力;
3.具備制程異常FA分析能力,可獨立解決制程異常問題;
4.熟悉環(huán)保廢水工藝設計能力,可獨立完成環(huán)保新工藝的開發(fā)評估;
5.熟悉實驗室工作流程,具備獨立開發(fā)新藥水及新工藝能力,并輔助導入量產(chǎn);
數(shù)據(jù)倉庫工程師的職責 篇16
1、根據(jù)生產(chǎn)計劃,結(jié)合庫存、在途等情況制定物料需求計劃;
2、跟進生產(chǎn)用料的進度,保證物料使用需求,協(xié)調(diào)物料及時到料;
3、對接生產(chǎn)計劃,及時協(xié)調(diào)和反饋物料異常等情況,確保生產(chǎn)有序進行;
4、原材料庫存控制,制定合理的庫存控制策略和具體措施,滿足生產(chǎn)發(fā)貨的同時不斷優(yōu)化庫存結(jié)構(gòu);
5、確保物料更替有序進行,并保證生產(chǎn)需求和預防呆滯;
6、評估和分析物料供應風險,制定長期有效的供應策略,降低供應風險。
數(shù)據(jù)倉庫工程師的職責 篇17
職責:
1.負責數(shù)據(jù)庫安裝維護、遷移、安全管理和故障處理等日常維護;
2.負責數(shù)據(jù)庫設計支持及性能優(yōu)化,推進優(yōu)化工作有效實施;
3.根據(jù)業(yè)務需求,改進數(shù)據(jù)庫架構(gòu),提供高可用、高性能、可擴展的、穩(wěn)定可靠的數(shù)據(jù)庫解決方案。
4.根據(jù)需求進行存儲過程和job的編寫
5.維護和開發(fā)與其他數(shù)據(jù)庫的數(shù)據(jù)交換服務
任職要求:
1、計算機相關(guān)專業(yè)專科及以上,有1年以上數(shù)據(jù)庫管理經(jīng)驗;
2、熟悉ORACEL數(shù)據(jù)庫,了解數(shù)據(jù)庫引擎等架構(gòu)上的體系結(jié)構(gòu)等;
3、熟悉MySQL數(shù)據(jù)庫體系結(jié)構(gòu)和工作原理,有過硬的存儲過程、函數(shù)、視圖編寫技能;;
4、具有一定的故障排查能力,有很好的技術(shù)敏感度和技術(shù)文檔整合能力;
5、善于學習新技術(shù),對新技術(shù)有較強的接受能力。
6、有較好的團隊精神和良好的溝通能力,能承受一定的工作壓力,做事細心,責任心強;
數(shù)據(jù)倉庫工程師的職責 篇18
負責日常采購到貨商品檢查活動的計劃安排,并組織實施;
參與制定、修訂商品檢驗標準;
參與質(zhì)量系統(tǒng)的建立和完善,負責相關(guān)質(zhì)量文件的控制;
參與對供應商的評估,參與對供應商的考核,配合供應商進行不良品的確認,改進;
負責客訴反饋中不合格商品的確認,參與對客訴商品的原因分析、糾正措施和提出改善建議;
負責對下屬品質(zhì)意識的灌輸及人員專業(yè)知識技能培訓;
總結(jié)QC每周和每月的檢驗實績,匯報每月的品質(zhì)情況;
負責下屬人員的管理和績效考核 ;
負責質(zhì)量目標的達成;
數(shù)據(jù)倉庫工程師的職責 篇19
職責:
1、針對具體的業(yè)務場景需求、定義數(shù)據(jù)分析及挖掘問題;
2、使用統(tǒng)計學分析方法、挖掘算法、構(gòu)建有效且通用的數(shù)據(jù)分析模型,對數(shù)據(jù)挖掘方案進行驗證、開發(fā)、改進和優(yōu)化,實現(xiàn)數(shù)據(jù)挖掘的功能應用;
3、搭建高擴展高性能的數(shù)據(jù)分析模型庫,作為數(shù)據(jù)分析團隊的基礎工具;
4、完成領(lǐng)導安排的其他工作。
任職要求:
1、計算機、統(tǒng)計學、數(shù)學相關(guān)專業(yè),本科及以上學歷;
2、3年及以上相關(guān)工作經(jīng)驗,985和211大學的優(yōu)秀畢業(yè)生可放寬至2年以上;
3、熟悉PHM的應用背景、功能定義、系統(tǒng)架構(gòu)、關(guān)鍵技術(shù);
4、熟練掌握Python進行數(shù)據(jù)挖掘;會使用Java進行軟件開發(fā)者優(yōu)先考慮;
5、熟悉常用數(shù)據(jù)挖掘算法(如分類、聚類、回歸、關(guān)聯(lián)規(guī)則、神經(jīng)網(wǎng)絡等)及其原理,并具備相關(guān)項目經(jīng)驗;
6、熟悉數(shù)據(jù)倉庫,熟練使用SQL語言,有良好的數(shù)據(jù)庫編程經(jīng)驗;
7、具備較強的獨立解決問題的能力,勤奮敬業(yè)、主動性和責任心強。