數(shù)據(jù)倉庫工程師的基本職責(zé)模板(精選15篇)
數(shù)據(jù)倉庫工程師的基本職責(zé)模板 篇1
職責(zé):
1、 負(fù)責(zé)全平臺(tái)流量及業(yè)務(wù)數(shù)據(jù)開發(fā),參與數(shù)據(jù)模型體系構(gòu)建及數(shù)據(jù)主題設(shè)計(jì),為BI數(shù)據(jù)報(bào)表提供底層數(shù)據(jù)支持;
2、 理解產(chǎn)品、業(yè)務(wù)人員的數(shù)據(jù)需求,提供OLAP、數(shù)據(jù)提取等數(shù)據(jù)服務(wù);
3、 參與數(shù)據(jù)倉庫模型設(shè)計(jì),負(fù)責(zé)元數(shù)據(jù)建設(shè)、數(shù)據(jù)融合、多維度事實(shí)表及維表的數(shù)據(jù)倉庫開發(fā);
4、 參與項(xiàng)目ETL的設(shè)計(jì)、開發(fā)、調(diào)度、執(zhí)行、處理,進(jìn)行模型性能及ETL流程調(diào)優(yōu);
任職要求:
1、大學(xué)本科及以上學(xué)歷,5年以上工作經(jīng)驗(yàn);
2、 熟悉ORACLE、MYSQL、SQL Server等主流數(shù)據(jù)庫,熟練使用Power designer、kettle、 Data service等數(shù)據(jù)倉庫及ETL工具,了解Dashboard、Smart BI、Power BI、Cognos等前端開發(fā)工具;
3、 熟悉Data Cube,并精通SQL,熟練使用Hive、Spark-SQL, python、Shell等進(jìn)行數(shù)據(jù)開發(fā),具備開發(fā)復(fù)雜業(yè)務(wù)邏輯的數(shù)據(jù)處理及分析能力;
4、熟悉數(shù)據(jù)倉庫理論,掌握Kimball維度建模方法,有ETL開發(fā)和數(shù)倉模型設(shè)計(jì)經(jīng)驗(yàn);
5、有很強(qiáng)的自我驅(qū)動(dòng)力,對開源技術(shù)非常感興趣并具有一定的研究能力;
數(shù)據(jù)倉庫工程師的基本職責(zé)模板 篇2
職責(zé):
1. 獨(dú)立完成ETL 需求分析、設(shè)計(jì)、開發(fā)及部署工作
2. 獨(dú)立完成BI分析報(bào)表等應(yīng)用的需求分析、模型設(shè)計(jì)、數(shù)據(jù)處理、報(bào)表開發(fā)等工作;
3. 配合開發(fā)經(jīng)理完成BI分析報(bào)表等項(xiàng)目的過程管理、元數(shù)據(jù)管理、質(zhì)量管理;
4. 完成實(shí)時(shí)大數(shù)據(jù)處理系統(tǒng)及批處理系統(tǒng)的架構(gòu)設(shè)計(jì)及實(shí)現(xiàn);
5、負(fù)責(zé)BI分析報(bào)表等應(yīng)用的系統(tǒng)部署及運(yùn)維
任職要求:
1. 計(jì)算機(jī)相關(guān)專業(yè)本科及以上學(xué)歷,3年以上相關(guān)開發(fā)經(jīng)驗(yàn);
2. 精通主流關(guān)系型數(shù)據(jù)庫,精通SQL優(yōu)化、ETL問題定位,能夠從模型設(shè)計(jì)層面做ETL優(yōu)化;
3. 精通ETL架構(gòu)的設(shè)計(jì),精通BI/DW,精通數(shù)據(jù)倉庫模型設(shè)計(jì);
4. 熟悉Hadoop、Map/Reduce的原理,能夠選用合適的工具設(shè)計(jì)、編寫Hadoop的ETL程序;
5. 熟悉Shell/Perl/Python等腳本語言;
6. 熟悉kettle及sqoop; 精通元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量分析和處理設(shè)計(jì)。
數(shù)據(jù)倉庫工程師的基本職責(zé)模板 篇3
職責(zé):
1.負(fù)責(zé)VIVO公司級的數(shù)據(jù)集市和數(shù)據(jù)倉庫的設(shè)計(jì)和開發(fā)
2.負(fù)責(zé)基于用戶行為的用戶標(biāo)簽探索和開發(fā)
3.負(fù)責(zé)基于業(yè)務(wù)需求的數(shù)據(jù)中間層和可視化開發(fā)
4.負(fù)責(zé)各類分類和預(yù)測模型的開發(fā)
任職資格:
1.本科學(xué)歷,數(shù)統(tǒng)、計(jì)算機(jī)相關(guān)專業(yè)。
2.了解hadoop\spark生態(tài),有完整倉庫設(shè)計(jì)和開發(fā)經(jīng)驗(yàn)。
3.精通hql調(diào)優(yōu),shell\python,熟練使用常規(guī)機(jī)器學(xué)習(xí)算法。
數(shù)據(jù)倉庫工程師的基本職責(zé)模板 篇4
職責(zé):
1、根據(jù)公司業(yè)務(wù)需求,構(gòu)建可擴(kuò)展的數(shù)據(jù)倉庫,負(fù)責(zé)數(shù)據(jù)模型的規(guī)劃設(shè)計(jì)實(shí)現(xiàn)和優(yōu)化。
2、負(fù)責(zé)業(yè)務(wù)數(shù)據(jù)的采集,清洗,特征抽取。
3、負(fù)責(zé)ETL的維護(hù)工作,發(fā)現(xiàn)故障及時(shí)診斷、定位、分析和調(diào)試,保證數(shù)據(jù)準(zhǔn)確、穩(wěn)定。
4、根據(jù)業(yè)務(wù)需要,提供面向業(yè)務(wù)的報(bào)表、數(shù)據(jù)提取等數(shù)據(jù)服務(wù)。
5、參與業(yè)務(wù)數(shù)據(jù)分析體系的數(shù)據(jù)統(tǒng)計(jì)、分析及建模。
任職資格:
1、 統(tǒng)招本科及以上學(xué)歷,三年以上數(shù)據(jù)倉庫、BI開發(fā)經(jīng)驗(yàn);至少兩年
2、熟練使用oracle、mysql、Postgres等關(guān)系型數(shù)據(jù)庫及Hive、Hbase、spark、impala等基于hadoop集群的組件、編寫優(yōu)秀的存儲(chǔ)過程、熟悉shell腳本語言,有良好的代碼習(xí)慣
3、 熟悉數(shù)據(jù)倉庫建設(shè)的流程及方法論、理解維度建模,有實(shí)際的模型設(shè)計(jì)經(jīng)驗(yàn)及ETL相關(guān)開發(fā)經(jīng)驗(yàn);
4、 熟悉二種以上開源或商業(yè)的BI工具,有報(bào)表及可視化開發(fā)經(jīng)驗(yàn),熟悉帆軟開發(fā)優(yōu)先;
5、互聯(lián)網(wǎng)金融工作經(jīng)驗(yàn)優(yōu)先,汽車金融行業(yè)經(jīng)驗(yàn)優(yōu)先
5、 較強(qiáng)的邏輯思維能力和學(xué)習(xí)能力,對數(shù)據(jù)有敏銳的認(rèn)知力,工作態(tài)度踏實(shí)、認(rèn)真、積極主動(dòng),有良好的團(tuán)隊(duì)協(xié)作能力、執(zhí)行力以及抗壓工作能力和心態(tài),樂于溝通交流和分享。
數(shù)據(jù)倉庫工程師的基本職責(zé)模板 篇5
職責(zé):
1、負(fù)責(zé)公司大數(shù)據(jù)平臺(tái)建設(shè)、開發(fā)
2、依據(jù)業(yè)務(wù)需求,進(jìn)行數(shù)據(jù)產(chǎn)品的規(guī)劃和設(shè)計(jì)開發(fā),為數(shù)據(jù)分析和運(yùn)營等人員搭建友好高效的數(shù)據(jù)產(chǎn)品,如報(bào)表、BI系統(tǒng)等
3、協(xié)助對業(yè)務(wù)數(shù)據(jù)進(jìn)行分析、建模,為業(yè)務(wù)部門的數(shù)據(jù)化運(yùn)營提供支持
任職要求:
1、本科或以上學(xué)歷,2年以上大數(shù)據(jù)開發(fā)或數(shù)據(jù)倉庫或BI經(jīng)驗(yàn),熟練掌握J(rèn)ava或者Python開發(fā)語言
2、熟悉Hadoop或Hadoop生態(tài)圈相關(guān)技術(shù),如Hive、Spark等,或者大數(shù)據(jù)云服務(wù)技術(shù)。
3、對業(yè)務(wù)有敏銳的洞察力,有較強(qiáng)的業(yè)務(wù)理解與分析能力;
4、具備良好的團(tuán)隊(duì)合作精神,有較好的溝通交流能力,善于主動(dòng)思考和行動(dòng),樂于解決具有挑戰(zhàn)性的問題;
5、具有電商領(lǐng)域大數(shù)據(jù)開發(fā)、推薦系統(tǒng)研發(fā)經(jīng)驗(yàn)的優(yōu)先考慮。
數(shù)據(jù)倉庫工程師的基本職責(zé)模板 篇6
職責(zé):
1、負(fù)責(zé)HP、DELL、華為、浪潮等業(yè)界主流品牌的服務(wù)器安裝配置及日常維護(hù)工作;
2、負(fù)責(zé)VMWare/Hyper-V虛擬化平臺(tái)項(xiàng)目實(shí)施及維護(hù)工作;
3、負(fù)責(zé)HP、華為、浪潮等企業(yè)級存儲(chǔ)及其SAN網(wǎng)絡(luò)的安裝配置及日常維護(hù)工作;
4、負(fù)責(zé)服務(wù)器集群拓?fù)浼癝AN存儲(chǔ)網(wǎng)絡(luò)部署;
5、編寫各類維護(hù)文檔,譬如:實(shí)施方案、實(shí)施報(bào)告、巡檢報(bào)告、故障處理報(bào)告等等。
任職要求:
1、計(jì)算機(jī)相關(guān)本科以上學(xué)歷,2年以上IT運(yùn)維或機(jī)房管理工作經(jīng)驗(yàn);
2、熟悉主流X86服務(wù)器(IBM/HP/華為/浪潮)和存儲(chǔ)的運(yùn)維和管理;
3、熟悉vmware虛擬化架構(gòu)技術(shù),具有虛擬化的搭建和運(yùn)維經(jīng)驗(yàn)。
數(shù)據(jù)倉庫工程師的基本職責(zé)模板 篇7
1、負(fù)責(zé)電力營銷業(yè)務(wù)需求分析及設(shè)計(jì)工作,可以獨(dú)立完成電力營銷業(yè)務(wù)需求調(diào)研、業(yè)務(wù)模型編制、需求說明書編制及制作業(yè)務(wù)需求原型等工作。
2、能夠熟練及清晰的開展需求講解,為開發(fā)人員概要設(shè)計(jì)和詳細(xì)設(shè)計(jì)提供業(yè)務(wù)支持、及負(fù)責(zé)功能驗(yàn)收工作。
3、配合測試人員參與測試計(jì)劃、測試用例、測試報(bào)告的編寫、問題缺陷的發(fā)現(xiàn)及跟蹤、用戶手冊編寫等。
4、對系統(tǒng)需求變更進(jìn)行影響分析,跟進(jìn)批準(zhǔn)后的需求變更在各個(gè)階段的落實(shí)。
數(shù)據(jù)倉庫工程師的基本職責(zé)模板 篇8
1.負(fù)責(zé)生產(chǎn)制造工程、生產(chǎn)制程標(biāo)準(zhǔn)文件建立,以及相關(guān)部門運(yùn)作程序文件的建立;
2.負(fù)責(zé)處理生產(chǎn)異常問題的分析與改善,針對不良品的分析報(bào)告制訂相應(yīng)對策;
3.負(fù)責(zé)新產(chǎn)品的導(dǎo)入、試產(chǎn)、量產(chǎn)過程中出現(xiàn)的問題的分析與改善;
4.生產(chǎn)指導(dǎo),現(xiàn)場異常問題的及時(shí)排除(遇到異常立即有臨時(shí)對策);
5.生產(chǎn)工藝的改善、產(chǎn)品性能及結(jié)構(gòu)方面的改善、包括工藝指導(dǎo)書的編寫等;
6.產(chǎn)能評估,持續(xù)改善生產(chǎn)效率,協(xié)助生產(chǎn)線解決問題;
7.制訂標(biāo)準(zhǔn)工時(shí),人員定額,作為廠區(qū)效率改善,成本評估之依據(jù);
8.動(dòng)作研究(MOD法),改善作業(yè)方式及線平衡,提升作業(yè)效率,減少材料報(bào)廢。
數(shù)據(jù)倉庫工程師的基本職責(zé)模板 篇9
職責(zé):
1、對現(xiàn)有大量數(shù)據(jù)源進(jìn)行深度挖掘、解析、特征分析,利用數(shù)據(jù)建立建模;
2、核心指標(biāo)的監(jiān)控和跟蹤分析,并對異常波動(dòng)情況進(jìn)行分析和問題定位;
3、負(fù)責(zé)監(jiān)控?cái)?shù)據(jù)的可視化和自動(dòng)化;
4、完成其他數(shù)據(jù)相關(guān)的工作;
職位要求:
1、本科及以上學(xué)歷,211或985院校金融、經(jīng)濟(jì)、數(shù)學(xué)、統(tǒng)計(jì)學(xué),計(jì)算機(jī)學(xué)等相關(guān)專業(yè);
2、了解LR、GBDT、XGBOOST、DNN和NLP等常用模型的開源工具,了解開源可視化工具;
3、熟悉至少一種數(shù)據(jù)挖掘工具, 如R,SAS, Python等,具備大量數(shù)據(jù)挖掘處理經(jīng)驗(yàn),有建模項(xiàng)目經(jīng)驗(yàn)或者信用卡行業(yè)相關(guān)從業(yè)經(jīng)驗(yàn)優(yōu)先;
4、熟悉熟知數(shù)據(jù)庫相關(guān)知識(shí),熟悉數(shù)據(jù)采集與分析方法;具備數(shù)據(jù)深層次挖掘的能力,善于發(fā)現(xiàn)數(shù)據(jù)的變化規(guī)律;
5、做事細(xì)心,具有很強(qiáng)的責(zé)任心,獨(dú)立解決問題的能力;
數(shù)據(jù)倉庫工程師的基本職責(zé)模板 篇10
職責(zé)描述:
1.負(fù)責(zé)不銹鋼雕塑工件的加工鍛造
2.具有識(shí)圖、鍛造、拼接、拋光經(jīng)驗(yàn)
任職要求:
1.有兩年以上相關(guān)工作經(jīng)驗(yàn)
2.有做道具、雕塑、工藝品、家具相關(guān)行業(yè)經(jīng)驗(yàn)者優(yōu)先錄用
數(shù)據(jù)倉庫工程師的基本職責(zé)模板 篇11
職責(zé):
1. 從事精準(zhǔn)醫(yī)療領(lǐng)域的大數(shù)據(jù)管理分析、BI數(shù)據(jù)挖掘;
2. 熟練使用腳本工具訪問數(shù)據(jù)庫,并完成相應(yīng)的腳本分析,以圖形界面的方式呈現(xiàn);
3. 熟練使用統(tǒng)計(jì)或者機(jī)器學(xué)習(xí)算法,對結(jié)構(gòu)化數(shù)據(jù)進(jìn)行統(tǒng)計(jì)分析,包括分類和聚類,并進(jìn)行預(yù)測建模等;
4. 與相關(guān)項(xiàng)目開發(fā)組溝通,明確其需求并給予數(shù)據(jù)分析統(tǒng)計(jì)結(jié)果等支持。
任職要求:
1、應(yīng)用數(shù)學(xué),計(jì)算機(jī),生物等相關(guān)專業(yè)碩士以上學(xué)歷;
2、有生命科學(xué)、基因、醫(yī)藥等生物科技行業(yè)2年以上工作經(jīng)驗(yàn);
3、熟練運(yùn)用各種常用算法和數(shù)據(jù)結(jié)構(gòu),熟悉常用的機(jī)器學(xué)習(xí)算法,了解各種算法的優(yōu)缺點(diǎn)和局限性;
4、熟悉R、Python 等數(shù)據(jù)分析平臺(tái)及工具,有搭建hadoop、spark或類似平臺(tái)從業(yè)經(jīng)驗(yàn);
5、 熟悉主流數(shù)據(jù)庫Oracle、MySQL對 NoSql 有一定了解及應(yīng)用經(jīng)驗(yàn);
6、 有團(tuán)隊(duì)精神,能夠承擔(dān)責(zé)任和壓力。
數(shù)據(jù)倉庫工程師的基本職責(zé)模板 篇12
職責(zé):
負(fù)責(zé)數(shù)據(jù)倉庫邏輯模型和物理模型設(shè)計(jì),對上游數(shù)據(jù)進(jìn)行清洗、清理、加工、轉(zhuǎn)換、加載至目標(biāo)數(shù)據(jù)庫。
負(fù)責(zé)數(shù)據(jù)ETL開發(fā)、數(shù)據(jù)平臺(tái)建設(shè),解決各種數(shù)據(jù)庫問題。例如:調(diào)優(yōu)、異常處理等。
對接相關(guān)業(yè)務(wù)團(tuán)隊(duì)進(jìn)行數(shù)據(jù)梳理,清洗并協(xié)助分析完成業(yè)務(wù)數(shù)據(jù)化管理的目標(biāo)。
對業(yè)務(wù)團(tuán)隊(duì)進(jìn)行數(shù)據(jù)能力輸出,并且負(fù)責(zé)與業(yè)務(wù)平臺(tái)進(jìn)行數(shù)據(jù)對接。
崗位要求:
計(jì)算機(jī)、軟件相關(guān)專業(yè),本科及以上學(xué)歷.
3年以上主流數(shù)據(jù)上(DB2、Oracle、SQLServer、Mysql等)ETL設(shè)計(jì)、開發(fā)經(jīng)驗(yàn),具備大型數(shù)據(jù)倉庫邏輯模型和物理模型設(shè)計(jì)經(jīng)驗(yàn),精通SQL,有較好的SQL性能調(diào)優(yōu)經(jīng)驗(yàn)。
熟悉Unix/Linux常規(guī)命令與工具,至少熟練使用Shell、Python、Perl等腳本語言之一。
有分布式數(shù)據(jù)倉庫建設(shè)相關(guān)經(jīng)驗(yàn)者優(yōu)先,具備金融行業(yè)數(shù)據(jù)倉庫建設(shè)相關(guān)經(jīng)驗(yàn)者優(yōu)先。
數(shù)據(jù)倉庫工程師的基本職責(zé)模板 篇13
職責(zé):
1、利用數(shù)據(jù)挖掘、機(jī)器學(xué)習(xí)相關(guān)知識(shí)和算法,解決工廠業(yè)務(wù)需求,驅(qū)動(dòng)業(yè)務(wù)數(shù)字化;
2、利用數(shù)據(jù)處理和挖掘相關(guān)知識(shí)實(shí)現(xiàn)工廠KPI要求,包括生產(chǎn)線IDC降低,預(yù)測性維護(hù)等數(shù)據(jù)挖掘的多方面應(yīng)用場景實(shí)現(xiàn);
3、負(fù)責(zé)數(shù)據(jù)挖掘項(xiàng)目管理,進(jìn)度把控,同時(shí)針對工廠各方面需求推廣數(shù)據(jù)挖掘和機(jī)器學(xué)習(xí)的主流應(yīng)用算法和工具,并制定相關(guān)的規(guī)范和標(biāo)準(zhǔn);
4、針對數(shù)據(jù)挖掘涉及的數(shù)據(jù)庫和業(yè)務(wù)相關(guān)硬件網(wǎng)絡(luò)架構(gòu)的搭建和日常運(yùn)維支持;
崗位要求:
1.本科或以上學(xué)歷,數(shù)學(xué)、計(jì)算機(jī)或者信息工程等相關(guān)專業(yè)。
2.有工業(yè)領(lǐng)域或AI領(lǐng)域數(shù)據(jù)分析處理或者相關(guān)行業(yè)一年及以上工作經(jīng)驗(yàn)。
3. 熟悉運(yùn)用各種常用算法和數(shù)據(jù)結(jié)構(gòu),有聚類、分類、回歸等數(shù)據(jù)挖掘工作經(jīng)驗(yàn)優(yōu)先考慮;
3. 熟悉Linux平臺(tái)上的編程環(huán)境,至少掌握R/Python/C#一門編程語言,有項(xiàng)目應(yīng)用優(yōu)先考慮
4. 至少掌握SQL Server/Oracle/MySQL一種數(shù)據(jù)庫,有項(xiàng)目實(shí)踐者優(yōu)先考慮
5. 熟悉Hadoop架構(gòu)、網(wǎng)絡(luò)通信和數(shù)據(jù)平臺(tái)架構(gòu)設(shè)計(jì)知識(shí)者優(yōu)先考慮
數(shù)據(jù)倉庫工程師的基本職責(zé)模板 篇14
1. 研究各種行業(yè)的食品原料來源,開發(fā)動(dòng)植物食品資源;
2. 負(fù)責(zé)新產(chǎn)品研發(fā),研究,設(shè)計(jì)食品加工工藝,并進(jìn)行加工指導(dǎo);
3. 根據(jù)營養(yǎng)學(xué)和人體健康原理,利用各種天然資源和人造資源開發(fā)新型指導(dǎo);
4. 負(fù)責(zé)完善生產(chǎn)體系流程制定相關(guān)標(biāo)準(zhǔn);
5. 熟悉食品安全法,保證負(fù)責(zé)開發(fā)的食品的安全。
數(shù)據(jù)倉庫工程師的基本職責(zé)模板 篇15
1、負(fù)責(zé)行業(yè)客戶需求挖掘、調(diào)研與分析,進(jìn)行客戶解決方案設(shè)計(jì)、客戶技術(shù)交流和方案宣講演示。
2、對項(xiàng)目招投標(biāo)提供技術(shù)支持,標(biāo)前引導(dǎo)和技術(shù)答標(biāo),解決方案設(shè)計(jì)和配置報(bào)價(jià)。
3、負(fù)責(zé)公司產(chǎn)品資料、彩頁、PPT、解決方案等宣傳文案設(shè)計(jì)和文檔標(biāo)準(zhǔn)化工作,能夠提供建設(shè)性的反饋以協(xié)助產(chǎn)品優(yōu)化。
4、負(fù)責(zé)公司產(chǎn)品對內(nèi)賦能培訓(xùn)如銷售培訓(xùn)工作,協(xié)助銷售達(dá)成業(yè)績目標(biāo);
5、負(fù)責(zé)公司產(chǎn)品在行業(yè)市場的信息收集,包括客戶信息、競爭對手信息、行業(yè)政策信息等。