數(shù)據(jù)倉庫工程師的主要職責(zé)(精選16篇)
數(shù)據(jù)倉庫工程師的主要職責(zé) 篇1
職責(zé):
1.建設(shè)公司級數(shù)據(jù)倉庫,并根據(jù)業(yè)務(wù)變化持續(xù)迭代和優(yōu)化;
2.對業(yè)務(wù)數(shù)據(jù)進行梳理和抽象,建設(shè)數(shù)據(jù)倉庫的數(shù)據(jù)模型;
3.對業(yè)務(wù)數(shù)據(jù)進行采集、清洗、轉(zhuǎn)換和存儲;
4.支撐BI、用戶數(shù)據(jù)、用戶運營、用戶畫像、房源數(shù)據(jù)、推薦系統(tǒng)等核心數(shù)據(jù)平臺產(chǎn)品;
5.研究大數(shù)據(jù)前沿技術(shù),不斷持續(xù)優(yōu)化大數(shù)據(jù)平臺,為業(yè)務(wù)提供價值。
任職資格:
1.本科及以上計算機、統(tǒng)計學(xué)、數(shù)據(jù)庫、機器學(xué)習(xí)等相關(guān)專業(yè),5年以上數(shù)據(jù)相關(guān)工作;
2.對業(yè)務(wù)數(shù)據(jù)有敏銳的理解能力,并能快速梳理和分析業(yè)務(wù)數(shù)據(jù);
3.熟練掌握SQL語言、熟悉MySQL,對Shell、Java(主要開發(fā)語言)、Python編程非常熟悉;
4.熟悉常用的ETL技術(shù)和原則;精通數(shù)據(jù)倉庫數(shù)據(jù)庫設(shè)計規(guī)范和實操;
5.熟悉Hadoop、Hive、HBase、Spark、Storm等開源平臺者優(yōu)先;
6.具有較強的分析和解決問題的能力,良好的學(xué)習(xí)能力和團隊合作精神,追求價值實現(xiàn),認同目標管理和敏捷。
數(shù)據(jù)倉庫工程師的主要職責(zé) 篇2
職責(zé):
1.參與傳統(tǒng)數(shù)倉和大數(shù)據(jù)數(shù)倉日常開發(fā)工作;
2.參與大數(shù)據(jù)倉庫設(shè)計、規(guī)劃和開發(fā);
3.參與日常工作的優(yōu)化,提出建設(shè)性意見;
4.負責(zé)管理項目,負責(zé)板塊內(nèi)的資源協(xié)調(diào)、進度管理、交付管理;
5.參與數(shù)據(jù)倉庫、數(shù)據(jù)集市體系架構(gòu)的設(shè)計、規(guī)劃與開發(fā), 參與大數(shù)據(jù)、ETL開發(fā),sql性能優(yōu)化。
任職要求:
1.全日制本科,計算機等相關(guān)專業(yè)。3年以上數(shù)倉開發(fā)經(jīng)驗,有銀行、金融從業(yè)經(jīng)驗者優(yōu)先。
2.2年以上項目管理經(jīng)驗,具備PMP證書優(yōu)先.
3.熟悉oracle/hive/spark,熟悉數(shù)據(jù)處理和性能優(yōu)化,有UDF自定義函數(shù)、MR開發(fā)經(jīng)驗優(yōu)先;
4.熟悉常用ETL工具,熟悉常用的Linux指令,熟悉shell/python任意一種腳本語言。
數(shù)據(jù)倉庫工程師的主要職責(zé) 篇3
職責(zé):
1、負責(zé)制定數(shù)據(jù)倉庫平臺技術(shù)體系架構(gòu)、數(shù)據(jù)架構(gòu)及規(guī)范;
2、負責(zé)設(shè)計和實施公司業(yè)務(wù)數(shù)據(jù)的實時/離線數(shù)據(jù)ETL架構(gòu)方案;
3、負責(zé)調(diào)度架構(gòu)設(shè)計與開發(fā);
4、負責(zé)數(shù)據(jù)倉庫平臺運維以及日常數(shù)據(jù)運營等管理;
5、負責(zé)關(guān)鍵技術(shù)攻關(guān);
任職要求:
1、5年以上數(shù)據(jù)倉庫項目開發(fā)經(jīng)驗,參與過數(shù)據(jù)倉庫架構(gòu)設(shè)計,對ETL開發(fā)流程、調(diào)度架構(gòu)有深入理解;
2、精通mysql、 oralce 、greenplum等至少一種數(shù)據(jù)庫,豐富的SQL性能調(diào)優(yōu)經(jīng)驗;
3、熟練使用Java、Shell、Python、Perl等至少一種腳本語言;
4、熟悉數(shù)據(jù)治理理論,數(shù)據(jù)質(zhì)量、元數(shù)據(jù)管理流程和方法;
5、了解Hadoop/Hive/HBase/Spark/Storm等技術(shù)及其生態(tài)圈;
6、溝通能力好、責(zé)任心強,具有良好的團隊合作精神和敬業(yè)精神;
數(shù)據(jù)倉庫工程師的主要職責(zé) 篇4
職責(zé):
1.負責(zé)企業(yè)級數(shù)據(jù)倉庫設(shè)計、規(guī)劃、建設(shè)、實施、管理,數(shù)據(jù)倉庫架構(gòu)設(shè)計與數(shù)據(jù)開發(fā),創(chuàng)建數(shù)據(jù)倉庫、數(shù)據(jù)集市
2.熟悉數(shù)據(jù)倉庫領(lǐng)域知識,從架構(gòu)和技術(shù)層面參與建設(shè)數(shù)據(jù)倉庫,包括元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量、主數(shù)據(jù)管理、性能優(yōu)化和調(diào)優(yōu)。
3.負責(zé)數(shù)據(jù)倉庫平臺相關(guān)數(shù)據(jù)管理工作,如研發(fā)規(guī)范、質(zhì)量規(guī)范、保障規(guī)范的制定與推動實施落地
4.配合和協(xié)助數(shù)據(jù)分析/數(shù)據(jù)挖掘形成底層/中間層的業(yè)務(wù)邏輯切片
任職資格:
1. 本科或碩士以上學(xué)歷,計算機工程相關(guān)專業(yè)
2. 熟悉大數(shù)據(jù)相關(guān)技術(shù)能力(Hadoop/MapReduce/Hive/Hbase等),熟練進行數(shù)倉Hive建設(shè)和軟件架構(gòu),較強的數(shù)據(jù)抽象能力
3.精通SQL,具備海量數(shù)據(jù)處理和Hive/Spark性能調(diào)優(yōu)經(jīng)驗,3年以上大規(guī)模分布式數(shù)據(jù)倉庫建設(shè)經(jīng)驗
4.熟練使用Druid/Kylin之一進行數(shù)據(jù)挖掘模型設(shè)計,熟練掌握Java/Scala之一,具備良好的coding素養(yǎng)和習(xí)慣,了解腳本語言,如Python、Shell等
5.強烈的責(zé)任心,工作態(tài)度積極主動,有較好的團隊精神和溝通能力,工作細致認真
數(shù)據(jù)倉庫工程師的主要職責(zé) 篇5
職責(zé):
1、負責(zé)ETL開發(fā)、作業(yè)調(diào)度和數(shù)據(jù)平臺建設(shè)
2、負責(zé)數(shù)據(jù)倉庫的設(shè)計、開發(fā)和優(yōu)化,建立結(jié)構(gòu)層次合理、靈活可擴展的數(shù)據(jù)倉庫
3、設(shè)計并研發(fā)BI分析相關(guān)的數(shù)據(jù)產(chǎn)品
4、結(jié)合對數(shù)據(jù)的理解和業(yè)務(wù)需求,對數(shù)據(jù)進行整理、分析和挖掘
任職要求
1、計算機相關(guān)專業(yè)本科及以上學(xué)歷,有2年以上數(shù)據(jù)倉庫、ETL工作經(jīng)驗
2、有海量數(shù)據(jù)處理、ETL及作業(yè)調(diào)度優(yōu)化、數(shù)據(jù)倉庫建模等經(jīng)驗
3、熟悉Linux、SQL、Python或Java、Shell腳本,有Hadoop/Hive/Spark/HBase/Kylin/Impala等大數(shù)據(jù)技術(shù)使用經(jīng)驗
4、邏輯清晰,對數(shù)據(jù)敏感,深入了解業(yè)務(wù),具備自己獨特的想法并能提出合理的建議
數(shù)據(jù)倉庫工程師的主要職責(zé) 篇6
職責(zé):
1、負責(zé)公司業(yè)務(wù)部門的需求調(diào)研,收集、分析、整理產(chǎn)品需求,編寫詳細需求文檔,跟蹤需求在設(shè)計、編碼和測試階段的完成情況;
2、基于業(yè)務(wù)的理解,開展數(shù)據(jù)分析,發(fā)掘數(shù)據(jù)價值,撰寫數(shù)據(jù)分析報告和數(shù)據(jù)應(yīng)用方案,為業(yè)務(wù)部門等提供數(shù)據(jù)支持;
3、負責(zé)優(yōu)化主數(shù)據(jù)管理流程及質(zhì)量監(jiān)控,跨部門合作橫向溝通解決數(shù)據(jù)質(zhì)量問題;
4、與相關(guān)團隊協(xié)作為業(yè)務(wù)提供數(shù)據(jù)挖掘、模型及算法等相關(guān)服務(wù),推動業(yè)務(wù)部門的數(shù)據(jù)化運營。
任職資格:
1、大專以上學(xué)歷,2年以上數(shù)據(jù)管理或需求分析相關(guān)工作經(jīng)驗,制造業(yè)或消費定制行業(yè)從業(yè)者佳;
2、熟悉產(chǎn)品設(shè)計的各種設(shè)計工具(MindManager、PPT、Visio等),了解需求用例的編制過程,有CRM、ERP、供應(yīng)鏈經(jīng)驗優(yōu)先
3、具有制造業(yè)中營銷、供應(yīng)鏈、產(chǎn)品企劃、財務(wù)、人力等至少一個方面的行業(yè)經(jīng)驗;
4、對工作充滿熱情,富有創(chuàng)新精神,能承受較大的工作壓力,優(yōu)秀的理解分析能力、溝通合作和資源協(xié)調(diào)能力。
數(shù)據(jù)倉庫工程師的主要職責(zé) 篇7
職責(zé):
1. 設(shè)計和搭建游戲服務(wù)器端的技術(shù)架構(gòu);
2. 負責(zé)游戲平臺服務(wù)器端開發(fā)工作,游戲腳本內(nèi)容編寫;
3. 負責(zé)與游戲客戶端數(shù)據(jù)傳輸協(xié)議的制定。
崗位要求:
1、熟悉網(wǎng)游的架構(gòu)設(shè)計,熟悉多線程開發(fā)技術(shù),處理大量網(wǎng)絡(luò)并發(fā)數(shù)據(jù), 有高并發(fā)多線程服務(wù)端程序開發(fā)經(jīng)驗
2、2年以上工作經(jīng)驗,1年及以上的C/C++服務(wù)器開發(fā)經(jīng)驗,熟悉掌握C/C++,良好的編程習(xí)慣和調(diào)試技巧
3、熟悉C/S結(jié)構(gòu),網(wǎng)絡(luò)通訊協(xié)議,http,socket編程技術(shù)
4、熟悉數(shù)據(jù)庫開發(fā),熟悉Mysql,SqlServer數(shù)據(jù)庫編程技術(shù)
5、熟悉windows server開發(fā)環(huán)境,熟悉Linux操作系統(tǒng)原理和日常使用的Shell命令服務(wù)器開發(fā)
6、熟悉lua腳本編程
7、熟悉Redis開發(fā)
8、邏輯思維清晰,能獨立設(shè)計游戲中系統(tǒng)邏輯,較強的溝通和能力,能承擔(dān)工作壓力
數(shù)據(jù)倉庫工程師的主要職責(zé) 篇8
1、負責(zé)編寫項目初步方案,配合業(yè)務(wù)部進行技術(shù)交流、工況確認;
2、根據(jù)專業(yè)負責(zé)人分配的任務(wù)熟悉設(shè)計資料,了解設(shè)計要求和設(shè)計原則,正確進行設(shè)計,并做好專業(yè)內(nèi)部與其他專業(yè)的提資和配合工作;
3、配合專業(yè)進度,制定詳細的作業(yè)計劃,并按照項目要求完成設(shè)計、自校工作,減少差錯,保證設(shè)計質(zhì)量;
4、獨立編制技術(shù)方案和施工圖設(shè)計,負責(zé)設(shè)計修改和處理施工中出現(xiàn)的工藝專業(yè)問題;
5、協(xié)助處理項目現(xiàn)場安裝調(diào)試方面的各類問題,根據(jù)項目實際情況作出設(shè)計變更。
數(shù)據(jù)倉庫工程師的主要職責(zé) 篇9
職責(zé):
1、負責(zé)HP、DELL、華為、浪潮等業(yè)界主流品牌的服務(wù)器安裝配置及日常維護工作;
2、負責(zé)VMWare/Hyper-V虛擬化平臺項目實施及維護工作;
3、負責(zé)HP、華為、浪潮等企業(yè)級存儲及其SAN網(wǎng)絡(luò)的安裝配置及日常維護工作;
4、負責(zé)服務(wù)器集群拓撲及SAN存儲網(wǎng)絡(luò)部署;
5、編寫各類維護文檔,譬如:實施方案、實施報告、巡檢報告、故障處理報告等等。
任職要求:
1、計算機相關(guān)本科以上學(xué)歷,2年以上IT運維或機房管理工作經(jīng)驗;
2、熟悉主流X86服務(wù)器(IBM/HP/華為/浪潮)和存儲的運維和管理;
3、熟悉vmware虛擬化架構(gòu)技術(shù),具有虛擬化的搭建和運維經(jīng)驗。
數(shù)據(jù)倉庫工程師的主要職責(zé) 篇10
1、推行 TPM (Total Productive Maintenance) 體系,建立工藝文件和定期更新TPM
2、負責(zé)設(shè)備導(dǎo)入及國內(nèi)與海外各工廠設(shè)備轉(zhuǎn)移
崗位要求:
1、大專以上學(xué)歷,5年以上設(shè)備管理經(jīng)驗
2、3年TPM推行經(jīng)驗及設(shè)備海外轉(zhuǎn)移經(jīng)驗
數(shù)據(jù)倉庫工程師的主要職責(zé) 篇11
職責(zé):
1、維護分析集團軟件數(shù)據(jù)庫功能及故障
2、提取、轉(zhuǎn)換集團軟件數(shù)據(jù)
3、維護數(shù)據(jù)庫功能的日常運行
4、協(xié)調(diào)軟件開發(fā)
5、部門ERP系統(tǒng)的日常維護
6、部門安排的其他工作
要求:
1、計算機或數(shù)學(xué)專業(yè),大專以上學(xué)歷
2、有一年以上數(shù)據(jù)庫實際相關(guān)工作經(jīng)驗,熟悉sqlserver,oracle中至少一種
3、不接收應(yīng)屆生,不接收實習(xí)生或?qū)W徒(有實際項目開發(fā)經(jīng)驗,并能夠獨立分析、解決、編程者不限)
4、男女不限,年齡不限
數(shù)據(jù)倉庫工程師的主要職責(zé) 篇12
職責(zé):
1、協(xié)助研發(fā)自動化運維平臺,提高運維、開發(fā)實施協(xié)作效率,規(guī)范操作流程;
2、協(xié)助研發(fā)基本服務(wù)組件,虛擬化;
3、評估主機、系統(tǒng)運行狀態(tài)及性能,編寫主機硬件架構(gòu)方案;
4、快速準確匯報系統(tǒng)中出現(xiàn)的故障,配合相關(guān)人員做好系統(tǒng)升級,故障解決和測試等工作;
5、作好工作記錄,定期匯總并上報給負責(zé)人。
任職資格:
1、計算機相關(guān)專業(yè),大專及以上學(xué)歷,三年以上服務(wù)器運維經(jīng)驗;
2、熟悉主流Linux/Windows服務(wù)器系統(tǒng)(CentOS/Redhat)日常安裝配置維護能力,熟練常用命令編寫;
3、熟悉Java應(yīng)用,能完成Java應(yīng)用的部署及常見運維工作;
4、熟悉Nginx、Lvs等軟件負載均衡方案,能進行部署和排錯;
5、熟悉Mysql數(shù)據(jù)庫的管理,熟悉Mysql備份和恢復(fù),熟悉Mysql主從同步復(fù)制及性能調(diào)優(yōu)者優(yōu)先 。
數(shù)據(jù)倉庫工程師的主要職責(zé) 篇13
1.執(zhí)行新產(chǎn)品設(shè)計開發(fā)流程,承擔(dān)微波新產(chǎn)品的設(shè)計開發(fā)工作;
2.承擔(dān)新工藝的開發(fā)工作或工藝指導(dǎo)工作;
3.負責(zé)設(shè)計開發(fā)產(chǎn)品的樣品制作、試生產(chǎn)及批量生產(chǎn)的技術(shù)指導(dǎo)工作;
4.負責(zé)本崗位相關(guān)技術(shù)文件、工藝文件和圖樣文件的編制工作;
數(shù)據(jù)倉庫工程師的主要職責(zé) 篇14
1、負責(zé)編制脫硫工程項目機務(wù)專業(yè)施工技術(shù)方案以及施工計劃,組織機務(wù)施工;對本專業(yè)施工進度、質(zhì)量、安全、成本負責(zé);
2、配合施工經(jīng)理做好分包隊伍的管理,審核分包單位上報的本專業(yè)各項資料。
數(shù)據(jù)倉庫工程師的主要職責(zé) 篇15
職責(zé):
1、負責(zé)公司信息化系統(tǒng)的業(yè)務(wù)需求分析和評估及管理工作;
2、負責(zé)相關(guān)系統(tǒng)的需求調(diào)研、分析和管理工作,對需求文檔進行管理;
3、對需求進行分析、管理,估算需求執(zhí)行的成本和工作量,跟蹤及控制變更;
4、配合技術(shù)經(jīng)理估算項目的需求開發(fā)成本和周期,并跟進項目/任務(wù)執(zhí)行進度;
5、負責(zé)需求優(yōu)先級溝通確認等;
6、負責(zé)向開發(fā)和測試團隊講解業(yè)務(wù)需求和業(yè)務(wù)流程;
7、負責(zé)跟進維護型需求的設(shè)計、開發(fā)、測試、上線整個流程,保障需求與實現(xiàn)的一致性。
任職要求:
1、2年以上相關(guān)行業(yè)開發(fā)、測試或需求分析經(jīng)驗;
2、參與過1個以上重要項目需求調(diào)研、需求分析;
3、精通軟件工程、了解系統(tǒng)架構(gòu),具備一定的管理經(jīng)驗;
4、精通需求開發(fā)和需求管理流程, 熟練一種以上需求分析、設(shè)計工具;
5、熟悉UIUE設(shè)計的過程、方法或工具,具有交互體驗設(shè)計技能;
6、具有良好的親和力和團隊合作精神;
7、具有很強的工作責(zé)任心、敬業(yè)精神;
8、具有創(chuàng)新精神和學(xué)習(xí)精神;
9、具有良好的分析能力、溝通表達能力、概括總結(jié)能力和綜合協(xié)調(diào)能力。
數(shù)據(jù)倉庫工程師的主要職責(zé) 篇16
職責(zé):
1. 負責(zé)或參與智能連接產(chǎn)品(智能耳機,音箱等)后端系統(tǒng)的設(shè)計、代碼實現(xiàn);
2. 參與制定前后端業(yè)務(wù)流程、接口協(xié)議、文檔輸出等;
3. 負責(zé)或參與前端程序(APP, Device)的對接、調(diào)試;
4. 持續(xù)迭代開發(fā),改善系統(tǒng)性能,用戶體驗。
崗位要求
1. 五年以上服務(wù)器端開發(fā)經(jīng)驗,一年以上Go語言開發(fā)經(jīng)驗;
2. 熟悉linux,對服務(wù)器性能優(yōu)化有一定了解,有高并發(fā)項目經(jīng)驗優(yōu)先;
3. 熟練掌握nginx、mongodb、Redis等開源組件;
4. 了解服務(wù)器安全配置相關(guān)的知識;
5. 熟悉多線程和網(wǎng)絡(luò)編程,有分布式系統(tǒng)項目經(jīng)驗者優(yōu)先;
6. 有可穿戴產(chǎn)品后臺開發(fā)經(jīng)驗者優(yōu)先。