數(shù)據(jù)倉(cāng)庫(kù)工程師崗位的基本職責(zé)（通用12篇）

數(shù)據(jù)倉(cāng)庫(kù)工程師崗位的基本職責(zé) 篇1

　　職責(zé)：

　　1、負(fù)責(zé)大數(shù)據(jù)開發(fā)工作;

　　2、負(fù)責(zé)公司數(shù)據(jù)服務(wù)接口平臺(tái)的建設(shè);

　　3、參與打造數(shù)據(jù)中臺(tái)內(nèi)容的規(guī)劃、設(shè)計(jì)、開發(fā)工作，實(shí)現(xiàn)高質(zhì)量數(shù)據(jù)的互通與共享; 4、參與數(shù)據(jù)模型體系構(gòu)建及數(shù)據(jù)主題設(shè)計(jì)和開發(fā)，搭建離線、近線、實(shí)時(shí)數(shù)據(jù)公共層;

　　5、參與構(gòu)建非結(jié)構(gòu)化數(shù)據(jù)體系，進(jìn)行網(wǎng)絡(luò)數(shù)據(jù)爬取，數(shù)據(jù)清洗，特征挖掘，統(tǒng)計(jì)分析，并結(jié)合應(yīng)用場(chǎng)景實(shí)現(xiàn)落地。

　　崗位要求：

　　1、本科以上學(xué)歷，計(jì)算機(jī)、數(shù)學(xué)、統(tǒng)計(jì)學(xué)等相關(guān)專業(yè);

　　2、熟悉數(shù)據(jù)集成、數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)分析等全流程數(shù)據(jù)處理，具備開源或阿里大數(shù)據(jù)平臺(tái)實(shí)戰(zhàn)經(jīng)驗(yàn)，如hive/spark/Maxcompute;

　　3、熟悉數(shù)據(jù)治理體系，包括數(shù)據(jù)模型、數(shù)據(jù)標(biāo)準(zhǔn)、數(shù)據(jù)質(zhì)量等;

　　4、熟悉常見的離線、實(shí)時(shí)、流式數(shù)據(jù)應(yīng)用場(chǎng)景及架構(gòu);

　　5、至少掌握一門開發(fā)語言，Java/Python;

　　6、具備良好的溝通能力和設(shè)計(jì)文檔編寫能力;

　　7、懂?dāng)?shù)據(jù)挖掘、知識(shí)圖譜的構(gòu)建者優(yōu)先。

數(shù)據(jù)倉(cāng)庫(kù)工程師崗位的基本職責(zé) 篇2

　　職責(zé)：

　　1.參與打造數(shù)據(jù)中心內(nèi)容的規(guī)劃、設(shè)計(jì)、開發(fā)和優(yōu)化工作，實(shí)現(xiàn)高質(zhì)量數(shù)據(jù)的互通與共享;

　　2.參與數(shù)據(jù)模型體系構(gòu)建及數(shù)據(jù)主題設(shè)計(jì)和開發(fā)，搭建離線、實(shí)時(shí)數(shù)據(jù)倉(cāng)庫(kù);

　　3.參與數(shù)據(jù)產(chǎn)品與應(yīng)用的數(shù)據(jù)研發(fā);

　　4.負(fù)責(zé)日常應(yīng)用系統(tǒng)監(jiān)控，發(fā)現(xiàn)異常問題及時(shí)分發(fā)，并跟進(jìn)后續(xù)處理;

　　5.編寫Python程序，或ETL技術(shù)完成日常數(shù)據(jù)抽取和整理任務(wù)，可獨(dú)立進(jìn)行數(shù)據(jù)分析;

　　崗位要求：

　　1.熟悉ETL開發(fā)、數(shù)據(jù)倉(cāng)庫(kù)設(shè)計(jì)流程，熟悉Oracle, MS SQL Server 等主流數(shù)據(jù)庫(kù)，表結(jié)構(gòu)設(shè)計(jì)，存儲(chǔ)過程編寫;

　　2.熟練掌握常用Linux命令，具備shell編程能力，熟練掌握Python編程語言

　　3.具有較強(qiáng)的語言表達(dá)和溝通能力，良好的團(tuán)隊(duì)合作精神

　　4.邏輯思維能力強(qiáng)，對(duì)數(shù)據(jù)敏感，有較強(qiáng)學(xué)習(xí)能力和創(chuàng)新思維;

　　5.具有高度的責(zé)任感和敬業(yè)精神，能夠承受較大的工作壓力

數(shù)據(jù)倉(cāng)庫(kù)工程師崗位的基本職責(zé) 篇3

　　職責(zé)：

　　1、負(fù)責(zé)金融行業(yè)數(shù)據(jù)倉(cāng)庫(kù)開發(fā)工作

　　2、負(fù)責(zé)與多個(gè)應(yīng)用對(duì)接的接口和框架設(shè)計(jì)

　　3、充分理解產(chǎn)品需求，能夠結(jié)合需求進(jìn)行任務(wù)設(shè)計(jì)，完成詳細(xì)設(shè)計(jì)文檔的編寫。

　　崗位要求：

　　1. 從事數(shù)據(jù)倉(cāng)庫(kù)及商業(yè)智能(BI)領(lǐng)域工作至少3年以上，熟悉數(shù)據(jù)倉(cāng)庫(kù)模型設(shè)計(jì)方法論，并有實(shí)際的模型設(shè)計(jì)經(jīng)驗(yàn)，有大型數(shù)倉(cāng)建設(shè)經(jīng)驗(yàn)優(yōu)先;

　　2. 精通數(shù)據(jù)倉(cāng)庫(kù)領(lǐng)域知識(shí)和管理技能，包括但不局限于：元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量、主數(shù)據(jù)管理、性能調(diào)優(yōu)等;

　　3.有主流商業(yè)/開源ETL工具(Informatica、Datastage、Kettle等)使用經(jīng)驗(yàn)者優(yōu)先;

　　4. 熟悉Hadoop生態(tài)相關(guān)技術(shù)并有相關(guān)實(shí)踐經(jīng)驗(yàn)，包括Hdfs、Map-Reduce、Hive、Hbase、Spark等，具備海量數(shù)據(jù)加工處理(ETL)相關(guān)經(jīng)驗(yàn);

　　5. 熟練使用java語言,對(duì)微服務(wù)架構(gòu)有一定了解;

　　6. 具有較強(qiáng)的團(tuán)隊(duì)意識(shí)與良好的溝通能力及高度的工作責(zé)任感，熱愛技術(shù)，有很強(qiáng)的鉆研能力，樂于接受有挑戰(zhàn)性的任務(wù);

　　7、有團(tuán)隊(duì)管理經(jīng)驗(yàn)優(yōu)先。

數(shù)據(jù)倉(cāng)庫(kù)工程師崗位的基本職責(zé) 篇4

　　職責(zé):

　　1、深入理解業(yè)務(wù)，了解需求和痛點(diǎn)，為風(fēng)控和業(yè)務(wù)部門提供數(shù)據(jù)支持;

　　2、針對(duì)業(yè)務(wù)需求，參與數(shù)據(jù)倉(cāng)庫(kù)需求分析，制定ETL相關(guān)設(shè)計(jì)方案和開發(fā)計(jì)劃;

　　3、負(fù)責(zé)數(shù)據(jù)同步，數(shù)據(jù)整合清洗，以及數(shù)據(jù)質(zhì)量的治理;

　　4、數(shù)據(jù)倉(cāng)庫(kù)模型設(shè)計(jì)，分層體系構(gòu)建，元數(shù)據(jù)管理監(jiān)控以及權(quán)限控制。

　　任職資格:

　　1、重點(diǎn)院校統(tǒng)招本科及以上學(xué)歷，計(jì)算機(jī)基礎(chǔ)扎實(shí);

　　2、具有2年以上金融貸款類業(yè)務(wù)經(jīng)驗(yàn);

　　3、熟悉數(shù)據(jù)倉(cāng)庫(kù)理論和數(shù)據(jù)庫(kù)建模，有redshift和AWS經(jīng)驗(yàn)優(yōu)先;

　　4、精通pgsql/mysql等數(shù)據(jù)庫(kù)，精通sql語言，具有數(shù)據(jù)庫(kù)優(yōu)化/sql優(yōu)化相關(guān)經(jīng)驗(yàn);

　　5、熟練掌握python/shell語言。

數(shù)據(jù)倉(cāng)庫(kù)工程師崗位的基本職責(zé) 篇5

　　職責(zé):

　　負(fù)責(zé)大數(shù)據(jù)數(shù)據(jù)倉(cāng)庫(kù)的建設(shè)，根據(jù)數(shù)據(jù)倉(cāng)庫(kù)及BI項(xiàng)目的需求，制定相關(guān)的設(shè)計(jì)方案和開發(fā)計(jì)劃;

　　參與數(shù)據(jù)的分析處理和數(shù)據(jù)統(tǒng)計(jì)內(nèi)容的架構(gòu)設(shè)計(jì)與研發(fā);

　　組織項(xiàng)目組成員完成數(shù)據(jù)倉(cāng)庫(kù)的開發(fā)和運(yùn)維等;

　　負(fù)責(zé)公司數(shù)據(jù)規(guī)范、數(shù)據(jù)標(biāo)準(zhǔn)、數(shù)據(jù)指標(biāo)梳理與定義;

　　協(xié)助技術(shù)人員完成數(shù)據(jù)管控平臺(tái)的搭建，完成數(shù)據(jù)規(guī)范管理體系到信息平臺(tái)的落地實(shí)施;

　　組織開展對(duì)數(shù)據(jù)平臺(tái)各模塊的內(nèi)容進(jìn)行培訓(xùn);

　　制定和審計(jì)業(yè)務(wù)系統(tǒng)數(shù)據(jù)數(shù)據(jù)庫(kù)模型設(shè)計(jì)規(guī)范;

　　任職資格:

　　有一定的互聯(lián)網(wǎng)數(shù)據(jù)倉(cāng)庫(kù)經(jīng)驗(yàn);

　　深入了解 Hadoop 生態(tài)系統(tǒng)，熟悉HBase、Hive、Storm、spark等大數(shù)據(jù)開發(fā)工具中一種或幾種;

　　具備大型數(shù)據(jù)倉(cāng)庫(kù)架構(gòu)設(shè)計(jì)、模型設(shè)計(jì)、ETL 設(shè)計(jì)的相關(guān)經(jīng)驗(yàn);

　　關(guān)系型數(shù)據(jù)庫(kù)原理基礎(chǔ)扎實(shí)，熟悉 MySQL/PostgreSQL等的使用和調(diào)優(yōu);

　　有獨(dú)立設(shè)計(jì)數(shù)據(jù)倉(cāng)庫(kù)經(jīng)驗(yàn)、熟悉數(shù)據(jù)倉(cāng)庫(kù)相關(guān)理論知識(shí)者優(yōu)先;

數(shù)據(jù)倉(cāng)庫(kù)工程師崗位的基本職責(zé) 篇6

　　- 設(shè)計(jì)，開發(fā)分布式存儲(chǔ)系統(tǒng)中本地存儲(chǔ)模塊，撰寫設(shè)計(jì)文檔，并對(duì)其他同事的代碼進(jìn)行審查;

　　- 深度挖掘 CPU 與閃存設(shè)備的性能，將本地存儲(chǔ)模塊的響應(yīng)速度和并發(fā)能力的提升到極致;

　　- 通過優(yōu)化數(shù)據(jù)結(jié)構(gòu)和算法，提升本地存儲(chǔ)模塊的緩存，壓縮，去重等功能的效率;

　　- 通過設(shè)計(jì)復(fù)雜的測(cè)試用例，完成本地存儲(chǔ)在故障場(chǎng)景下的可靠性驗(yàn)證;

　　- 與測(cè)試和產(chǎn)品部門密切配合，不斷提升產(chǎn)品質(zhì)量以及產(chǎn)品文檔化程度。

數(shù)據(jù)倉(cāng)庫(kù)工程師崗位的基本職責(zé) 篇7

　　1、主要負(fù)責(zé)平臺(tái)的WEB全棧(前端)開發(fā)工作;

　　2、運(yùn)用前端技術(shù)，實(shí)現(xiàn)體驗(yàn)的良好傳達(dá);

　　3、根據(jù)設(shè)計(jì)需求，分析給出前臺(tái)技術(shù)解決方案;

　　4、負(fù)責(zé)JavaScript腳本開發(fā);

　　5、負(fù)責(zé)具有前瞻性的WEB開發(fā)技術(shù)的研究和應(yīng)用;

數(shù)據(jù)倉(cāng)庫(kù)工程師崗位的基本職責(zé) 篇8

　　1負(fù)責(zé)工廠相關(guān)食品的品質(zhì)控制和技術(shù)管理;

　　2負(fù)責(zé)食品加工工藝的建設(shè)，并對(duì)整個(gè)生產(chǎn)過程中出現(xiàn)的質(zhì)量問題提出建設(shè)性意見;

　　3負(fù)責(zé)質(zhì)檢部相關(guān)管理工作;

　　4對(duì)提高和穩(wěn)定質(zhì)量提出建設(shè)性意見;

　　5其他相關(guān)事務(wù)。

數(shù)據(jù)倉(cāng)庫(kù)工程師崗位的基本職責(zé) 篇9

　　職責(zé)：

　　(1)分析需求，完成相關(guān)數(shù)據(jù)抽取、數(shù)據(jù)清洗、數(shù)據(jù)探索、數(shù)據(jù)建模分析等工作;

　　(2)按要求完成數(shù)據(jù)分析報(bào)告、建模報(bào)告、數(shù)據(jù)報(bào)表等;

　　(3)對(duì)數(shù)據(jù)進(jìn)行深度挖掘和建模，做運(yùn)營(yíng)和用戶等各方面分析，深度挖掘運(yùn)營(yíng)優(yōu)化和用戶行為特征等，推動(dòng)分析問題的解決，為業(yè)務(wù)決策提供日常支持;

　　(4)與業(yè)務(wù)部門和技術(shù)部門對(duì)接，完成設(shè)計(jì)，編寫，維護(hù)和完善公司業(yè)務(wù)相關(guān)的算法。

　　(5)參與項(xiàng)目成果匯編，對(duì)相關(guān)結(jié)果進(jìn)行解讀和匯報(bào)。

　　任職要求：

　　(1)大專以上學(xué)歷，統(tǒng)計(jì)、數(shù)學(xué)、計(jì)算機(jī)、軟件專業(yè)優(yōu)先;

　　(2)熟練使用Python，Mysql語言，具有一定的工程能力，完善的文檔和注釋習(xí)慣。熟悉JupyterLab遠(yuǎn)程代碼編寫環(huán)境，Linux常用命令。會(huì)使用R，Java，Scala等語言更佳。

　　(3)熟悉數(shù)據(jù)分析過程，能夠完成數(shù)據(jù)抽取、數(shù)據(jù)處理、數(shù)據(jù)建模、數(shù)據(jù)分析報(bào)告等任務(wù);

　　(4)一定的數(shù)據(jù)挖掘/機(jī)器學(xué)習(xí)理論和技術(shù)基礎(chǔ)，了解常用的數(shù)據(jù)挖掘算法如：聚類模型、線性回歸、邏輯回歸、分類模型、決策樹模型等。

數(shù)據(jù)倉(cāng)庫(kù)工程師崗位的基本職責(zé) 篇10

　　職責(zé)：

　　1、HPE、H3C、華為等服務(wù)器硬件安裝和維護(hù);

　　2、熟悉HPE、EMC、華為等各品牌存儲(chǔ)，能獨(dú)立進(jìn)行LUN映射及存儲(chǔ)故障解決;

　　3、熟悉服務(wù)器常用的RAID、SCSI技術(shù);

　　4、對(duì)WINDOWS、LINUX等操作系統(tǒng)安裝、排錯(cuò);

　　5、協(xié)助業(yè)務(wù)部門做產(chǎn)品升級(jí)及方案制訂;

　　任職資格：

　　1、大專及以上學(xué)歷，計(jì)算機(jī)專業(yè);

　　2、服務(wù)器相關(guān)行業(yè)具有三年及以上工作經(jīng)驗(yàn)，具有獨(dú)立服務(wù)器硬件故障判斷能力，對(duì)故障進(jìn)行獨(dú)立解決，具有豐富的硬件安裝和維護(hù)經(jīng)驗(yàn);

　　3、熟悉VMWARE、華為、H3C等虛擬化技術(shù)及虛擬化軟件操作;

　　4、具有一定的網(wǎng)絡(luò)規(guī)劃及實(shí)施能力，具備網(wǎng)絡(luò)基本知識(shí)，可排查常見的網(wǎng)絡(luò)故障;

　　5、具備數(shù)據(jù)庫(kù)維護(hù)經(jīng)驗(yàn)更佳;

數(shù)據(jù)倉(cāng)庫(kù)工程師崗位的基本職責(zé) 篇11

　　1、調(diào)整和優(yōu)化中試生產(chǎn)工藝，確保生產(chǎn)工藝的穩(wěn)定。

　　2、負(fù)責(zé)中試工藝規(guī)程、批記錄、部門管理性文件起草、修訂及培訓(xùn)。

　　3、負(fù)責(zé)中試工藝驗(yàn)證文件起草、修訂、培訓(xùn)、執(zhí)行。

　　4、負(fù)責(zé)中試工藝相關(guān)CR、偏差、CAPA等起草、跟蹤。

　　5、批指令單、限額領(lǐng)料/退庫(kù)單的準(zhǔn)備，批記錄的領(lǐng)用、審核和上交。

　　6、檢查車間SOP文件，若發(fā)現(xiàn)存在問題，及時(shí)發(fā)送至相應(yīng)人員對(duì)文件進(jìn)行更新。

　　7、負(fù)責(zé)車間GMP檢查，確保現(xiàn)場(chǎng)合規(guī)操作，符合GMP要求。

　　8、遵守公司規(guī)章制度，嚴(yán)格按SOP操作。

　　9、領(lǐng)導(dǎo)安排的其它工作。

數(shù)據(jù)倉(cāng)庫(kù)工程師崗位的基本職責(zé) 篇12

　　職責(zé)：

　　1. 負(fù)責(zé)數(shù)據(jù)ETL開發(fā)，根據(jù)數(shù)倉(cāng)層級(jí)結(jié)構(gòu)及主題域劃分，規(guī)范清洗代碼，提供準(zhǔn)確數(shù)據(jù)

　　2. 負(fù)責(zé)數(shù)據(jù)質(zhì)量治理，發(fā)現(xiàn)異常業(yè)務(wù)邏輯或數(shù)據(jù)質(zhì)量問題，推動(dòng)業(yè)務(wù)優(yōu)化及改善。

　　3. 負(fù)責(zé)數(shù)據(jù)開發(fā)需求評(píng)審、結(jié)合數(shù)據(jù)分析體系制定ETL清洗方案;

　　任職要求：

　　1. 一年以上數(shù)據(jù)倉(cāng)庫(kù)ETL設(shè)計(jì)及開發(fā)經(jīng)驗(yàn)，有BI經(jīng)驗(yàn)者優(yōu)先

　　2. 熟練使用 SQL，熟悉HQL常用內(nèi)部函數(shù)，有一定的 HQL性能調(diào)優(yōu)經(jīng)驗(yàn)優(yōu)先

　　3. 具備數(shù)據(jù)倉(cāng)庫(kù)架構(gòu)設(shè)計(jì)、模型設(shè)計(jì)、ETL設(shè)計(jì)，調(diào)度的相關(guān)經(jīng)驗(yàn)優(yōu)先;

　　4. 對(duì)數(shù)據(jù)敏感，有較強(qiáng)數(shù)據(jù)分析和解決問題能力;

　　5. 積極溝通，主動(dòng)了解業(yè)務(wù)需求，愿意嘗試新的技術(shù)領(lǐng)域。