數(shù)據(jù)處理工程師崗位職責(zé)(通用31篇)
數(shù)據(jù)處理工程師崗位職責(zé) 篇1
職責(zé)描述:
1、負(fù)責(zé)文本數(shù)據(jù)處理,如格式轉(zhuǎn)換、分詞處理、實(shí)體抽取、專業(yè)詞典整理等;
2、自然語言處理相關(guān)工具開發(fā);
3、協(xié)助訓(xùn)練nlp模型。
任職要求:
1、計(jì)算機(jī)相關(guān)專業(yè)(本科2年以上);
2、精通c/c++或java,熟悉python、bash?shell等腳本語言;
3、熟悉正則表達(dá)式,了解常用分類、聚類算法及相應(yīng)工具;
4、熟悉使用基本分類、聚類算法及相應(yīng)工具;
5、具備nlp相關(guān)工作(特別是數(shù)據(jù)處理與分析)經(jīng)驗(yàn),了解nlp基本知識(shí);
6、其他:耐心、細(xì)致;較強(qiáng)的邏輯思維能力;性格踏實(shí)穩(wěn)定,抗壓能力強(qiáng)。
數(shù)據(jù)處理工程師崗位職責(zé) 篇2
職責(zé)描述:
1、負(fù)責(zé)poi數(shù)據(jù)的屬性分析、處理和關(guān)系挖掘,構(gòu)建地圖領(lǐng)域的知識(shí)圖譜。
2、負(fù)責(zé)nlp、數(shù)據(jù)挖掘、深度學(xué)習(xí)等方向的前沿算法研發(fā),并結(jié)合地圖場(chǎng)景優(yōu)化。
任職要求:
1、計(jì)算機(jī)、數(shù)學(xué)或相關(guān)專業(yè),三年以上工作經(jīng)驗(yàn)。
2、熟悉數(shù)據(jù)結(jié)構(gòu)和算法設(shè)計(jì),熟練使用c++、python。
3、熟悉nlp、機(jī)器學(xué)習(xí)、數(shù)據(jù)挖掘領(lǐng)域的常用算法與工具,對(duì)前沿技術(shù)保持熱情。
4、良好的.分析和解決問題能力,能獨(dú)立承擔(dān)研發(fā)工作。
5、有地圖數(shù)據(jù)優(yōu)化工作背景優(yōu)先。
團(tuán)隊(duì)介紹
主要支持北京崗位
對(duì)地圖(無人駕駛)、廣告(廣點(diǎn)通)、快報(bào)感興趣的歡迎勾搭
數(shù)據(jù)處理工程師崗位職責(zé) 篇3
數(shù)據(jù)處理工程師(大數(shù)據(jù)項(xiàng)目)全成通信上海全成通信技術(shù)有限公司,全成通信,全成崗位職責(zé):
1、負(fù)責(zé)大數(shù)據(jù)平臺(tái)的日常維護(hù)和監(jiān)控
2、負(fù)責(zé)大數(shù)據(jù)項(xiàng)目日?qǐng)?bào)發(fā)布工作
3、負(fù)責(zé)日?qǐng)?bào)數(shù)據(jù)的統(tǒng)計(jì)
4、負(fù)責(zé)大數(shù)據(jù)項(xiàng)目日常數(shù)據(jù)的計(jì)算、分析和維護(hù)
任職要求:
1、一年以上相關(guān)工作經(jīng)驗(yàn),有電信行業(yè)經(jīng)驗(yàn)者優(yōu)先
2、熟悉linux和excel,熟練使用perl或者其他的'腳本語言
3、具有oracledll/dml技術(shù)的使用經(jīng)驗(yàn)
4、具有良好的團(tuán)隊(duì)合作精神,有較強(qiáng)的學(xué)習(xí)能力、適應(yīng)能力、溝通能力
數(shù)據(jù)處理工程師崗位職責(zé) 篇4
數(shù)據(jù)處理工程師崗位職責(zé)
數(shù)據(jù)處理工程師1)直接面對(duì)客戶,參與項(xiàng)目運(yùn)作中數(shù)據(jù)處理,了解客戶軟硬件要求;
2)參與、協(xié)助數(shù)據(jù)收集和模型建構(gòu);
3)安裝、調(diào)試公司軟件在客戶端上線;
4)開發(fā)常用數(shù)據(jù)處理功能,幫助業(yè)務(wù)團(tuán)隊(duì)提高工作效率;
5)與香港、新加坡和紐約團(tuán)隊(duì)合作,為亞太地區(qū)技術(shù)服務(wù)提供支持!び(jì)算機(jī)或軟件相關(guān)專業(yè),本科及以上學(xué)歷;
·掌握兩門以及常見數(shù)據(jù)庫(kù)設(shè)計(jì)開發(fā)技術(shù),mysql、oracle、sqlserver、hive等;
·具有參加過etl開發(fā)項(xiàng)目,處理過(大)數(shù)據(jù)經(jīng)驗(yàn)優(yōu)先;
·工作細(xì)心、認(rèn)真負(fù)責(zé)且善于溝通,能快速理解業(yè)務(wù),對(duì)數(shù)據(jù)敏感,并能主導(dǎo)項(xiàng)目的進(jìn)度,保證團(tuán)隊(duì)產(chǎn)出。1)直接面對(duì)客戶,參與項(xiàng)目運(yùn)作中數(shù)據(jù)處理,了解客戶軟硬件要求;
2)參與、協(xié)助數(shù)據(jù)收集和模型建構(gòu);
3)安裝、調(diào)試公司軟件在客戶端上線;
4)開發(fā)常用數(shù)據(jù)處理功能,幫助業(yè)務(wù)團(tuán)隊(duì)提高工作效率;
5)與香港、新加坡和紐約團(tuán)隊(duì)合作,為亞太地區(qū)技術(shù)服務(wù)提供支持。
數(shù)據(jù)處理工程師崗位職責(zé) 篇5
1、3年以上etl開發(fā)經(jīng)驗(yàn),熟悉etl開發(fā)規(guī)范和流程;
2、熟練使用datastage、informatica、kettle、hive、plsql、spark、mapreduce等工具中的一個(gè)或多個(gè),有開發(fā)、維護(hù)經(jīng)驗(yàn);
3、熟練編寫存儲(chǔ)過程,擅長(zhǎng)sql優(yōu)化;
4、熟悉oracle、sqlserver等常用數(shù)據(jù)庫(kù)中的`一個(gè)或多個(gè);
5、熟悉perl、shell腳本,linux操作系統(tǒng);
6、有大型數(shù)據(jù)倉(cāng)庫(kù)、bi相關(guān)項(xiàng)目的開發(fā)經(jīng)驗(yàn),精通架構(gòu)、建模者優(yōu)先;
7、熟練使用erwin或powerdesigner等進(jìn)行數(shù)據(jù)建模;
8、以下經(jīng)驗(yàn)優(yōu)先考慮:流式處理、日志處理、數(shù)據(jù)倉(cāng)庫(kù)全日制本科以上學(xué)歷(985/211),計(jì)算機(jī)科學(xué)與技術(shù)/軟件工程/數(shù)據(jù)相關(guān)專業(yè)
1、3年以上etl開發(fā)經(jīng)驗(yàn),熟悉etl開發(fā)規(guī)范和流程;
2、熟練使用datastage、informatica、kettle、hive、plsql、spark、mapreduce等工具中的一個(gè)或多個(gè),有開發(fā)、維護(hù)經(jīng)驗(yàn);
3、熟練編寫存儲(chǔ)過程,擅長(zhǎng)sql優(yōu)化;
4、熟悉oracle、sqlserver等常用數(shù)據(jù)庫(kù)中的一個(gè)或多個(gè);
5、熟悉perl、shell腳本,linux操作系統(tǒng);
6、有大型數(shù)據(jù)倉(cāng)庫(kù)、bi相關(guān)項(xiàng)目的開發(fā)經(jīng)驗(yàn),精通架構(gòu)、建模者優(yōu)先;
7、熟練使用erwin或powerdesigner等進(jìn)行數(shù)據(jù)建模;
8、以下經(jīng)驗(yàn)優(yōu)先考慮:流式處理、日志處理、數(shù)據(jù)倉(cāng)庫(kù)
數(shù)據(jù)處理工程師崗位職責(zé) 篇6
崗位職責(zé):
深入研究業(yè)內(nèi)領(lǐng)先的技術(shù)思路,輸出具有創(chuàng)新價(jià)值的預(yù)研項(xiàng)目可行性分析報(bào)告以及相關(guān)實(shí)驗(yàn)數(shù)據(jù);
負(fù)責(zé)產(chǎn)品、銷售、供應(yīng)鏈、電商等公司數(shù)據(jù)的海量挖掘,并建立和優(yōu)化用戶標(biāo)簽、特征模型、產(chǎn)品精準(zhǔn)匹配、異常預(yù)警等;
負(fù)責(zé)大數(shù)據(jù)下傳統(tǒng)機(jī)器學(xué)習(xí)算法的并行化實(shí)現(xiàn)及應(yīng)用,并提出改進(jìn)方法和思路;
參與公司大數(shù)據(jù)架構(gòu),負(fù)責(zé)BI實(shí)施中的數(shù)據(jù)挖掘模塊算法研究、模型建立和優(yōu)化,幫助實(shí)現(xiàn)數(shù)據(jù)挖掘和分析平臺(tái)的建設(shè);
負(fù)責(zé)相關(guān)數(shù)據(jù)挖掘項(xiàng)目的需求收集、項(xiàng)目建立、項(xiàng)目設(shè)計(jì)開發(fā)和結(jié)果輸出質(zhì)量把控,通過數(shù)據(jù)挖掘結(jié)果驅(qū)動(dòng)業(yè)務(wù)執(zhí)行;
配合技術(shù)進(jìn)行數(shù)據(jù)挖掘模型開發(fā)和模型封裝,例如決策規(guī)則模型、預(yù)警模型、流失模型、效果標(biāo)桿模型、客戶生命周期管理模型等;
任職要求:
大學(xué)本科及以上學(xué)歷,統(tǒng)計(jì)學(xué)、計(jì)算機(jī)、信息技術(shù)、數(shù)學(xué)相關(guān)專業(yè);
兩年以上數(shù)據(jù)建模經(jīng)驗(yàn);
數(shù)據(jù)主流數(shù)據(jù)庫(kù),mysql、oracle、DB2等傳統(tǒng)結(jié)構(gòu)化數(shù)據(jù)倉(cāng)庫(kù),熟悉HBase、MongoDB等非結(jié)構(gòu)化數(shù)據(jù)庫(kù);
熟悉常用的聚類、分類、回歸、關(guān)聯(lián)、時(shí)間序列等監(jiān)督式和非監(jiān)督式學(xué)習(xí)算法;
熟悉R、Python、MLlib等數(shù)據(jù)挖掘工具中至少一種。
熟悉spark、storm等大數(shù)據(jù)計(jì)算框架者優(yōu)先。
數(shù)據(jù)處理工程師崗位職責(zé) 篇7
1、基于大數(shù)據(jù)平臺(tái)的海量數(shù)據(jù),負(fù)責(zé)業(yè)務(wù)相關(guān)的數(shù)據(jù)挖掘研發(fā),及定向相關(guān)技術(shù)研發(fā);
2、負(fù)責(zé)大數(shù)據(jù)可視化研究及平臺(tái)構(gòu)建及優(yōu)化工作;
3、負(fù)責(zé)數(shù)據(jù)挖掘分析體系的建設(shè),并建立和規(guī)范數(shù)據(jù)挖掘模型標(biāo)準(zhǔn);
4、協(xié)助項(xiàng)目團(tuán)隊(duì)做好數(shù)據(jù)和應(yīng)用的對(duì)接,完成項(xiàng)目的執(zhí)行及交付;
5、配合架構(gòu)師進(jìn)行技術(shù)攻關(guān)和核心挖掘算法改善。
數(shù)據(jù)處理工程師崗位職責(zé) 篇8
1、負(fù)責(zé)數(shù)據(jù)接入、數(shù)據(jù)提取、數(shù)據(jù)清洗、底層重構(gòu)、業(yè)務(wù)主題建模等工作;
2、參與數(shù)據(jù)集市開發(fā),用戶畫像標(biāo)簽開發(fā);
3、負(fù)責(zé)接口平臺(tái)、自助分析平臺(tái)等系統(tǒng)的建設(shè)和維護(hù);
4、針對(duì)具體大數(shù)據(jù)應(yīng)用場(chǎng)景,提供有效解決方案,并針對(duì)具體模型落地實(shí)施;
數(shù)據(jù)處理工程師崗位職責(zé) 篇9
崗位職責(zé):
1.從事數(shù)學(xué)建模及數(shù)據(jù)挖掘應(yīng)用方法研究;
2.與開發(fā)部門配合實(shí)現(xiàn)相應(yīng)的數(shù)據(jù)分析模塊的開發(fā);
3.制定公司數(shù)據(jù)可管理體系,建產(chǎn)研究用數(shù)據(jù)平臺(tái)。
任職要求:
1.應(yīng)用數(shù)學(xué)、統(tǒng)計(jì)學(xué)、計(jì)算機(jī)等專業(yè)碩士以上學(xué)歷;
2.具備常用機(jī)器學(xué)習(xí)、數(shù)據(jù)挖掘相關(guān)知識(shí),會(huì)spark;
3.具備一種或多種開發(fā)語言(如scalapython java等)的.程序和算法開發(fā)能力,掌握常用數(shù)據(jù)結(jié)構(gòu)和算法;
4.有視頻、地圖、文本、社交等大數(shù)據(jù)分析能力;
5.有工業(yè)數(shù)據(jù)分析工作經(jīng)驗(yàn)者優(yōu)先。
數(shù)據(jù)處理工程師崗位職責(zé) 篇10
1.負(fù)責(zé)工業(yè)設(shè)備組網(wǎng)及數(shù)據(jù)采集方案設(shè)計(jì);
2.負(fù)責(zé)設(shè)計(jì)方案所需傳感器、儀表選型,布線圖、數(shù)據(jù)存儲(chǔ)方式、數(shù)據(jù)表等詳細(xì)設(shè)計(jì);
3.負(fù)責(zé)與設(shè)備廠商、數(shù)控系統(tǒng)廠商進(jìn)行業(yè)務(wù)協(xié)議、通信協(xié)議及接口協(xié)調(diào);
4.負(fù)責(zé)現(xiàn)場(chǎng)數(shù)據(jù)采集相關(guān)軟硬件安裝調(diào)試;
5.負(fù)責(zé)和用戶現(xiàn)場(chǎng)對(duì)口協(xié)調(diào)、技術(shù)指導(dǎo)及現(xiàn)場(chǎng)培訓(xùn)。
數(shù)據(jù)處理工程師崗位職責(zé) 篇11
1、負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)(HADOOP)ETL工作以及數(shù)據(jù)運(yùn)營(yíng);
2、負(fù)責(zé)數(shù)據(jù)產(chǎn)品的業(yè)務(wù)需求梳理、數(shù)據(jù)開發(fā)以及維護(hù);
3、負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)的'維度建模以及設(shè)計(jì)相關(guān)的腳本調(diào)度;
4、負(fù)責(zé)維度模型的數(shù)據(jù)處理的腳本開發(fā),程序開發(fā)以及接口對(duì)接。
數(shù)據(jù)處理工程師崗位職責(zé) 篇12
1、針對(duì)具體的業(yè)務(wù)場(chǎng)景需求、定義數(shù)據(jù)分析及挖掘問題;
2、使用統(tǒng)計(jì)學(xué)分析方法、挖掘算法、構(gòu)建有效且通用的數(shù)據(jù)分析模型,對(duì)數(shù)據(jù)挖掘方案進(jìn)行驗(yàn)證、開發(fā)、改進(jìn)和優(yōu)化,實(shí)現(xiàn)數(shù)據(jù)挖掘的功能應(yīng)用;
3、搭建高擴(kuò)展高性能的數(shù)據(jù)分析模型庫(kù),作為數(shù)據(jù)分析團(tuán)隊(duì)的基礎(chǔ)工具;
4、完成領(lǐng)導(dǎo)安排的其他工作。
數(shù)據(jù)處理工程師崗位職責(zé) 篇13
•在行業(yè)擔(dān)任數(shù)據(jù)工程師或后端工程師超過4年
•您將了解數(shù)據(jù)倉(cāng)庫(kù)的概念(建模,調(diào)整,維護(hù))
•您非常精通SQL,并渴望指導(dǎo)和教其他SQL
•您精通Python或任何其他腳本語言和軟件開發(fā)
•您在分布式數(shù)據(jù)處理/傳統(tǒng)RDBMS / MPP / NoSQL系統(tǒng)和數(shù)據(jù)建模方面有很強(qiáng)的低估/經(jīng)驗(yàn)
•您在Spark / Kafka / HBase / Redis / Kettle方面擁有豐富的經(jīng)驗(yàn)
•您受到探索數(shù)據(jù)的好奇心和動(dòng)力的驅(qū)動(dòng)
•您具有處理數(shù)據(jù)管道的DevOps問題的經(jīng)驗(yàn)
•對(duì)數(shù)據(jù)驅(qū)動(dòng)業(yè)務(wù),關(guān)鍵思想家,問題解決者和自我啟動(dòng)者的熱情
•獲得認(rèn)可大學(xué)的相關(guān)學(xué)科的學(xué)士學(xué)位
數(shù)據(jù)處理工程師崗位職責(zé) 篇14
1、參與部門項(xiàng)目的售前工作,參與現(xiàn)場(chǎng)交流,深入挖掘用戶需求,編寫投標(biāo)方案,參與投標(biāo);
2、完成所負(fù)責(zé)項(xiàng)目的需求規(guī)格說明書的編寫,并向項(xiàng)目組開發(fā)人員和測(cè)試人員講解需求,如需求發(fā)生變化及時(shí)調(diào)整需求。
3、完成所負(fù)責(zé)項(xiàng)目的概要設(shè)計(jì),并解決項(xiàng)目進(jìn)展過程中的需求與設(shè)計(jì)問題;
4、可承擔(dān)部分項(xiàng)目經(jīng)理的職責(zé),組織相關(guān)資源對(duì)項(xiàng)目工作進(jìn)行計(jì)劃/控制/調(diào)整;
數(shù)據(jù)處理工程師崗位職責(zé) 篇15
1.數(shù)據(jù)庫(kù)軟件安裝、系統(tǒng)搭建、測(cè)試環(huán)境同步數(shù)據(jù)等;
2.數(shù)據(jù)庫(kù)日常檢查及維護(hù),并形成文檔登記歸檔;
3.數(shù)據(jù)庫(kù)故障排除與應(yīng)急處理;
4.數(shù)據(jù)庫(kù)性能分析及優(yōu)化;
5.為各應(yīng)用部門提供技術(shù)支持。
數(shù)據(jù)處理工程師崗位職責(zé) 篇16
•識(shí)別,分析和解決計(jì)劃支持問題。
•與BU利益相關(guān)者合作,確定并優(yōu)先考慮數(shù)據(jù)和統(tǒng)計(jì)要求,包括要收集的特定數(shù)據(jù)元素。
•協(xié)助開發(fā)和實(shí)施數(shù)據(jù)庫(kù),數(shù)據(jù)收集系統(tǒng)/工具,數(shù)據(jù)分析以及其他優(yōu)化統(tǒng)計(jì)效率和質(zhì)量的策略(包括確定流程改進(jìn)以更好地滿足業(yè)務(wù)需求)。
•分析大量數(shù)據(jù)集,提出有見地的業(yè)務(wù)建議。
•通過查看報(bào)告和績(jī)效指標(biāo)來確定和糾正數(shù)據(jù)收集問題,從而確保數(shù)據(jù)的準(zhǔn)確性和完整性。
•識(shí)別,分析,解釋和建模數(shù)據(jù)湖中數(shù)據(jù)的趨勢(shì)或模式。
•為各種受眾設(shè)計(jì)和生成準(zhǔn)確有效的統(tǒng)計(jì)數(shù)據(jù)可視化產(chǎn)品和報(bào)告。
•通過促進(jìn)技術(shù)和非技術(shù)利益相關(guān)者之間的溝通,確保技術(shù)團(tuán)隊(duì)了解計(jì)劃和業(yè)務(wù)工作的短期和長(zhǎng)期目標(biāo)
•準(zhǔn)時(shí)交付優(yōu)質(zhì),易懂,明確的產(chǎn)品。
•參與構(gòu)建機(jī)器學(xué)習(xí)策略平臺(tái)。
•對(duì)數(shù)據(jù)驅(qū)動(dòng)業(yè)務(wù),關(guān)鍵思想家,問題解決者和自我啟動(dòng)者的熱情
•促進(jìn)技術(shù)和非技術(shù)利益相關(guān)者之間交流的能力
•出色的書面和口頭交流能力。
數(shù)據(jù)處理工程師崗位職責(zé) 篇17
崗位職責(zé):
業(yè)務(wù)數(shù)據(jù)的收集整理和分析;
負(fù)責(zé)公安、交通領(lǐng)域的業(yè)務(wù)建模和算法設(shè)計(jì);
分析項(xiàng)目數(shù)據(jù)需求,完成系統(tǒng)中數(shù)據(jù)分析模塊的設(shè)計(jì)、實(shí)現(xiàn)和測(cè)試;
設(shè)計(jì)、構(gòu)建和優(yōu)化基于大數(shù)據(jù)的存儲(chǔ)平臺(tái)架構(gòu),編寫相關(guān)技術(shù)文檔;
設(shè)計(jì)并實(shí)現(xiàn)基于開源項(xiàng)目(Cobar,Spark等)的海量數(shù)據(jù)集成與處理平臺(tái);
為其他部門提供數(shù)據(jù)分析支撐。
任職資格:
計(jì)算機(jī)相關(guān)專業(yè);
熟悉數(shù)據(jù)挖掘算法,對(duì)分類、聚類、時(shí)序、圖等算法有很深了解;
熟練掌握Hadoop、Spark生態(tài)系統(tǒng)組件(MR、HBase、Hive、ZooKeeper、Spark SQL、Spark Mlib等),有相關(guān)大數(shù)據(jù)架構(gòu),開發(fā)成功案例;
熟練的使用、開發(fā)ETL工具經(jīng)驗(yàn),有數(shù)據(jù)庫(kù)建模ER建模經(jīng)驗(yàn)優(yōu)先;
有海量數(shù)據(jù)BI或數(shù)據(jù)挖掘項(xiàng)目實(shí)施和管理經(jīng)驗(yàn),對(duì)數(shù)據(jù)挖掘理論方法有一定了解者優(yōu)先;
熟悉的Bash Shell和Python等腳本編程能力;
強(qiáng)烈的責(zé)任心和工作熱情,良好的團(tuán)隊(duì)合作精神。
數(shù)據(jù)處理工程師崗位職責(zé) 篇18
崗位職責(zé):
1.參與金融大數(shù)據(jù)平臺(tái)系統(tǒng)和算法的研發(fā)和優(yōu)化;
2.基于大數(shù)據(jù)金融場(chǎng)景,進(jìn)行信用風(fēng)險(xiǎn)模型,風(fēng)控模型,營(yíng)銷模型的創(chuàng)新設(shè)計(jì);
3.與業(yè)務(wù)部門溝通合作,將數(shù)據(jù)模型應(yīng)用于實(shí)際業(yè)務(wù)。
任職要求:
1.計(jì)算機(jī)相關(guān)專業(yè)碩士及以上學(xué)歷,至少7年以上相關(guān)工作經(jīng)驗(yàn);;
2.具有良好的商業(yè)敏感度和優(yōu)秀的數(shù)據(jù)分析技能,能夠開發(fā)創(chuàng)新而實(shí)際的.分析方法以解決復(fù)雜的商業(yè)問題。
3.熟悉機(jī)器學(xué)習(xí)的一般模型;例如分類.聚類.預(yù)測(cè),理解一些常用的特征選擇和矩陣分解算法。
4.熟悉深度神經(jīng)網(wǎng)絡(luò)和常用模型(如CNN,DBN,sparseconding,RNN等),有Caffe或Theano或ConvNet的實(shí)踐經(jīng)驗(yàn)。
5.在語義理解檢索(如知識(shí)圖譜表示.結(jié)構(gòu)化預(yù)測(cè).語義解析.信息檢索.知識(shí)挖掘等)有過深入的工作與研究。
6.較強(qiáng)的自學(xué)能力.優(yōu)秀的邏輯思維能力和良好的溝通表達(dá)能力和敬業(yè)精神。
7.具備良好的系統(tǒng)分析能力,良好的抽象思維和邏輯思維能力,獨(dú)立分析問題解決問題的能力;
8.可承受較大壓力,有責(zé)任感,較強(qiáng)的溝通協(xié)調(diào)能力,具有團(tuán)隊(duì)合作精神;
9.有互聯(lián)網(wǎng)公司.大型金融企業(yè)和大型IT企業(yè)工作經(jīng)歷的優(yōu)先。
數(shù)據(jù)處理工程師崗位職責(zé) 篇19
1、進(jìn)行GIS數(shù)據(jù)建庫(kù)和數(shù)據(jù)處理方案的設(shè)計(jì)和實(shí)現(xiàn);
2、運(yùn)用相關(guān)GIS軟件進(jìn)行數(shù)據(jù)空間化處理建庫(kù);
3、進(jìn)行影像識(shí)別及處理;
4、進(jìn)行數(shù)據(jù)采集處理建庫(kù)項(xiàng)目管理。
數(shù)據(jù)處理工程師崗位職責(zé) 篇20
1.負(fù)責(zé)海量數(shù)據(jù)的分析開發(fā)工作;
2.完成數(shù)據(jù)挖掘模型,跟蹤模型的實(shí)施和效果,定期優(yōu)化算法和分析策略,分析研究后提供建設(shè)性建議;
3.優(yōu)化大數(shù)據(jù)存儲(chǔ)、計(jì)算等各方面性能,確保能從海量大數(shù)據(jù)信息里,有效進(jìn)行數(shù)據(jù)分析和挖掘;
4.根據(jù)用戶的活動(dòng)記錄進(jìn)行特征篩選和關(guān)聯(lián)挖掘。提高關(guān)聯(lián)準(zhǔn)確性;
5.參與相關(guān)數(shù)據(jù)標(biāo)準(zhǔn)和規(guī)范的制定。
數(shù)據(jù)處理工程師崗位職責(zé) 篇21
1.負(fù)責(zé)直播業(yè)務(wù)相關(guān)數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)模型設(shè)計(jì);
3.參與數(shù)據(jù)倉(cāng)庫(kù)ETL流程設(shè)計(jì)、開發(fā)和優(yōu)化,解決ETL過程相關(guān)技術(shù)問題;
3.參與項(xiàng)目規(guī)劃,數(shù)據(jù)采集設(shè)計(jì),數(shù)據(jù)倉(cāng)庫(kù)開發(fā),模型開發(fā),報(bào)表開發(fā)等;
4. 總結(jié)數(shù)據(jù)倉(cāng)庫(kù)建模的方法,負(fù)責(zé)數(shù)據(jù)產(chǎn)品平臺(tái)化和系統(tǒng)化;
數(shù)據(jù)處理工程師崗位職責(zé) 篇22
1.根據(jù)項(xiàng)目經(jīng)理或高級(jí)數(shù)據(jù)挖掘工程師要求獨(dú)立完成項(xiàng)目的數(shù)據(jù)搜集和數(shù)據(jù)處理;
2.能夠快速根據(jù)項(xiàng)目需要學(xué)習(xí)并理解行業(yè)知識(shí),并能在項(xiàng)目經(jīng)理或高級(jí)數(shù)據(jù)挖掘工程指導(dǎo)下完成部分?jǐn)?shù)據(jù)分析工作;
3.能夠使用SAS,SPSS,或R,Python等開源平臺(tái)根據(jù)用戶需求定制開發(fā)相應(yīng)的算法;
4.理解數(shù)據(jù)挖掘模型及預(yù)測(cè)分析結(jié)果,撰寫相關(guān)分析報(bào)告;
5.了解數(shù)據(jù)倉(cāng)庫(kù)及商務(wù)智能背景,熟練掌握一類數(shù)據(jù)展現(xiàn)分析工具,如:Tableau,Cognos等;
數(shù)據(jù)處理工程師崗位職責(zé) 篇23
相關(guān)文件的定義和編寫
2.生產(chǎn)良率和拋料率的監(jiān)控和改善
3.生產(chǎn)異常的分析解決
4.技術(shù)人員的班別安排
5.設(shè)備保養(yǎng)的'安排和作業(yè)follow
6.設(shè)備故障維修&coordinator
7.配合新產(chǎn)品導(dǎo)入或者其他需求的試產(chǎn)驗(yàn)證
8.主管交付的其他事項(xiàng)
數(shù)據(jù)處理工程師崗位職責(zé) 篇24
1、維護(hù)數(shù)據(jù)庫(kù)穩(wěn)定運(yùn)行,持續(xù)發(fā)現(xiàn)和解決潛在的問題;
2、負(fù)責(zé)數(shù)據(jù)庫(kù)的性能優(yōu)化,使用新技術(shù)和新架構(gòu)滿足日益增長(zhǎng)的業(yè)務(wù)需求;
3、負(fù)責(zé)數(shù)據(jù)庫(kù)的監(jiān)控系統(tǒng)設(shè)計(jì),為開發(fā)團(tuán)隊(duì)提供平臺(tái)支持;
4、負(fù)責(zé)數(shù)據(jù)庫(kù)的運(yùn)維方面的相關(guān)工作,包括數(shù)據(jù)庫(kù)的安裝部署、壓力測(cè)試、備份恢復(fù)、知識(shí)庫(kù)管理等
5、負(fù)責(zé)數(shù)據(jù)庫(kù)進(jìn)行容量規(guī)劃、架構(gòu)設(shè)計(jì),提高業(yè)務(wù)高可用性和容災(zāi)能力;
6、負(fù)責(zé)數(shù)據(jù)庫(kù)相關(guān)工作的整體規(guī)劃,提供決策建議。
數(shù)據(jù)處理工程師崗位職責(zé) 篇25
崗位職責(zé):
1.負(fù)責(zé)銜接大數(shù)據(jù)平臺(tái)與前端的數(shù)據(jù)傳輸;
2.根據(jù)客戶需求設(shè)計(jì)大數(shù)據(jù)業(yè)務(wù)平臺(tái)架構(gòu)、配置組件;
3.負(fù)責(zé)后臺(tái)服務(wù)的調(diào)試與測(cè)試,梳理接口文檔、開發(fā)文檔與測(cè)試文檔。
任職資格:
1.碩士以上,或較為優(yōu)秀的本科生;后端開發(fā)經(jīng)驗(yàn)2年以上;
2.有基于b/s架構(gòu)進(jìn)行實(shí)際業(yè)務(wù)平臺(tái)開發(fā)的經(jīng)驗(yàn),有to b軟件開發(fā)經(jīng)驗(yàn)更佳;
3.通用軟件開發(fā)基礎(chǔ)、軟件架構(gòu)基礎(chǔ)、scrum敏捷開發(fā)方法,有大數(shù)據(jù)基礎(chǔ)更佳;
4.精通java或python語言,有rcp框架經(jīng)驗(yàn)更佳;熟練掌握mybatis、springcloud / springboot、node.js等框架,精通sql技術(shù);了解以太網(wǎng)通信協(xié)議,熟悉websocket技術(shù)。熟練使用git,svn等工具;
5.學(xué)習(xí)能力強(qiáng),勇于挑戰(zhàn),代碼質(zhì)量意識(shí)強(qiáng),篤信“工程即魔法”。
數(shù)據(jù)處理工程師崗位職責(zé) 篇26
1、空間數(shù)據(jù)采集、內(nèi)業(yè)處理;
2、電子地圖制作、配圖以及地圖服務(wù)發(fā)布;
3、編制空間數(shù)據(jù)建庫(kù)工作文檔;
4、對(duì)成果數(shù)據(jù)的分類整理、歸檔;
5、領(lǐng)導(dǎo)安排的其他工作任務(wù)。
數(shù)據(jù)處理工程師崗位職責(zé) 篇27
崗位職責(zé):
1、對(duì)通信和金融業(yè)務(wù)數(shù)據(jù)進(jìn)行分析和挖掘,滿足研發(fā)和運(yùn)營(yíng)等部門的業(yè)務(wù)需求和決策需求;
2、能根據(jù)業(yè)務(wù)特點(diǎn)選擇最合適的數(shù)據(jù)挖掘算法,并做調(diào)優(yōu);
3、支持?jǐn)?shù)據(jù)分析、挖掘算法平臺(tái)的部署和日常運(yùn)營(yíng);
4、撰寫分析類報(bào)告。
任職資格:
1、大學(xué)本科或本科以上統(tǒng)計(jì)學(xué)、數(shù)學(xué)或其他相關(guān)專業(yè),對(duì)數(shù)據(jù)結(jié)構(gòu)熟悉;
2、熟練使用python進(jìn)行數(shù)據(jù)分析、處理、可視化。熟悉numpy/pandas/matplotlib等常用模塊。熟練使用sql,最好用過hive-sql或spark-sql;
3、對(duì)hadoop/spark有一定了解。能夠簡(jiǎn)單使用hadoop系列命令;
4、對(duì)線性回歸,決策森林,xgboost,評(píng)分卡等數(shù)據(jù)挖掘相關(guān)算法有一定了解;
5、做過web接口調(diào)試,熟悉json者優(yōu)先;
6、熟練掌握PPT和EXCEL制作;
7、具備良好的學(xué)習(xí)、溝通與表達(dá)能力,具有較強(qiáng)的團(tuán)隊(duì)合作精神,對(duì)工作富有熱情,能承受工作壓力;
8、有運(yùn)營(yíng)商或金融類相關(guān)數(shù)據(jù)經(jīng)驗(yàn)工作優(yōu)先考慮;
9、能適應(yīng)中長(zhǎng)期現(xiàn)場(chǎng)出差。
數(shù)據(jù)處理工程師崗位職責(zé) 篇28
1、對(duì)海量業(yè)務(wù)數(shù)據(jù)進(jìn)行分析,并利用算法挖掘用戶行為特征,發(fā)現(xiàn)潛在規(guī)律,建立機(jī)器學(xué)習(xí)算法并優(yōu)化;
2、利用數(shù)據(jù)挖掘技術(shù)分析、預(yù)測(cè)用戶的消費(fèi)行為;
3、建立各種業(yè)務(wù)邏輯模型和數(shù)學(xué)模型,幫助公司改善運(yùn)營(yíng)管理,節(jié)省成本。
任職要求:
1、大學(xué)本科及以上學(xué)歷;
2、統(tǒng)計(jì)學(xué)、會(huì)計(jì)學(xué)、數(shù)學(xué)、物理等相關(guān)專業(yè);
3、本科5年以上同崗位工作經(jīng)驗(yàn),研究生3年以上同崗位工作經(jīng)驗(yàn);
4、對(duì)統(tǒng)計(jì)學(xué)和數(shù)據(jù)挖掘算法原理有較為深刻的理解,了解數(shù)據(jù)倉(cāng)庫(kù)思想,熟悉SPSS、SAS、R、MAHOUT等數(shù)據(jù)挖掘軟件之一;
5、熟悉決策樹、聚類、邏輯回歸,關(guān)聯(lián)分析、SVM,貝葉斯等數(shù)據(jù)挖掘算法,有海量數(shù)據(jù)挖掘的項(xiàng)目經(jīng)驗(yàn);
6、有用戶行為分析、用戶建模、業(yè)務(wù)建模、數(shù)學(xué)建模經(jīng)驗(yàn)優(yōu)先;
7、良好的邏輯分析能力、分析問題和解決問題的`能力,對(duì)數(shù)據(jù)敏感,良好的溝通能力。
數(shù)據(jù)處理工程師崗位職責(zé) 篇29
1、負(fù)責(zé)產(chǎn)品數(shù)據(jù)庫(kù)研發(fā),參與系統(tǒng)整體架構(gòu)設(shè)計(jì);
2、根據(jù)產(chǎn)品目標(biāo)負(fù)責(zé)相關(guān)業(yè)務(wù)的數(shù)據(jù)分析、建模、設(shè)計(jì)評(píng)審,跟進(jìn)產(chǎn)品過程中數(shù)據(jù)庫(kù)設(shè)計(jì);
3、負(fù)責(zé)產(chǎn)品模塊的數(shù)據(jù)層分析、設(shè)計(jì)、編碼、測(cè)試;
4、能夠獨(dú)立完成產(chǎn)品數(shù)據(jù)層開發(fā)任務(wù),負(fù)責(zé)各類數(shù)據(jù)接口開發(fā);
5、負(fù)責(zé)各類型數(shù)據(jù)操作處理和兼容問題;數(shù)據(jù)庫(kù)復(fù)雜SQL開發(fā)和調(diào)優(yōu)。
數(shù)據(jù)處理工程師崗位職責(zé) 篇30
崗位職責(zé):
1.按產(chǎn)品功能需求說明,設(shè)計(jì)相應(yīng)數(shù)據(jù)庫(kù)業(yè)務(wù)邏輯及規(guī)則,并完成腳本封裝。
2.根據(jù)產(chǎn)品適配計(jì)劃,進(jìn)行新適配數(shù)據(jù)庫(kù)的預(yù)研。
3.根據(jù)業(yè)務(wù)需求,提供數(shù)據(jù)庫(kù)元數(shù)據(jù)創(chuàng)建語句。
4.協(xié)助產(chǎn)品內(nèi)容、數(shù)據(jù)庫(kù)知識(shí)體系、業(yè)務(wù)算法模型等研發(fā)。
技能要求:
1.熟悉Oracle、SQL Server、MySQL數(shù)據(jù)庫(kù)架構(gòu)及原理,并有實(shí)際運(yùn)維經(jīng)驗(yàn)。
2.熟悉MySQL、PostgreSQL和MongoDB等開源數(shù)據(jù)庫(kù)架構(gòu)及原理,并有實(shí)際運(yùn)維經(jīng)驗(yàn)。
3.熟悉RDS for MySQL、PostgreSQL等云數(shù)據(jù)庫(kù)架構(gòu)及原理,并有實(shí)際運(yùn)維經(jīng)驗(yàn)。
4.熟悉達(dá)夢(mèng)、人大金倉(cāng)、南大通用、神州通用、高斯、熱璞、巨杉等國(guó)產(chǎn)數(shù)據(jù)庫(kù)架構(gòu)及原理,并有實(shí)際運(yùn)維經(jīng)驗(yàn)。
5.熟悉PolarDB、OceanBase、Tidb等數(shù)據(jù)庫(kù)架構(gòu)及原理,并有實(shí)際運(yùn)維經(jīng)驗(yàn)。
6.深刻理解數(shù)據(jù)庫(kù)原理及架構(gòu),有二線dba經(jīng)驗(yàn)者優(yōu)先。
7.熟悉Unix、Linux、Windows等操作系統(tǒng)架構(gòu)及原理,并能熟練使用。
8.熟悉主流自動(dòng)化運(yùn)維、監(jiān)控產(chǎn)品,有實(shí)際開發(fā)及使用經(jīng)驗(yàn)的優(yōu)先。
9.熟練使用shells、Python等腳本語言。
10.熟悉腳本開發(fā)規(guī)范,具有數(shù)據(jù)庫(kù)開發(fā)背景的`優(yōu)先。
11.深入理解數(shù)據(jù)庫(kù)的數(shù)據(jù)字典,并熟悉對(duì)象定義,有自定義對(duì)象開發(fā)經(jīng)驗(yàn)的優(yōu)先。
12.善于溝通,皮實(shí),良好的學(xué)習(xí)能力。
13.本科(含)以上學(xué)歷,計(jì)算機(jī)或相關(guān)專業(yè)的優(yōu)先。
數(shù)據(jù)處理工程師崗位職責(zé) 篇31
1.負(fù)責(zé)企業(yè)級(jí)數(shù)據(jù)倉(cāng)庫(kù)設(shè)計(jì)、規(guī)劃、建設(shè)、實(shí)施、管理,數(shù)據(jù)倉(cāng)庫(kù)架構(gòu)設(shè)計(jì)與數(shù)據(jù)開發(fā),創(chuàng)建數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)集市
2.熟悉數(shù)據(jù)倉(cāng)庫(kù)領(lǐng)域知識(shí),從架構(gòu)和技術(shù)層面參與建設(shè)數(shù)據(jù)倉(cāng)庫(kù),包括元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量、主數(shù)據(jù)管理、性能優(yōu)化和調(diào)優(yōu)。
3.負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)平臺(tái)相關(guān)數(shù)據(jù)管理工作,如研發(fā)規(guī)范、質(zhì)量規(guī)范、保障規(guī)范的制定與推動(dòng)實(shí)施落地
4.配合和協(xié)助數(shù)據(jù)分析/數(shù)據(jù)挖掘形成底層/中間層的業(yè)務(wù)邏輯切片