亚洲一区爱区精品无码_无码熟妇人妻AV_日本免费一区二区三区最新_国产AV寂寞骚妇

大數(shù)據(jù)架構(gòu)師的崗位職責(zé)17篇(數(shù)據(jù)架構(gòu)師崗位要求)

時(shí)間:2022-10-15 10:25:00 綜合范文

  下面是范文網(wǎng)小編收集的大數(shù)據(jù)架構(gòu)師的崗位職責(zé)17篇(數(shù)據(jù)架構(gòu)師崗位要求),供大家閱讀。

大數(shù)據(jù)架構(gòu)師的崗位職責(zé)17篇(數(shù)據(jù)架構(gòu)師崗位要求)

大數(shù)據(jù)架構(gòu)師的崗位職責(zé)1

  1、負(fù)責(zé)公司大數(shù)據(jù)處理框架研發(fā)工作,設(shè)計(jì)與開發(fā)分布式存儲(chǔ)、數(shù)據(jù)處理與分析架構(gòu)。

  2、負(fù)責(zé)大數(shù)據(jù)平臺(tái)與產(chǎn)品和相關(guān)技術(shù)的追蹤及研究。

  3、負(fù)責(zé)大數(shù)據(jù)的處理工作,以及業(yè)務(wù)數(shù)據(jù)提取、加載、轉(zhuǎn)換處理流程的開發(fā)和優(yōu)化。

  4、利用大數(shù)據(jù)平臺(tái)工具對(duì)數(shù)據(jù)維護(hù)。

  5、負(fù)責(zé)相關(guān)項(xiàng)目的技術(shù)支持和服務(wù)。

  6、持續(xù)對(duì)系統(tǒng)的技術(shù)架構(gòu)進(jìn)行改進(jìn)和優(yōu)化。

大數(shù)據(jù)架構(gòu)師的崗位職責(zé)2

  1. 負(fù)責(zé)大數(shù)據(jù)項(xiàng)目整體架構(gòu)規(guī)劃,包括應(yīng)用架構(gòu)、技術(shù)架構(gòu)、物理架構(gòu)和數(shù)據(jù)架構(gòu)等;

  2. 負(fù)責(zé)指導(dǎo)工程師進(jìn)行技術(shù)驗(yàn)證與實(shí)現(xiàn),核心技術(shù)問題的攻關(guān),解決項(xiàng)目開發(fā)過(guò)程中的技術(shù)難題;

  3. 負(fù)責(zé)項(xiàng)目對(duì)外技術(shù)溝通,具有較強(qiáng)的溝通,表達(dá)和文檔撰寫能力;

  4. 根據(jù)公司項(xiàng)目和業(yè)務(wù)發(fā)展特點(diǎn),負(fù)責(zé)研究相關(guān)大數(shù)據(jù)前沿技術(shù);

  5. 推動(dòng)技術(shù)能力的沉淀。

大數(shù)據(jù)架構(gòu)師的崗位職責(zé)3

  1.制定面向產(chǎn)品的數(shù)據(jù)設(shè)計(jì)規(guī)范和流程,制定數(shù)據(jù)設(shè)計(jì)所需的各種文檔模板;

  2.負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)建模、數(shù)據(jù)庫(kù)優(yōu)化、數(shù)據(jù)部署,數(shù)據(jù)抽取等ETL的設(shè)計(jì),編寫專業(yè)的系統(tǒng)設(shè)計(jì)文檔;

  3.對(duì)于IT系統(tǒng)應(yīng)對(duì)大數(shù)據(jù)量和大并發(fā)所要求的性能指標(biāo)從數(shù)據(jù)模型和部署等方面給出設(shè)計(jì)和持續(xù)的優(yōu)化支持;

  4.參與產(chǎn)品架構(gòu)設(shè)計(jì)文檔和詳細(xì)設(shè)計(jì)文檔的評(píng)審;

  5.完成上級(jí)領(lǐng)導(dǎo)安排的其他任務(wù)。

大數(shù)據(jù)架構(gòu)師的崗位職責(zé)4

  職責(zé):

  1、負(fù)責(zé)公司大數(shù)據(jù)產(chǎn)品的架構(gòu)設(shè)計(jì),包含數(shù)據(jù)收集、數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)應(yīng)用,并完成相關(guān)架構(gòu)設(shè)計(jì)文檔的撰寫;

  2、參與規(guī)劃從數(shù)據(jù)源到數(shù)據(jù)應(yīng)用的整體流程,并參與相關(guān)產(chǎn)品的決策;

  3、負(fù)責(zé)解決核心技術(shù)問題,對(duì)技術(shù)方案進(jìn)行決策;

  4、負(fù)責(zé)大數(shù)據(jù)研發(fā)團(tuán)隊(duì)建設(shè)、人才梯隊(duì)培養(yǎng)和技術(shù)團(tuán)隊(duì)管理;

  5、積極了解業(yè)界發(fā)展,研究與跟蹤大數(shù)據(jù)新技術(shù)發(fā)展方向。

  任職要求:

  1、精通GoldenGate For BigData相關(guān)理論,具備大型數(shù)據(jù)利用的生產(chǎn)實(shí)戰(zhàn)經(jīng)驗(yàn);

  2、精通數(shù)據(jù)驅(qū)動(dòng)的理論,設(shè)計(jì)并生產(chǎn)上線相關(guān)數(shù)據(jù)驅(qū)動(dòng)的產(chǎn)品;

  3、精通常用消息中間件的使用,例如kafka/RocketMQ/Apache Pulsar,有解讀相關(guān)源碼者優(yōu)先;

  4、掌握hadoop、spark生態(tài)體系相關(guān)產(chǎn)品的使用,掌握MapReduce編程或Spark編程;

  5、了解傳統(tǒng)數(shù)據(jù)倉(cāng)庫(kù)理論及相關(guān)ETL工具,例如kettle/datastage;

  6、熟悉Oracle、Mongodb、Mysql數(shù)據(jù)庫(kù)的使用;

  7、扎實(shí)的Java語(yǔ)言基礎(chǔ),熟悉Java開發(fā)工具和調(diào)試工具的使用;

  8、良好的團(tuán)隊(duì)協(xié)作精神,有能力對(duì)團(tuán)隊(duì)在軟件設(shè)計(jì)、實(shí)現(xiàn)和測(cè)試方面進(jìn)行指導(dǎo);

  9、良好的邏輯分析能力和溝通能力,執(zhí)行力強(qiáng)、對(duì)待工作認(rèn)真嚴(yán)謹(jǐn)、責(zé)任心強(qiáng)、具備出色的學(xué)習(xí)能力和團(tuán)隊(duì)合作精神,有一定的推動(dòng)能力;

  10、計(jì)算機(jī)科學(xué)、信息技術(shù)或相關(guān)領(lǐng)域本科以上學(xué)歷,具有5年以上數(shù)據(jù)平臺(tái)項(xiàng)目開發(fā)經(jīng)驗(yàn),3年以上的架構(gòu)設(shè)計(jì)經(jīng)驗(yàn),具有大數(shù)據(jù)平臺(tái)應(yīng)用大型項(xiàng)目架構(gòu)設(shè)計(jì)經(jīng)驗(yàn)優(yōu)先;

大數(shù)據(jù)架構(gòu)師的崗位職責(zé)5

  1、負(fù)責(zé)大數(shù)據(jù)平臺(tái)資源規(guī)劃、權(quán)限控制、運(yùn)維架構(gòu)設(shè)計(jì),為各產(chǎn)品業(yè)務(wù)提供穩(wěn)定、高效、安全的運(yùn)行環(huán)境;

  2、負(fù)責(zé)實(shí)時(shí),離線數(shù)據(jù)分析處理及實(shí)時(shí)平臺(tái)的建設(shè)和搭建

  3、熟悉 Flink 流式計(jì)算引擎的使用以及源碼原理,并且有相關(guān)的流式處理平臺(tái)的經(jīng)驗(yàn)。

  4、Java基礎(chǔ)扎實(shí),熟練掌握垃圾回收,網(wǎng)絡(luò),多線程編程,了解 python 或 scala

  5、負(fù)責(zé)大數(shù)據(jù)平臺(tái)技術(shù)架構(gòu)、數(shù)據(jù)架構(gòu)的分析與設(shè)計(jì);

大數(shù)據(jù)架構(gòu)師的崗位職責(zé)6

  職責(zé):

  1.負(fù)責(zé)公司大數(shù)據(jù)底層框架的整體架構(gòu)設(shè)計(jì),結(jié)合公司實(shí)際業(yè)務(wù)情況進(jìn)行技術(shù)選型及大數(shù)據(jù)戰(zhàn)略規(guī)劃;

  2.負(fù)責(zé)統(tǒng)一數(shù)據(jù)平臺(tái)項(xiàng)目的整體評(píng)估、設(shè)計(jì)、架構(gòu)及關(guān)鍵模塊的開發(fā),不斷提升系統(tǒng)的穩(wěn)定性和效率;

  3.負(fù)責(zé)架構(gòu)優(yōu)化及系統(tǒng)關(guān)鍵模塊的設(shè)計(jì)開發(fā),協(xié)助團(tuán)隊(duì)解決開發(fā)過(guò)程中的技術(shù)難題;

  4.建立良好的公司內(nèi)外的業(yè)界技術(shù)影響力;有效輔導(dǎo)團(tuán)隊(duì),提升數(shù)據(jù)研發(fā)能力;

  任職要求:

  1.從事大數(shù)據(jù)項(xiàng)目相關(guān)開發(fā)和設(shè)計(jì)2年以上經(jīng)驗(yàn);有作為技術(shù)負(fù)責(zé)人系統(tǒng)化解決問題的成功案例;有海量數(shù)據(jù)實(shí)踐經(jīng)驗(yàn)優(yōu)先;

  2.擁有一定的算法和數(shù)據(jù)結(jié)構(gòu)基礎(chǔ);有很強(qiáng)的數(shù)據(jù)設(shè)計(jì)抽象能力,善于從復(fù)雜的數(shù)據(jù)問題中找到關(guān)鍵路徑;

  3.熟悉目前正在發(fā)展的大數(shù)據(jù)分布式平臺(tái)前沿技術(shù)的應(yīng)用;包括但不僅僅限于:hadoop、storm、spark、等;

  4. 良好的邏輯思維能力,良好的業(yè)務(wù)解讀能力,懂電力或通信業(yè)務(wù)優(yōu)先;

  5.具有鉆研精神,樂于接受挑戰(zhàn);

大數(shù)據(jù)架構(gòu)師的崗位職責(zé)7

  1.參與開發(fā)框架研發(fā)工作,根據(jù)工作安排,獨(dú)立研發(fā)各類通用技術(shù)組件、基礎(chǔ)框架組件以及通用業(yè)務(wù)功能組件;

  2.參與開發(fā)框架及技術(shù)平臺(tái)類軟件的維護(hù)和支持工作,幫助的項(xiàng)目團(tuán)隊(duì)使用框架,解決使用中的問題;

  3.參與新技術(shù)研究工作,提出適應(yīng)保險(xiǎn)公司的先進(jìn)IT技術(shù),提出全公司信息技術(shù)應(yīng)用發(fā)展方向及新技術(shù)應(yīng)用的方案和建議。

大數(shù)據(jù)架構(gòu)師的崗位職責(zé)8

  職責(zé):

  1、負(fù)責(zé)大數(shù)據(jù)開發(fā)團(tuán)隊(duì)建設(shè);

  2、負(fù)責(zé)行業(yè)大數(shù)據(jù)產(chǎn)品架構(gòu)設(shè)計(jì)與研發(fā);

  3、負(fù)責(zé)帶領(lǐng)團(tuán)隊(duì)進(jìn)行行業(yè)大數(shù)據(jù)產(chǎn)品關(guān)鍵技術(shù)攻關(guān)。

  任職要求:

  1、有三年以上大數(shù)據(jù)應(yīng)用、開發(fā)經(jīng)驗(yàn);具備海量數(shù)據(jù)加工處理(ETL)相關(guān)經(jīng)驗(yàn),對(duì)數(shù)據(jù)挖掘及機(jī)器學(xué)習(xí)有較為深刻的理解;

  2、熟悉Hadoop相關(guān)技術(shù),對(duì)HDFS、MapReduce、Hive、HBase有一定的使用和開發(fā)經(jīng)驗(yàn);

  3、熟悉Linux,熟練使用Shell或Python,進(jìn)行腳本編寫;

  4、對(duì)數(shù)據(jù)結(jié)構(gòu)和數(shù)據(jù)統(tǒng)計(jì)分析算法有較為深刻理解;

  5、掌握至少一種主流關(guān)系數(shù)據(jù)庫(kù)開發(fā)技術(shù):Oracle、SQL Server、MySQL等;

  6、掌握實(shí)時(shí)流計(jì)算技術(shù),有Spark、Storm開發(fā)經(jīng)驗(yàn)者優(yōu)先;

  7、需要具備2年以上研發(fā)團(tuán)隊(duì)管理經(jīng)驗(yàn)。

大數(shù)據(jù)架構(gòu)師的崗位職責(zé)9

  職責(zé):

  1、負(fù)責(zé)大數(shù)據(jù)平臺(tái)技術(shù)框架的技術(shù)選型和搭建;

  2、負(fù)責(zé)核心技術(shù)問題公關(guān),建設(shè)高可靠性,擴(kuò)展性及高性能大數(shù)據(jù)/數(shù)據(jù)應(yīng)用平臺(tái);

  3、負(fù)責(zé)規(guī)劃數(shù)據(jù)挖掘的整體流程,負(fù)責(zé)大數(shù)據(jù)開發(fā)團(tuán)隊(duì)業(yè)務(wù)需求開發(fā);

  4、與其他團(tuán)隊(duì)密切配合,尋求數(shù)據(jù)層面的業(yè)務(wù)價(jià)值,利用數(shù)據(jù)分析結(jié)論推動(dòng)產(chǎn)品優(yōu)化;

  5、研究和分享大數(shù)據(jù)架構(gòu)領(lǐng)域新技術(shù)。

  任職要求:

  1、計(jì)算機(jī)相關(guān)專業(yè)全日制統(tǒng)招本科及以上;

  2、5年以上工作經(jīng)驗(yàn),至少3年以上大數(shù)據(jù)項(xiàng)目相關(guān)工作經(jīng)驗(yàn),能夠設(shè)計(jì)大型大數(shù)據(jù)系統(tǒng)的架構(gòu)和技術(shù)方案;

  3、精通Hadoop/Spark/Hbase/Hive等大數(shù)據(jù)技術(shù),精通ETL技術(shù);

  4、熟悉數(shù)據(jù)挖掘,了解典型大數(shù)據(jù)算法和策略;

  5、熟悉主流Java技術(shù)框架,精通關(guān)系型數(shù)據(jù)庫(kù)及SQL語(yǔ)言,熟悉NoSQL/JSON/XML;

  6、有較強(qiáng)的學(xué)習(xí)能力和問題解決能力,邏輯嚴(yán)密、思路清晰;

  7、有數(shù)據(jù)倉(cāng)庫(kù)經(jīng)驗(yàn)者優(yōu)先,有金融行業(yè)項(xiàng)目經(jīng)驗(yàn)者優(yōu)先。

大數(shù)據(jù)架構(gòu)師的崗位職責(zé)10

  職責(zé):

  1)負(fù)責(zé)公司軟件產(chǎn)品整體架構(gòu)的設(shè)計(jì)和關(guān)鍵功能實(shí)現(xiàn)

  2)負(fù)責(zé)公司架構(gòu)長(zhǎng)期看護(hù)以及優(yōu)化;

  3)負(fù)責(zé)軟件部門各模組間的協(xié)調(diào)配合;

  4)提高鞏固軟件代碼質(zhì)量;

  5)負(fù)責(zé)大數(shù)據(jù)流式框架的設(shè)計(jì)、優(yōu)化及部署;

  6)規(guī)劃研發(fā)部門員工的技術(shù)發(fā)展路線并提供必要的幫助和指導(dǎo)

  任職資格:

  1)本科及以上學(xué)歷,計(jì)算機(jī)相關(guān)專業(yè),5年以上工作經(jīng)驗(yàn);

  2)頻繁換工作,比如一年一個(gè)公司,請(qǐng)繞路;

  3)3年以上產(chǎn)品架構(gòu)經(jīng)驗(yàn),主導(dǎo)過(guò)產(chǎn)品的成功上線;

  4)對(duì)底層設(shè)備通訊協(xié)議,B/S系統(tǒng),手機(jī)APP開發(fā)等都有一定的了解;

  5)對(duì)各種主流語(yǔ)言C#\Java\Pathon有一定的了解

  5)精通各種大數(shù)據(jù)架構(gòu),并深入研究過(guò)其中一種,有storm\kafka等流式實(shí)時(shí)處理經(jīng)驗(yàn)為佳

  6)能夠承擔(dān)較強(qiáng)的工作壓力,有良好的自我驅(qū)動(dòng)能力和責(zé)任感;

  7)具備優(yōu)秀的邏輯思維能力、表達(dá)能力、溝通協(xié)調(diào)能力。

大數(shù)據(jù)架構(gòu)師的崗位職責(zé)11

  1、深入理解MDM主數(shù)據(jù)管理思想和流程;

  2、理解業(yè)務(wù)數(shù)據(jù)、主數(shù)據(jù)與元數(shù)據(jù)的區(qū)別與關(guān)系;

  3、參與過(guò)數(shù)據(jù)模型的設(shè)計(jì)與開發(fā);

  4、深入理解數(shù)據(jù)清洗,標(biāo)準(zhǔn)化,轉(zhuǎn)換,匹配,數(shù)據(jù)質(zhì)量、安全管理的原理和業(yè)務(wù)流程;

  5、參與過(guò)數(shù)據(jù)ETL開發(fā)與設(shè)計(jì);

  6、熟練運(yùn)用主流DBMS,nosql數(shù)據(jù)庫(kù)。

大數(shù)據(jù)架構(gòu)師的崗位職責(zé)12

  職責(zé):

  1、搭建基于Hadoop/Spark的數(shù)據(jù)挖掘體系和大數(shù)據(jù)分析系統(tǒng)架構(gòu);

  2、研究大數(shù)據(jù)領(lǐng)域前沿?cái)?shù)據(jù)挖掘技術(shù),并引入相應(yīng)技術(shù)在數(shù)據(jù)中心的使用;

  3、進(jìn)行大數(shù)據(jù)系統(tǒng)框架設(shè)計(jì)、模型算法開發(fā);

  4、負(fù)責(zé)大型數(shù)據(jù)挖掘項(xiàng)目方案制定、項(xiàng)目實(shí)施落地及優(yōu)化等 ;

  5、開展數(shù)據(jù)爬取、聚類分析、輿情分析、魚骨圖分析、定價(jià)策略等領(lǐng)域數(shù)據(jù)挖掘工作;

  任職資格:

  1、本科以上學(xué)歷(持有學(xué)士學(xué)位)(985,211優(yōu)先),計(jì)算機(jī)相關(guān)專業(yè),五年工作經(jīng)驗(yàn);

  2、二年以上數(shù)據(jù)挖掘項(xiàng)目經(jīng)驗(yàn),完整參與過(guò)數(shù)據(jù)挖掘大數(shù)據(jù)平臺(tái)的架構(gòu)開發(fā)過(guò)程,具備互聯(lián)網(wǎng)行業(yè)背景優(yōu)先;

  3、精通分布式計(jì)算框架(hadoop、spark、Storm等)及相關(guān)經(jīng)驗(yàn),熟練掌握Hive/SQL,Python,熟悉Python、R相關(guān)數(shù)值科學(xué)計(jì)算庫(kù)(NumPy,SciPy等);

  4、了解傳統(tǒng)的BI/DW 理論,能結(jié)合傳統(tǒng)BI***實(shí)踐設(shè)計(jì)大數(shù)據(jù)平臺(tái);

  5、熟悉常用機(jī)器學(xué)習(xí)算法(如分類、回歸、聚類、關(guān)聯(lián)規(guī)則等)及其原理,具備應(yīng)用場(chǎng)景經(jīng)驗(yàn),如用戶畫像、商品關(guān)聯(lián)度分析、輿情分析;

  6、熟悉主數(shù)據(jù)、元數(shù)據(jù)、數(shù)據(jù)質(zhì)量、和數(shù)據(jù)建模等數(shù)據(jù)治理相關(guān)的體系和方法;

  7、具備較強(qiáng)的邏輯思維能力、數(shù)據(jù)敏感度,擅于利用數(shù)據(jù)發(fā)現(xiàn)問題及解決問題;

大數(shù)據(jù)架構(gòu)師的崗位職責(zé)13

  1. 負(fù)責(zé)數(shù)瀾大數(shù)據(jù)平臺(tái)的架構(gòu)設(shè)計(jì)和研發(fā),建立數(shù)據(jù)生態(tài)服務(wù),解決海量數(shù)據(jù)面臨的挑戰(zhàn);

  2. 管理和優(yōu)化Hadoop、Spark等集群,計(jì)算作業(yè)的調(diào)優(yōu),保證集群和平臺(tái)的高效和穩(wěn)定;

  3. 負(fù)責(zé)Hadoop、Spark、Flink的功能、性能和擴(kuò)展,解決并實(shí)現(xiàn)業(yè)務(wù)需求;

  4. 負(fù)責(zé)大數(shù)據(jù)產(chǎn)品的自動(dòng)化、離線與實(shí)時(shí)計(jì)算、即席計(jì)算、數(shù)據(jù)質(zhì)量、數(shù)據(jù)安全、機(jī)器學(xué)習(xí)等平臺(tái)的設(shè)計(jì)和開發(fā);

  5. 調(diào)研和把握當(dāng)前的最新技術(shù),將其中的先進(jìn)技術(shù)引入到自己的平臺(tái)中,改善產(chǎn)品,提升競(jìng)爭(zhēng)力;

大數(shù)據(jù)架構(gòu)師的崗位職責(zé)14

  職責(zé):

  1、負(fù)責(zé)DMP技術(shù)架構(gòu)設(shè)計(jì)與構(gòu)建,根據(jù)業(yè)務(wù)規(guī)劃及技術(shù)規(guī)劃制定應(yīng)用架構(gòu)方案;

  2、負(fù)責(zé)設(shè)計(jì)構(gòu)建DMP數(shù)據(jù)采集、存儲(chǔ)及分析框架,設(shè)計(jì)數(shù)據(jù)處理的技術(shù)流程和規(guī)范;

  3、負(fù)責(zé)核心功能的架構(gòu)與代碼模板編寫,開發(fā)與維護(hù)系統(tǒng)公用核心模塊;

  4、負(fù)責(zé)基于大數(shù)據(jù)技術(shù)的海量數(shù)據(jù)的自動(dòng)化分析處理和統(tǒng)計(jì)工作。

  崗位要求:

  1、計(jì)算機(jī)或相關(guān)專業(yè)本科以上學(xué)歷,三年以上的開發(fā)經(jīng)驗(yàn),二年以上大數(shù)據(jù)相關(guān)軟件架構(gòu)的實(shí)際經(jīng)驗(yàn);

  2、精通大數(shù)據(jù)處理技術(shù),熟悉Hadoop/Storm技術(shù)體系,有Hadoop、Hive、Hbase項(xiàng)目經(jīng)驗(yàn);

  3、具有較強(qiáng)的架構(gòu)能力,具有分布式計(jì)算、實(shí)時(shí)計(jì)算、數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)挖掘系統(tǒng)的架構(gòu)經(jīng)歷優(yōu)先;

  4、對(duì)數(shù)據(jù)敏感,洞察力強(qiáng),了解國(guó)內(nèi)外廣告發(fā)展趨勢(shì);

  5.、擅長(zhǎng)系統(tǒng)分析與設(shè)計(jì),精通常用的設(shè)計(jì)模式,擅長(zhǎng)性能調(diào)優(yōu);

  6、熟悉DMP/RTB技術(shù)原理,了解用戶的行為分析及建模;有RTB/DSP/SSP/EXCHANGE/DMP等廣告行業(yè)從業(yè)經(jīng)歷。

大數(shù)據(jù)架構(gòu)師的崗位職責(zé)15

  職責(zé)

  1、負(fù)責(zé)大數(shù)據(jù)架構(gòu)設(shè)計(jì),包括定義數(shù)據(jù)的存儲(chǔ)、集成(ETL)、應(yīng)用,支撐業(yè)務(wù)運(yùn)營(yíng)和數(shù)據(jù)分析類需求實(shí)現(xiàn);

  2、制定數(shù)據(jù)治理領(lǐng)域的數(shù)據(jù)體系化管理措施,包括元數(shù)據(jù)設(shè)計(jì)、數(shù)據(jù)標(biāo)準(zhǔn)、數(shù)據(jù)質(zhì)量、數(shù)據(jù)處理、數(shù)據(jù)安全等工作,確保數(shù)據(jù)可信與安全;

  3、基于行業(yè)數(shù)據(jù)積累,滿足業(yè)務(wù)的數(shù)據(jù)挖掘需求,實(shí)現(xiàn)從數(shù)據(jù)到資產(chǎn)的轉(zhuǎn)變,根據(jù)目標(biāo)行業(yè)建立具有前瞻性的數(shù)據(jù)模型;

  4、對(duì)各產(chǎn)品的數(shù)據(jù)安全負(fù)責(zé),主導(dǎo)制定和實(shí)施數(shù)據(jù)庫(kù)系統(tǒng)安全策略,保證整體方案數(shù)據(jù)安全;

  崗位要求

  業(yè)務(wù)技能要求:

  1、深入理解云化、數(shù)據(jù)倉(cāng)庫(kù),在參與過(guò)的系統(tǒng)設(shè)計(jì)中,必須涉及這兩項(xiàng)關(guān)鍵技術(shù);

  n2、精通或者熟悉Hadoop體系架構(gòu),以及HDFS/HBase/Hive/MapReduce/Spark等技術(shù),了解體系架構(gòu)各組件的優(yōu)缺點(diǎn),有直接的產(chǎn)品設(shè)計(jì)與開發(fā)、部署、調(diào)優(yōu)的經(jīng)驗(yàn);

  3、精通或熟悉常見RDBMS(Oracle / PostgreSQL / MySql)、NoSQL(Redis / Memcached/ MongoDB)、全文搜索引擎(Solr/ElasticSearch)的使用及開發(fā),了解各數(shù)據(jù)庫(kù)優(yōu)缺點(diǎn), 熟悉與架構(gòu)設(shè)計(jì)相關(guān)的數(shù)據(jù)存儲(chǔ)、性能調(diào)優(yōu)等相關(guān)領(lǐng)域知識(shí),有相關(guān)項(xiàng)目經(jīng)驗(yàn)尤佳;

  4、熟悉業(yè)界常用的數(shù)據(jù)采集、集成、數(shù)據(jù)存儲(chǔ)、計(jì)算、數(shù)據(jù)模型、數(shù)據(jù)分析的技術(shù)方案,具有數(shù)據(jù)分析或數(shù)據(jù)挖掘相關(guān)經(jīng)驗(yàn)者優(yōu)先;

  n5、熟悉數(shù)據(jù)治理相關(guān)流程,包括數(shù)據(jù)接入、數(shù)據(jù)處理、數(shù)據(jù)治理、數(shù)據(jù)組織、數(shù)據(jù)服務(wù)等。

  專業(yè)知識(shí)要求:

  1、具備數(shù)據(jù)治理的知識(shí)與體系方案,包含政策、組織、角色、流程、規(guī)范等,以及規(guī)劃相應(yīng)的支撐方案。了解業(yè)界的數(shù)據(jù)管理方法論;

  2、具備數(shù)據(jù)用例設(shè)計(jì)和開發(fā)能力。能夠基于業(yè)務(wù)相關(guān)數(shù)據(jù)進(jìn)行業(yè)務(wù)需求分析和痛點(diǎn)識(shí)別,將業(yè)務(wù)需求轉(zhuǎn)化為數(shù)據(jù)的需求,完成數(shù)據(jù)用例的設(shè)計(jì)和開發(fā);

  3、精通海量數(shù)據(jù)(日增量百億)級(jí)別數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)集市的構(gòu)建流程。熟悉公安、政務(wù)、工業(yè)、交通、醫(yī)療等多行業(yè)業(yè)務(wù)者優(yōu)先。

大數(shù)據(jù)架構(gòu)師的崗位職責(zé)16

  1、建設(shè)大數(shù)據(jù)平臺(tái),主要技術(shù)為k8s, docker;

  2、跟進(jìn)開源社區(qū)的更新,閱讀文檔,驗(yàn)證feature;

  3、閱讀容器生態(tài)圈各組件的開源項(xiàng)目代碼,開發(fā)新功能;

  4、持續(xù)提升平臺(tái)的性能和穩(wěn)定性。

大數(shù)據(jù)架構(gòu)師的崗位職責(zé)17

  職責(zé):

  1. 負(fù)責(zé)大數(shù)據(jù)平臺(tái)的基礎(chǔ)技術(shù)規(guī)劃,編制相關(guān)規(guī)范文檔。

  2. 負(fù)責(zé)大數(shù)據(jù)平臺(tái)的數(shù)據(jù)采集,處理,存儲(chǔ)以及挖掘分析的架構(gòu)實(shí)現(xiàn)。

  3. 負(fù)責(zé)大數(shù)據(jù)平臺(tái)的實(shí)際規(guī)劃建設(shè),包括環(huán)境和框架的規(guī)劃搭建以及部分核心編碼工作。

  4. 負(fù)責(zé)大數(shù)據(jù)相關(guān)技術(shù)發(fā)展方向的預(yù)研。

  5. 參與業(yè)務(wù)需求調(diào)研,根據(jù)需求及行業(yè)特點(diǎn)設(shè)計(jì)大數(shù)據(jù)解決方案并跟進(jìn)具體實(shí)施項(xiàng)目。

  6. 制定大數(shù)據(jù)平臺(tái)中數(shù)據(jù)質(zhì)量,業(yè)務(wù)質(zhì)量監(jiān)控及管理辦法。

  崗位要求:

  1. 全日制本科及以上學(xué)歷,5年以上工作經(jīng)驗(yàn),4年及以上大數(shù)據(jù)架構(gòu)設(shè)計(jì)經(jīng)驗(yàn),熟悉大數(shù)據(jù)解決方案,包括Hadoop平臺(tái)、Spark、storm、機(jī)器學(xué)習(xí)、深度學(xué)習(xí)等大數(shù)據(jù)解決方案。

  2. 深刻理解大數(shù)據(jù)處理(流計(jì)算、分布式計(jì)算、分布式文件系統(tǒng)、分布式存儲(chǔ)等相關(guān)技術(shù))實(shí)現(xiàn)方法。有架構(gòu)和設(shè)計(jì)實(shí)踐經(jīng)驗(yàn)。

  3. 精通大型數(shù)據(jù)庫(kù)Oracle、SqlServer等的開發(fā)。

  4. 精通java,Python中的一種或多種語(yǔ)言。

  5. 熟悉容器、虛擬化、微服務(wù)框架等相關(guān)技術(shù)。

  6. 對(duì)數(shù)據(jù)敏感,有嚴(yán)謹(jǐn)?shù)墓ぷ魉悸?,良好的溝通能力和團(tuán)隊(duì)合作精神。

  7. 熟悉R,Python,SAS、SPSS等數(shù)據(jù)挖掘經(jīng)驗(yàn)者優(yōu)先。

  8. 高寬展性,高性能,和分布式系統(tǒng)的實(shí)踐及運(yùn)維經(jīng)驗(yàn)者優(yōu)先。

  9. 有大型數(shù)據(jù)倉(cāng)庫(kù)實(shí)施、大數(shù)據(jù)平臺(tái)數(shù)據(jù)開發(fā)經(jīng)驗(yàn),熟悉運(yùn)營(yíng)商業(yè)務(wù)者優(yōu)先。

大數(shù)據(jù)架構(gòu)師的崗位職責(zé)17篇(數(shù)據(jù)架構(gòu)師崗位要求)相關(guān)文章:

某房地產(chǎn)公司工程部崗位職責(zé)3篇 房地產(chǎn)公司工程部崗位有哪些

銷售總監(jiān)崗位的工作職責(zé)描述14篇 銷售部崗位職責(zé)描述

施工企業(yè)財(cái)務(wù)副處長(zhǎng)崗位職責(zé)共3篇(工程財(cái)務(wù)部長(zhǎng)崗位職責(zé))

連鎖酒店店長(zhǎng)崗位職責(zé)15篇(星級(jí)酒店店長(zhǎng)職責(zé))

銀行安保人員崗位職責(zé)說(shuō)明4篇 銀行保安崗位職責(zé)實(shí)施細(xì)則

研展總監(jiān)崗位職責(zé)共6篇 研展總監(jiān)崗位職責(zé)共內(nèi)容

崗位職責(zé)培訓(xùn)通訊稿共4篇 開展崗位培訓(xùn)的通訊稿

園長(zhǎng)衛(wèi)生保健崗位職責(zé)共3篇 幼兒園園長(zhǎng)衛(wèi)生保健工作職責(zé)

貿(mào)易結(jié)算崗位職責(zé)共7篇(進(jìn)出口結(jié)算崗位職責(zé))

安全品質(zhì)主管崗位職責(zé)實(shí)用5篇(品質(zhì)主管的崗位職責(zé)及工作內(nèi)容)