大數(shù)據(jù)架構(gòu)師的崗位職責(zé)

1、大數(shù)據(jù)架構(gòu)師的崗位職責(zé)大數(shù)據(jù)架構(gòu)師負(fù)責(zé)大數(shù)據(jù)基礎(chǔ)平臺(tái)、海量數(shù)據(jù)存儲(chǔ)處理 分布式平臺(tái)、數(shù)據(jù)分析系統(tǒng)架構(gòu)設(shè)計(jì)和研發(fā)。下面是 xx 為 您精心整理的大數(shù)據(jù)架構(gòu)師的崗位職責(zé)。大數(shù)據(jù)架構(gòu)師的崗位職責(zé)1職責(zé)：1 、 負(fù)責(zé)公司大數(shù)據(jù)產(chǎn)品的架構(gòu)設(shè)計(jì)，包含數(shù)據(jù)收集、數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)應(yīng)用，并完成相關(guān)架構(gòu)設(shè)計(jì)文檔的撰寫2 、 參與規(guī)劃從數(shù)據(jù)源到數(shù)據(jù)應(yīng)用的整體流程，并參與 相關(guān)產(chǎn)品的決策;3、負(fù)責(zé)解決核心技術(shù)問題，對(duì)技術(shù)方案進(jìn)行決策;4、 負(fù)責(zé)大數(shù)據(jù)研發(fā)團(tuán)隊(duì)建設(shè)、人才梯隊(duì)培養(yǎng)和技術(shù)團(tuán) 隊(duì)管理 ;5、 積極了解業(yè)界發(fā)展，研究與跟蹤大數(shù)據(jù)新技術(shù)發(fā)展 方向。任職要求：1 、精通GoldenGate For Bigdata 相

2、關(guān)理論，具備大型數(shù)據(jù)利用的生產(chǎn)實(shí)戰(zhàn)經(jīng)驗(yàn)2、 精通數(shù)據(jù)驅(qū)動(dòng)的理論，設(shè)計(jì)并生產(chǎn)上線相關(guān)數(shù)據(jù)驅(qū) 動(dòng)的產(chǎn)品;3、精通常用消息中間件的使用，例如kafka/RocketMQ/Apache Pulsar ，有解讀相關(guān)源碼者優(yōu)先;4、掌握 hadoop 、 spark 生態(tài)體系相關(guān)產(chǎn)品的使用，掌 握 MapReduce 編程或Spark 編程 ;5、了解傳統(tǒng)數(shù)據(jù)倉(cāng)庫理論及相關(guān)ETL 工具，例如kettle/datastage;6、熟悉Oracle 、 Mongodb 、 Mysql 數(shù)據(jù)庫的使用;7、扎實(shí)的Java 語言基礎(chǔ)，熟悉Java 開發(fā)工具和調(diào)試 工具的使用;8、 良好的團(tuán)隊(duì)協(xié)作精神，有能力對(duì)團(tuán)隊(duì)在

3、軟件設(shè)計(jì)、實(shí)現(xiàn)和測(cè)試方面進(jìn)行指導(dǎo);9、良好的邏輯分析能力和溝通能力，執(zhí)行力強(qiáng)、對(duì)待 工作認(rèn)真嚴(yán)謹(jǐn)、責(zé)任心強(qiáng)、具備出色的學(xué)習(xí)能力和團(tuán)隊(duì)合作 精神，有一定的推動(dòng)能力;10 、計(jì)算機(jī)科學(xué)、信息技術(shù)或相關(guān)領(lǐng)域本科以上學(xué)歷， 具有 5 年以上數(shù)據(jù)平臺(tái)項(xiàng)目開發(fā)經(jīng)驗(yàn)，3 年以上的架構(gòu)設(shè)計(jì)經(jīng)驗(yàn)， 具有大數(shù)據(jù)平臺(tái)應(yīng)用大型項(xiàng)目架構(gòu)設(shè)計(jì)經(jīng)驗(yàn)優(yōu)先;大數(shù)據(jù)架構(gòu)師的崗位職責(zé)2職責(zé)：1 、搭建基于Hadoop/Spark 的數(shù)據(jù)挖掘體系和大數(shù)據(jù)分 析系統(tǒng)架構(gòu);2 、 研究大數(shù)據(jù)領(lǐng)域前沿?cái)?shù)據(jù)挖掘技術(shù)，并引入相應(yīng)技 術(shù)在數(shù)據(jù)中心的使用;3、進(jìn)行大數(shù)據(jù)系統(tǒng)框架設(shè)計(jì)、模型算法開發(fā);4、 負(fù)責(zé)大型數(shù)據(jù)挖掘項(xiàng)目方案制定、項(xiàng)目實(shí)施落地及

4、 優(yōu)化等 ;5、開展數(shù)據(jù)爬取、聚類分析、輿情分析、魚骨圖分析、 定價(jià)策略等領(lǐng)域數(shù)據(jù)挖掘工作;任職資格：1 、本科以上學(xué)歷（ 持有學(xué)士學(xué)位）（985 ， 211 優(yōu)先 ） ，計(jì) 算機(jī)相關(guān)專業(yè)，五年工作經(jīng)驗(yàn);2、 二年以上數(shù)據(jù)挖掘項(xiàng)目經(jīng)驗(yàn)，完整參與過數(shù)據(jù)挖掘 大數(shù)據(jù)平臺(tái)的架構(gòu)開發(fā)過程，具備互聯(lián)網(wǎng)行業(yè)背景優(yōu)先;3、 精通分布式計(jì)算框架（ hadoop 、 spark 、 Storm 等 ）及 相關(guān)經(jīng)驗(yàn)，熟練掌握Hive/SQL ， Python ， 熟悉 Python 、R 相 關(guān)數(shù)值科學(xué)計(jì)算庫（ NumPy,SciPy 等 ） ;4、了解傳統(tǒng)的Bi/dW 理論，能結(jié)合傳統(tǒng)Bi* 實(shí)踐設(shè) 計(jì)大數(shù)據(jù)平

5、臺(tái);5、熟悉常用機(jī)器學(xué)習(xí)算法（ 如分類、回歸、聚類、關(guān)聯(lián) 規(guī)則等 ） 及其原理，具備應(yīng)用場(chǎng)景經(jīng)驗(yàn)，如用戶畫像、商品關(guān)聯(lián)度分析、輿情分析;6、熟悉主數(shù)據(jù)、元數(shù)據(jù)、數(shù)據(jù)質(zhì)量、和數(shù)據(jù)建模等數(shù)據(jù)治理相關(guān)的體系和方法;7、具備較強(qiáng)的邏輯思維能力、數(shù)據(jù)敏感度，擅于利用數(shù)據(jù)發(fā)現(xiàn)問題及解決問題;大數(shù)據(jù)架構(gòu)師的崗位職責(zé)3職責(zé)：1 、負(fù)責(zé)大數(shù)據(jù)開發(fā)團(tuán)隊(duì)建設(shè);2、負(fù)責(zé)行業(yè)大數(shù)據(jù)產(chǎn)品架構(gòu)設(shè)計(jì)與研發(fā);3、 負(fù)責(zé)帶領(lǐng)團(tuán)隊(duì)進(jìn)行行業(yè)大數(shù)據(jù)產(chǎn)品關(guān)鍵技術(shù)攻關(guān)。任職要求：1 、有三年以上大數(shù)據(jù)應(yīng)用、開發(fā)經(jīng)驗(yàn); 具備海量數(shù)據(jù)加 工處理 (ETL) 相關(guān)經(jīng)驗(yàn)，對(duì)數(shù)據(jù)挖掘及機(jī)器學(xué)習(xí)有較為深刻的理解 ;2、熟悉Hadoop 相關(guān)技術(shù)，對(duì)H

6、dFS、 MapReduce 、Hive 、 HBase 有一定的使用和開發(fā)經(jīng)驗(yàn);3、熟悉Linux ，熟練使用Shell 或 Python ，進(jìn)行腳本 編寫 ;4、 對(duì)數(shù)據(jù)結(jié)構(gòu)和數(shù)據(jù)統(tǒng)計(jì)分析算法有較為深刻理解;5、 掌握至少一種主流關(guān)系數(shù)據(jù)庫開發(fā)技術(shù)：Oracle 、SQL Server 、 MySQL 等 ;6、 掌握實(shí)時(shí)流計(jì)算技術(shù)，有Spark 、 Storm 開發(fā)經(jīng)驗(yàn)者 優(yōu)先 ;7、 需要具備2 年以上研發(fā)團(tuán)隊(duì)管理經(jīng)驗(yàn)。大數(shù)據(jù)架構(gòu)師的崗位職責(zé)4 職責(zé) :1) 負(fù)責(zé)公司軟件產(chǎn)品整體架構(gòu)的設(shè)計(jì)和關(guān)鍵功能實(shí)現(xiàn)2) 負(fù)責(zé)公司架構(gòu)長(zhǎng)期看護(hù)以及優(yōu)化;3) 負(fù)責(zé)軟件部門各模組間的協(xié)調(diào)配合;4) 提高

7、鞏固軟件代碼質(zhì)量;5) 負(fù)責(zé)大數(shù)據(jù)流式框架的設(shè)計(jì)、優(yōu)化及部署;6) 規(guī)劃研發(fā)部門員工的技術(shù)發(fā)展路線并提供必要的助和指導(dǎo)任職資格:1) 本科及以上學(xué)歷，計(jì)算機(jī)相關(guān)專業(yè)，5 年以上工作經(jīng);2) 頻繁換工作，比如一年一個(gè)公司，請(qǐng)繞路;3) 3 年以上產(chǎn)品架構(gòu)經(jīng)驗(yàn)，主導(dǎo)過產(chǎn)品的成功上線;4) 對(duì)底層設(shè)備通訊協(xié)議，B/S 系統(tǒng)，手機(jī)APP 開發(fā)有一定的了解;5) 對(duì)各種主流語言C#JavaPathon 有一定的了解5) 精通各種大數(shù)據(jù)架構(gòu)，并深入研究過其中一種，stormkafka 等流式實(shí)時(shí)處理經(jīng)驗(yàn)為佳6) 能夠承擔(dān)較強(qiáng)的工作壓力，有良好的自我驅(qū)動(dòng)能責(zé)任感 ;7) 具備優(yōu)秀的邏輯思維能力、表達(dá)能力、溝通協(xié)調(diào)能力。 大數(shù)據(jù)架構(gòu)師的崗位職責(zé)5職責(zé)：1 . 負(fù)責(zé)公司大數(shù)據(jù)底層框架的整體架構(gòu)設(shè)計(jì)，結(jié)合公司實(shí)際業(yè)務(wù)情況進(jìn)行技術(shù)選型及大數(shù)據(jù)戰(zhàn)略規(guī)劃2 .負(fù)責(zé)統(tǒng)一數(shù)據(jù)平臺(tái)項(xiàng)目的整體評(píng)估、設(shè)計(jì)、架構(gòu) 及關(guān)鍵模塊的開發(fā)，不斷提升系統(tǒng)的穩(wěn)定性和效率3 .負(fù)責(zé)架構(gòu)優(yōu)化及系統(tǒng)關(guān)鍵模塊的設(shè)計(jì)開發(fā)，協(xié)助團(tuán)隊(duì)解決開發(fā)過程中的技術(shù)難題；4 .建立良好的公司內(nèi)外的業(yè)界技術(shù)影響力；有效輔導(dǎo)團(tuán)隊(duì)，提升數(shù)據(jù)研發(fā)能力；2年以上經(jīng)驗(yàn)；有 作；有海量數(shù)據(jù)實(shí)踐任職要求：1 .從事大數(shù)據(jù)項(xiàng)目相關(guān)開發(fā)和 攜技術(shù)負(fù)責(zé)人系統(tǒng)化解決問題的成 功案例 經(jīng)驗(yàn)優(yōu)先；2 .擁有一定的算法和數(shù)據(jù)結(jié)構(gòu) ；有很強(qiáng)的數(shù)據(jù)設(shè)基礎(chǔ)計(jì)油象能力，善于從