大數據開發(fā)工程師的具體職責（匯編5篇）

第第頁大數據開發(fā)工程師的實在職責（匯編5篇）大數據開發(fā)工程師的實在職責第1篇職責：1、大數據的分布式采集與環(huán)境搭建和測試；2、大數據存儲、處理和分析工作；3、大數據相關產品線的改進和相關核心開發(fā)工作；4、其他大數據相關工作。任職要求：1、本科及以上學歷，計算機相關專業(yè)；2、2年以上Java開發(fā)及大數據相關開發(fā)閱歷，java基礎堅固結實，嫻熟把握多線程、集合、緩存、序列化、nio等技術；3、諳習Linux環(huán)境，諳習Linuxshell/python/perl任一腳本；4、諳習Hadoop、Spark、ZooKeeper等主流的大數據處理架構，并有1年以上Hadoop相關的實際開發(fā)、架構及調優(yōu)閱歷；5、使用過阿里云；6、諳習架構；7、具有較好的學習本領、溝通表達本領及團隊合作本領。大數據開發(fā)工程師的實在職責第2篇職責：1、本崗位培育方向為證券基金行業(yè)數據架構師；2、輔佑襄助大數據架構師訂立項目開發(fā)流程、規(guī)范，輔佑襄助數據模型設計人員進行模型設計；3、輔佑襄助技術架構師進行大數據平臺調優(yōu)（業(yè)務邏輯角度）；4、負責大數據平臺開發(fā)，包括數據抽取、轉換和加載；5、負責掌控數據需求、管理項目開發(fā)進度，搭配QA完成項目質量管理；職位要求：1、2年以上證券或者基金行業(yè)數據中心、大數據平臺建設閱歷；2、具備較強的學習本領，對數據模型和大數據技術有深厚的愛好；3、嫻熟把握基于ORACLE或MPP數據庫或Hadoop等開發(fā)技術；4、至少把握一種ETL開發(fā)工具。如：Informatica、DataStage、SSIS、Kettle等；5、良好的團隊合作精神、公司供給優(yōu)厚待遇。大數據開發(fā)工程師的實在職責第3篇職責:1、負責公司大數據平臺數據處理工具ETL、流處理平臺等建設，功能規(guī)劃，平臺演進，維護調優(yōu)等；2、結合公司業(yè)務特征，負責公司數據倉庫規(guī)劃、數據倉庫建設、數倉管理等；3、負責大數據處理技術討論及新技術引進，參加超大規(guī)模實時/離線數據計算框架，存儲、查詢、可視化解決方案的設計，研發(fā)；4、負責公司業(yè)務數據倉庫模型建設及全業(yè)務數據域打通；5、負責BI報表和可視化項目，和客戶深度溝通，理解客戶的業(yè)務挑戰(zhàn)，供給解決方案，訂立開發(fā)計劃并執(zhí)行，支持各單位日常數據需求和任務；任職資格:1、嫻熟把握關系型數據庫,例如：Oracle、Mysql、Vertica等；諳習NoSql數據庫，例如HBase、Redis、MongodDB等；具備豐富的數據庫管理和運維調優(yōu)閱歷；2、諳習數據倉庫領域學問和技能者優(yōu)先，包括但不局限于：元數據管理、數據開發(fā)測試工具與方法、數據質量、主數據管理，數據打通等；3、有從事分布式數據存儲與計算平臺應用開發(fā)閱歷，諳習Hadoop生態(tài)相關技術并有相關實踐閱歷著優(yōu)先，如Hdfs、Mapreduce、Hive、Hbase、Spark、Storm；4、精通數據預處理、檢驗、清洗、分析方法，精通各種常用統(tǒng)計檢驗方法；嫻熟把握一門或多門編程語言，并有大型項目建設閱歷者優(yōu)先，如Java、Python、Shell和scala等；5、精通Linux，諳習日常運維、搭建常見服務器、定位解決日常問題的本領，具備ETL開發(fā)閱歷優(yōu)先；6、良好的語言溝通與表達本領，有豐富的數據開發(fā)閱歷，較強的數據、平臺、技術理解本領；7、具備數學類、計算機類等相關專業(yè)統(tǒng)招本科及以上學歷，具有3年及以上大數據開發(fā)工作閱歷，有互聯網行業(yè)背景優(yōu)先。大數據開發(fā)工程師的實在職責第4篇職責：1、在hadoop平臺進行hive/hbase/spark開發(fā)；2、處理公司大數據平臺產品的技術工作，包括存儲、處理、分析、挖掘、架構設計、研發(fā)工作；3、諳習設計、構建和優(yōu)化基于hadoop/Hbase的存儲平臺架構；4、諳習整體提升hadoop/Hbase/Storm/Spark集群的高可用性、高性能、高擴展特性；5、部門相關工作。崗位要求：1、計算機等相關專業(yè)大專及以上學歷；2、3年以上軟件開發(fā)閱歷，精通Java開發(fā)，至少2年以上Hadoop相關開發(fā)閱歷；3、諳習分布式系統(tǒng)、分布式計算系統(tǒng)的工作機制，具有大規(guī)模數據平臺，高并發(fā)大型系統(tǒng)，大數據等架構設計和開發(fā)閱歷；4、諳習sqoop、Hive、hbase、spark等大數據生態(tài)組件；5、精通linuxshell和sql腳本；6、有javaweb開發(fā)閱歷者優(yōu)先；7、良好的團隊精神和溝通本領，很強的邏輯思維本領和學習本領。大數據開發(fā)工程師的實在職責第5篇職責負責大數據分析需求設計和開發(fā)工作，包括數據存儲、預處理、查詢、統(tǒng)計、實時分析、數據優(yōu)化及配置等功能；對大數據分析系統(tǒng)存在的問題進行跟蹤和定位并適時解決；負責上級交辦的其他相關工作。崗位要求：本科以上學歷，2年以上工作閱歷；Java基礎堅固結實，嫻熟使用JavaIDE進行代碼編寫和調試，諳習JUnit單元測試框架；諳習Linux操作系統(tǒng)，能在Linux上完成開發(fā)、調試工作；諳習網絡IO、多線程并發(fā)編程、集合等基礎框架，精通數據結構和數據算法；參加過分布式高性能服務的設計開發(fā)過程，有大規(guī)模分布式