大數(shù)據(jù)架構師崗位的工作職責
大數(shù)據(jù)架構師崗位的工作職責
大數(shù)據(jù)架構師需要負責深入理解業(yè)務需求,對業(yè)務建模,設計系統(tǒng)架構,滿足業(yè)務需求。以下是學習啦小編整理的大數(shù)據(jù)架構師崗位的工作職責。
大數(shù)據(jù)架構師崗位的工作職責1
職責:
1.負責數(shù)據(jù)倉庫建設,基于數(shù)據(jù)驅動構建企業(yè)級數(shù)據(jù)模型,根據(jù)架構設計進行各層數(shù)據(jù)模型開發(fā)。
2.面向PB級別超大規(guī)模數(shù)據(jù)處理和查詢需求,設計適合業(yè)務變化的合理的多維數(shù)據(jù)分析系統(tǒng)架構,滿足多樣性需求。
3.構建設計良好的數(shù)據(jù)流、調度系統(tǒng)、查詢引擎、監(jiān)控系統(tǒng),保證系統(tǒng)穩(wěn)定高效運行,以實現(xiàn)數(shù)據(jù)的最大價值。
4.指導團隊成員開展數(shù)據(jù)倉庫建設。
5.參與重點項目的評審,參與企業(yè)數(shù)據(jù)管理體系建設。
任職要求:
1.統(tǒng)招本科及以上學歷。
2.從事數(shù)據(jù)倉庫領域至少5年以上,熟悉數(shù)據(jù)倉庫模型設計與ETL開發(fā)經(jīng)驗 ,掌握Kimball的維度建模設計方法,具備海量數(shù)據(jù)加工處理(ETL)相關經(jīng)驗 。
3.具有一定數(shù)據(jù)模型和數(shù)據(jù)架構基礎,熟悉hadoop\hive和常用數(shù)據(jù)庫。
4. 精通SQL,有一定的SQL性能調優(yōu)經(jīng)驗,熟悉hive sql的開發(fā)。
5.具有管理團隊開發(fā)經(jīng)驗,具備良好的組織能力、協(xié)調能力及項目管理能力。
6.具有較好的文字功底及語言表達能力,能夠快速、準確地理解需求。
7.具有專研、快速學習和創(chuàng)新精神,具備獨立分析問題和解決問題的能力。
8.具有責任心,時間觀念強,工作獨立性強,有良好的團隊合作精神。
9.全日制普通本科畢業(yè)。
大數(shù)據(jù)架構師崗位的工作職責2
職責:
1、負責大數(shù)據(jù)平臺架構的規(guī)劃與設計;
2、負責大數(shù)據(jù)平臺技術框架的選型與技術難點攻關;
3、參與企業(yè)級大數(shù)據(jù)產(chǎn)品和應用規(guī)劃;
4、研究跟進大數(shù)據(jù)架構領域新技術并分享;
5、大數(shù)據(jù)處理和分析應用平臺的設計指導。
任職資格:
1、 具備深厚的分布式系統(tǒng)或數(shù)據(jù)庫系統(tǒng)的理論基礎,熟悉分布式計算系統(tǒng)的工作機制,具有分布式文件系統(tǒng)、分布式數(shù)據(jù)庫系統(tǒng)、集群存儲系統(tǒng)等架構設計經(jīng)驗;
2、熟悉BI平臺架構及相關項目標準,大數(shù)據(jù)解決方案包括Hadoop、Spark、Storm、機器學習等大數(shù)據(jù)平臺解決方案;
3、熟悉MySql/Postgresql/Oracle/MongoDB/Redis等主流數(shù)據(jù)數(shù)據(jù)庫;
4、 精通Linux/Unix環(huán)境,精通J java、scala、python、R中的一種或多種語言;
5、 具備優(yōu)秀的團隊意識和溝通能力,學習能力和主動性強,具有鉆研精神,充滿激情,樂于接受挑戰(zhàn);
6、大專及以上學歷,3年及以上工作經(jīng)驗。
大數(shù)據(jù)架構師崗位的工作職責3
職責:
1. 規(guī)劃設計大數(shù)據(jù)平臺整體架構,規(guī)劃各種組件,并且指導技術團隊完成相關系統(tǒng)驗證、安裝、部署、配置;
2. 負責制定大數(shù)據(jù)平臺技術規(guī)范和接口規(guī)范,指導研發(fā)團隊按照規(guī)范進行系統(tǒng)開發(fā);
3. 配合商務人員完成售前技術支持工作;
4. 完成其他與數(shù)據(jù)應用有關的技術工作;
任職要求:
1. 計算機相關專業(yè)本科學歷,5年以上工作經(jīng)驗;
2. 對大數(shù)據(jù)技術棧有非常深刻的了解;具備架構設計的實際經(jīng)驗;
3. 對信息安全架構設計及實施有一定的經(jīng)驗;
4. 熟悉Linux、Windows等操作系統(tǒng)的安裝配置;
5. 熟悉互聯(lián)網(wǎng)應用的安裝配置;熟悉常見大數(shù)據(jù)技術棧組件的安裝配置;熟悉Visio等繪圖工具的使用;
6. 有衛(wèi)生信息化建設經(jīng)驗者優(yōu)先;有容器安裝部署經(jīng)驗者優(yōu)先。
大數(shù)據(jù)架構師崗位的工作職責4
職責:
1.能夠帶領技術人員基于hadoop平臺進行海量數(shù)據(jù)應用系統(tǒng)開發(fā);
2.負責結構化和非結構化數(shù)據(jù)的解析和清洗,海量數(shù)據(jù)查詢和報表展現(xiàn);
3.負責超大規(guī)模數(shù)據(jù)平臺的搭建、維護和優(yōu)化;
4.負責大數(shù)據(jù)采集、存儲框架研究,參與在線或離線數(shù)據(jù)存儲模型設計;
5.負責大數(shù)據(jù)平臺新技術的開發(fā)使用和性能優(yōu)化,測試。
任職資格:
1.計算機相關專業(yè)本科及以上學歷;
2. 熟悉hadoop相關各種開源項目,比如HDFS/Hive/Hbase等有實際應用。(5年以上開發(fā)經(jīng)驗者優(yōu)先);
3.兩年以上熟練編寫mapreduce代碼經(jīng)驗,有三年以上網(wǎng)絡日志分析、ETL經(jīng)驗。熟悉日志分析框架chukwa,flume,scribe者優(yōu)先;
4.兩年以上海量數(shù)據(jù)存儲的安裝部署、優(yōu)化、二次開發(fā)經(jīng)驗,對大規(guī)模數(shù)據(jù)存儲、傳輸、處理等有豐富的經(jīng)驗;
5.在數(shù)據(jù)挖掘、數(shù)據(jù)密集型處理、分布式計算、網(wǎng)格計算領域有深入理論基礎;
6.具有較強的文檔撰寫能力,較強的團隊精神和合作精神,對工作有熱情,能承受壓力。
大數(shù)據(jù)架構師崗位的工作職責5
職責
1、負責企業(yè)級大數(shù)據(jù)平臺、數(shù)據(jù)云服務的設計與開發(fā);
2、基于大數(shù)據(jù)生態(tài)圈,支持智慧交通等大數(shù)據(jù)場景應用實現(xiàn);
3、負責公司大數(shù)據(jù)產(chǎn)品的設計、封裝與落地;
4、負責學習大數(shù)據(jù)相關算法研究、實現(xiàn)與應用
任職要求
1、統(tǒng)招本科及以上學歷;2年以上智慧城市建設或交通行業(yè)信息化相關工作經(jīng)驗,3年以上大數(shù)據(jù)架構設計、開發(fā)經(jīng)驗;
2、精通大數(shù)據(jù)生態(tài)圈的技術,包括但不限于MapReduce、Spark、Hadoop、Kafka、Mongodb、Redis、Flume、Storm、Hbase、Hive,具備源碼級問題解決和集群優(yōu)化改造能力;
3、熟悉常用編程語言,包括Java、Python、Scala等;
4、具有很強的技術研發(fā)和創(chuàng)新能力,能有效把握技術發(fā)展方向,有較強的執(zhí)行能力、學習能力、溝通能力、適應能力,責任心強;