大資料架構師崗位的具體職責表述

　　大資料架構師需要負責指導開發人員完成資料模型規劃建設、分析模型構建及分析呈現。以下是小編整理的。

　　1

　　職責：

　　1.負責公司新業務方向平臺大資料基礎架構的搭建及後期資料處理體系的升級和優化，不斷提升系統的穩定性和效率。為公司未來方向性產品提供大資料底層平臺的支援和保證。

　　2.負責制定大資料平臺呼叫約束和規範;

　　3.負責大資料方向技術難題的解決，以及程式碼質量的把控;

　　4.作為大資料開發團隊的leader,負責大資料系統平臺開發團隊建設與人才梯隊培養，分享技術經驗，撰寫相關技術文件指導和培訓工程師。

　　任職要求：

　　1.熱衷於大資料技術，並能平衡大資料效能、穩定性、擴充套件性多重要素進行設計和優化;

　　2.熟悉伺服器基本知識，能夠評估系統硬體效能瓶頸;

　　3.掌握Linux作業系統的配置，管理及優化，能夠獨立排查及解決作業系統層的各類問題，並能提供解決問題的理論依據;

　　4.精通Java伺服器程式設計，熟悉JVM原理，對資料結構和演算法設計有較為深刻的理解;

　　5.精通elasticsearch、Redis、hadoop、Kafka、Zookeeper、Yarn、Hbase、Spark底層架構，熟悉原理、原始碼、叢集部署，包括引數優化、Bug修復，貢獻過程式碼或提交過bug者優先

　　6.具備資料中心資源管理、監控、排程等系統研發經驗者優先，具備分散式系統研發經驗者優先;

　　7.具有應用大資料技術處理的專案開發、維護超過兩年的經驗者優先;

　　8.具有良好的文件編寫能力，可進行方案設計、架構設計。

　　2

　　職責：

　　1.負責過多個大資料專案的架構;

　　2.精通Hadoop、Spark, HBase等主流的大資料平臺、精通各元件優化設計原理;

　　3.精通大資料實時流式處理的設計和應用;

　　3.熟悉大資料平臺調優，具備大資料生產平臺調優經驗;

　　4.金融行業，運營商行業大資料架構經驗更優;

　　5.研究大資料技術的最新發展，並引入到公司技術架構;

　　6.指導大資料工程師的日常工作，並培養技術骨幹。

　　任職資格：

　　1.計算機相關專業本科或以上學歷;

　　2.具有5年以上大資料相關開發經驗;

　　3.具有2年以上帶團隊經驗

　　4.對Hadoop/Hive/Spark/HBase/ES等等大資料常用技術有深刻理解，能夠帶領團隊進行技術攻堅，完成中介軟體的實施、改造、調優;

　　5.精通海量資料和實時資料的分析處理，能對線上的資料處理效能問題做調優;

　　6.精通資料倉庫以及維度建模原理，有大型資料倉庫建設經驗;

　　7.精通關係型資料庫和NoSQL資料庫的使用，熟悉相關理論;

　　8.溝通順暢，重點突出，高效。

　　3

　　職責：

　　負責公司大資料產品架構的設計與實現;

　　配合大資料產品經理完成產品的快速研發與交付;

　　負責大資料產品架構的持續優化設計;

　　負責大資料產品核心元件設計;

　　負責大資料相關資料架構規劃、資料建模、資料庫設計以及大資料產品研發工作;

　　為應用開發團隊提供技術支撐。

　　及時向上級反饋工作進度、遇到的問題或者對現有工作的建議等;

　　完成上級領導交辦的其它各項工作。

　　任職資格：

　　985/211本科及以上學歷，3年以上的大資料開發經驗、

　　2年以上大資料架構設計經驗;

　　豐富的JAVA研發經驗，精通JAVA，熟悉Python Scala等程式語言;具備深厚的分散式系統或資料庫系統的理論基礎，熟悉分散式計算系統的工作機制，具有分散式檔案系統、分散式資料庫系統、叢集儲存系統等架構設計經驗;

　　熟悉整個大資料的完整處理流程***資料的採集、清洗、預處理、儲存、分析挖掘、機器學習和資料視覺化***;

　　精通各種大資料相關技術體系：Hadoop、Spark、Storm、ElasticSearch、Kafka;

　　有資料探勘、機器學習相關應用或研究背景;

　　溝通能力較好，積極主動意識較強，責任心較強。

　　具備優秀的邏輯思維能力，對解決挑戰性問題充滿熱情，善於解決問題和分析問題;

　　良好的團隊合作精神，較強的溝通能力和學習能力 ;

　　4

　　職責：

　　1.負責企業資料中心建設，設計資料邏輯模型和物理模型，並完成相關開發

　　2.梳理公司各業務線常用的指標和維度，統一指標定義口徑

　　3.根據資料應用開發和資料分析需求，設計資料倉庫資訊層模型，提高資料開發的效率

　　4.負責資料模型的運營和優化，及時響應業務邏輯變更，保證模型的資料質量和穩定性

　　5.負責公司資料標籤體系的建設，並推動標籤體系在實際業務場景中落地

　　崗位要求：

　　1.5年以上DW/BI資料架構設計、模型設計和效能調優等相關經驗

　　2.有較強的資料分析能力，精通資料倉庫架構，熟悉Erwin或PowerDesigner建模工具

　　3.精通一種主流關係資料庫***如mysql等***，熟悉Hive開發

　　4.有電商業務經驗，元資料管理，資料質量管理或標籤體系搭建經驗者優先

　　5.優秀的協調溝通與團隊協作能力，極強的責任心，能承受一定的工作壓力，認同企業文化和團隊價值

　　5

　　職責：

　　1、大資料平臺的規劃、設計、實施，並優化資料庫;

　　2、對資料庫進行管理，負責資料庫應用系統的運營及監控;

　　3、對資料庫效能分析與調優，排錯，保證資料正確率;

　　4、配合其他部門進行的資料處理、查詢，統計和分析工作;

　　5、完成公司下達的專案開發任務。

　　任職要求：

　　1、計算機及相關專業本科以上學歷，5年以上軟體開發從業經驗，其中包括至少2年以上的大資料開發工作經驗;

　　2、熟悉hive,hadoop/spark,hbase等大資料相關技術架構，有管理或優化大型分散式叢集經驗;

　　3、熟悉linux基本命令，精通SQL指令碼的編寫，有豐富的資料庫管理、運維調優經驗;

　　4、熟悉C++、Java、C#等開發語言;

　　5、有網際網路電商行業大資料分析處理和大型資料倉庫的設計和實施經驗;

　　6、有分散式系統分析及架構設計經驗和大型計算叢集的基礎設施開發維護經驗;

　　7、快速處理系統突發事件的能力，較強的學習和創新能力;

　　8、良好的溝通能力和團隊合作精神。