大資料架構師的崗位職責

　　大資料架構師負責大資料基礎平臺、海量資料儲存處理分散式平臺、資料分析系統架構設計和研發。下面是小編為您精心整理的。

　　1

　　職責：

　　1、負責公司大資料產品的架構設計，包含資料收集、資料儲存、資料應用，並完成相關架構設計文件的撰寫;

　　2、參與規劃從資料來源到資料應用的整體流程，並參與相關產品的決策;

　　3、負責解決核心技術問題，對技術方案進行決策;

　　4、負責大資料研發團隊建設、人才梯隊培養和技術團隊管理;

　　5、積極瞭解業界發展，研究與跟蹤大資料新技術發展方向。

　　任職要求：

　　1、精通GoldenGate For BigData相關理論，具備大型資料利用的生產實戰經驗;

　　2、精通資料驅動的理論，設計並生產上線相關資料驅動的產品;

　　3、精通常用訊息中介軟體的使用，例如kafka/RocketMQ/Apache Pulsar，有解讀相關原始碼者優先;

　　4、掌握hadoop、spark生態體系相關產品的使用，掌握MapReduce程式設計或Spark程式設計;

　　5、瞭解傳統資料倉庫理論及相關ETL工具，例如kettle/datastage;

　　6、熟悉Oracle、Mongodb、Mysql資料庫的使用;

　　7、紮實的Java語言基礎，熟悉Java開發工具和除錯工具的使用;

　　8、良好的團隊協作精神，有能力對團隊在軟體設計、實現和測試方面進行指導;

　　9、良好的邏輯分析能力和溝通能力，執行力強、對待工作認真嚴謹、責任心強、具備出色的學習能力和團隊合作精神，有一定的推動能力;

　　10、電腦科學、資訊科技或相關領域本科以上學歷，具有5年以上資料平臺專案開發經驗，3年以上的架構設計經驗，具有大資料平臺應用大型專案架構設計經驗優先;

　　2

　　職責：

　　1、搭建基於Hadoop/Spark的資料探勘體系和大資料分析系統架構;

　　2、研究大資料領域前沿資料探勘技術，並引入相應技術在資料中心的使用;

　　3、進行大資料系統框架設計、模型演算法開發;

　　4、負責大型資料探勘專案方案制定、專案實施落地及優化等 ;

　　5、開展資料爬取、聚類分析、輿情分析、魚骨圖分析、定價策略等領域資料探勘工作;

　　任職資格：

　　1、本科以上學歷***持有學士學位******985，211優先***，計算機相關專業，五年工作經驗;

　　2、二年以上資料探勘專案經驗，完整參與過資料探勘大資料平臺的架構開發過程，具備網際網路行業背景優先;

　　3、精通分散式計算框架***hadoop、spark、Storm等***及相關經驗，熟練掌握Hive/SQL，Python，熟悉Python、R相關數值科學計算庫***NumPy,SciPy等***;

　　4、瞭解傳統的BI/DW 理論，能結合傳統BI***實踐設計大資料平臺;

　　5、熟悉常用機器學習演算法***如分類、迴歸、聚類、關聯規則等***及其原理，具備應用場景經驗，如使用者畫像、商品關聯度分析、輿情分析;

　　6、熟悉主資料、元資料、資料質量、和資料建模等資料治理相關的體系和方法;

　　7、具備較強的邏輯思維能力、資料敏感度，擅於利用資料發現問題及解決問題;

　　3

　　職責：

　　1、負責大資料開發團隊建設;

　　2、負責行業大資料產品架構設計與研發;

　　3、負責帶領團隊進行行業大資料產品關鍵技術攻關。

　　任職要求：

　　1、有三年以上大資料應用、開發經驗;具備海量資料加工處理***ETL***相關經驗，對資料探勘及機器學習有較為深刻的理解;

　　2、熟悉Hadoop相關技術，對HDFS、MapReduce、Hive、HBase有一定的使用和開發經驗;

　　3、熟悉Linux，熟練使用Shell或Python，進行指令碼編寫;

　　4、對資料結構和資料統計分析演算法有較為深刻理解;

　　5、掌握至少一種主流關係資料庫開發技術：Oracle、SQL Server、MySQL等;

　　6、掌握實時流計算技術，有Spark、Storm開發經驗者優先;

　　7、需要具備2年以上研發團隊管理經驗。

　　4

　　職責:

　　1***負責公司軟體產品整體架構的設計和關鍵功能實現

　　2***負責公司架構長期看護以及優化;

　　3***負責軟體部門各模組間的協調配合;

　　4***提高鞏固軟體程式碼質量;

　　5***負責大資料流式框架的設計、優化及部署;

　　6***規劃研發部門員工的技術發展路線並提供必要的幫助和指導

　　任職資格:

　　1***本科及以上學歷，計算機相關專業，5年以上工作經驗;

　　2***頻繁換工作，比如一年一個公司，請繞路;

　　3***3年以上產品架構經驗，主導過產品的成功上線;

　　4***對底層裝置通訊協議，B/S系統，手機APP開發等都有一定的瞭解;

　　5***對各種主流語言C#\Java\Pathon有一定的瞭解

　　5***精通各種大資料架構，並深入研究過其中一種，有storm\kafka等流式實時處理經驗為佳

　　6***能夠承擔較強的工作壓力，有良好的自我驅動能力和責任感;

　　7***具備優秀的邏輯思維能力、表達能力、溝通協調能力。

　　5

　　職責：

　　1.負責公司大資料底層框架的整體架構設計，結合公司實際業務情況進行技術選型及大資料戰略規劃;

　　2.負責統一資料平臺專案的整體評估、設計、架構及關鍵模組的開發，不斷提升系統的穩定性和效率;

　　3.負責架構優化及系統關鍵模組的設計開發，協助團隊解決開發過程中的技術難題;

　　4.建立良好的公司內外的業界技術影響力;有效輔導團隊，提升資料研發能力;

　　任職要求：

　　1.從事大資料專案相關開發和設計2年以上經驗;有作為技術負責人系統化解決問題的成功案例;有海量資料實踐經驗優先;

　　2.擁有一定的演算法和資料結構基礎;有很強的資料設計抽象能力，善於從複雜的資料問題中找到關鍵路徑;

　　3.熟悉目前正在發展的大資料分散式平臺前沿技術的應用;包括但不僅僅限於：hadoop、storm、spark、等;

　　4. 良好的邏輯思維能力，良好的業務解讀能力，懂電力或通訊業務優先;

　　5.具有鑽研精神，樂於接受挑戰;