您的位置:首頁>科技>正文

高級數據工程師

崗位職責:

1、負責資料倉庫的架構/流程/系統框架, 撰寫相關規格文檔;

2、負責公司大資料平臺的設計與開發工作:利用主流大資料技術框架搭建公司的大資料平臺, 利用積累的資料進行使用者畫像, 使用者行為分析, 消費金融領域關鍵資料指標挖掘;

3、負責大資料分析需求設計和開發, 承擔資料抽取、清洗、轉化、報表呈現等資料處理程式開發;

4、優化ETL工具的設計、開發及測試;

5、參與資料倉庫報表需求收集與分析, 完成使用者自訂報表的系統設計、開發及測試工作;

6、整體考慮ETL、存儲、調度等問題, 解決資料倉庫調優,

異常處理等;

7、資料倉庫日常運維、流程作業監控、資料品質、資料安全監控等;

8、完成上級領導交辦的其它任務。

任職要求:

1、電腦, 軟體工程或通訊類專業畢業, 本科及以上學位;

2、三年左右相關資料倉庫開發和管理經驗;二年大資料系統開發管理經驗, 互聯網大資料、金融大資料處理工作經驗, 大資料採擷、分析、建模經驗;

3、精通ETL開發實施流程和原理, 有資料倉庫的ETL開發和ETL流程優化經驗;

4、熟悉Java、Python, 深入理解Map Reduce模型, 有Hadoop, hive, Spark, Storm等大資料存儲與運算平臺實踐經驗;

5、精通至少一種資料庫系統DB2或Oracle, 精通SQL語言;

6、具備Linux或Unix下的shell程式設計能力;

7、具備良好的溝通力、表達力、團隊協作力以及責任心;

8、熟悉金融或者企業財務相關的業務, 有金融行業經驗者優先。

Next Article
喜欢就按个赞吧!!!
点击关闭提示