崗位職責:
1、負責資料倉庫的架構/流程/系統框架, 撰寫相關規格文檔;
2、負責公司大資料平臺的設計與開發工作:利用主流大資料技術框架搭建公司的大資料平臺, 利用積累的資料進行使用者畫像, 使用者行為分析, 消費金融領域關鍵資料指標挖掘;
3、負責大資料分析需求設計和開發, 承擔資料抽取、清洗、轉化、報表呈現等資料處理程式開發;
4、優化ETL工具的設計、開發及測試;
5、參與資料倉庫報表需求收集與分析, 完成使用者自訂報表的系統設計、開發及測試工作;
6、整體考慮ETL、存儲、調度等問題, 解決資料倉庫調優,
7、資料倉庫日常運維、流程作業監控、資料品質、資料安全監控等;
8、完成上級領導交辦的其它任務。
任職要求:
1、電腦, 軟體工程或通訊類專業畢業, 本科及以上學位;
2、三年左右相關資料倉庫開發和管理經驗;二年大資料系統開發管理經驗, 互聯網大資料、金融大資料處理工作經驗, 大資料採擷、分析、建模經驗;
3、精通ETL開發實施流程和原理, 有資料倉庫的ETL開發和ETL流程優化經驗;
4、熟悉Java、Python, 深入理解Map Reduce模型, 有Hadoop, hive, Spark, Storm等大資料存儲與運算平臺實踐經驗;
5、精通至少一種資料庫系統DB2或Oracle, 精通SQL語言;
6、具備Linux或Unix下的shell程式設計能力;
7、具備良好的溝通力、表達力、團隊協作力以及責任心;
8、熟悉金融或者企業財務相關的業務, 有金融行業經驗者優先。