崗位職責:
1 參與/負責資料倉庫ETL(資料抽取、載入、清洗、轉換)處理任務的設計和開發工作, 支援日常資料批次處理、近即時處理的要求, 對新的開發需求和異常情況提供技術支援
2 參與/負責資料倉庫ETL調度程式的設計和開發工作, 支援對任務的監控和配置管理
3 參與/配合資料倉庫部分主題的資料建模工作, 並完成相關的ETL開發工作
4 參與/支援相關的前端BI業務分析的開發和實施工作
5 參與資料管控平臺的開發和實施工作
任職資格:
1本科以上學歷, 電腦或大資料相關專業, 五年以上工作經驗
2 三年以上企業資料倉庫相關工作和項目實施經驗,
3有資料管控(包括但不限於主資料管理、中繼資料管理、資料品質管理、資料安全管理等)專案或平臺開發、實施經驗者優先考慮
4熟悉資料倉庫原理和開發實施流程, 熟悉OLTP和OLAP系統設計原理, 熟悉維度模型和OLAP實現方式, 熟悉Cube原理和實現機制, 熟悉OLAP多維分析如鑽取、切片、切塊及旋轉等, 有資料平臺指標庫或標籤庫開發經驗者優先考慮
5 豐富的ETL設計和開發經驗, 精通Informatica、DataStage、SSIS、Kettle等ETL開發工具, 熟悉Control-M, Taskctl, Teradata Automation等ETL調度工具或自研發工具。
6熟悉Linux作業系統,
7精通SQL Server、Oracle、DB2、MySQL、PostgreSQL等關係型數據庫的一種或多種, 熟悉PL/SQL, 有一定的資料建模能力
8熟悉列式資料庫和MPP架構及原理, 熟悉Teradata、Vertica、Aster等MPP資料庫並有相關實施經驗者優先考慮
9熟悉分散式資料存儲和分散式資料處理機制, 熟悉Hadoop(包括但不限於HDFS、HBase、Hive、MapReduce、Yarn、Zookeeper等)、Spark(包括但不限於Spark SQL、Spark Streaming和MLlib等)框架和實現機制, 有相關系統設計和開發經驗者優先考慮
10熟悉SAS, SPSS工具和R語言並有相關資料分析和挖掘專案開發經驗者優先考慮
11 熟悉OLAP分析工具和前端視覺化工具如SSAS/SSRS、Oracle Essbase、Tableau、Qlikview、SAP BO等優先考慮
12學習能力和溝通能力強, 團隊合作意識佳。 可以獨立完成開發工作, 樂於挑戰困難。