主要職責:
?1.負責大數據平臺架構的設計和構建;
?2.負責大數據平臺的優化,解決海量數據面臨的挑戰;
?3.帶領大數據技術團隊實現各項數據接入與處理、數據倉庫建設、數據分析與挖掘及數據展示;
4.負責大數據平臺核心功能的開發。
任職要求:
1.必須要3年以上大數據架構經驗,豐富的數據倉庫、數據挖掘、機器學習項目經驗 ;
2.必須要基于Hadoop的大數據體系有深入認識,具備相關產品(Hadoop、Hive、HBase、Spark、Storm、Flume、sqoop、Kafka、ES等)項目應用研發經驗;
3.必須要深刻理解大數據處理(流計算,分布式計算,分布式文件系統,分布式存儲等)相關技術和實現方法 ;
4.必須要精通海量存儲、計算系統的架構和原理,具備豐富的大規模并發處理系統的研發和架構經驗;