崗位職責:
1、 負責大數據平臺、數據產品的功能模塊的詳細設計、實現、自測和線上維護
2、 負責技術難題攻關,持續提升核心系統性能,保證系統的安全、穩定、快速運行
3、 負責基于行業業務洞察,進行數據整合、框架設計、數據模型分析研究、分布式計算分析平臺設計、數據(文件)生命周期管理架構設計;
4、負責數據分析平臺的建設,包括需求分析,數據整理,數據倉庫設計,以及報表和數據可視化開發;
5、負責各類數據模型的設計工作;
6、負責與外圍各業務數據對接,利用ETL工具將數據導入數據倉庫;
7、根據需求將數據在非關系型和關系型數據庫之間轉化;
8、開發各種Hadoop大數據自動化運維與監控工具。
9、獨立完成日常運營數據的基本分析
崗位要求:
1、本科以上學歷,應用數學、計算機等專業,4年以上數據算法工作經驗;
2、熟悉Hadoop、MapReduce、Hive、Spark等開發技術及平臺的部署、搭建;
3、把Spark等大數據組件應用于自然源處理、圖像識別、文本挖掘;
4、具備一種或多種開發語言(如Python 、java、R等)的程序和算法開發能力,掌握常用數據結構和算法;
5、熟悉Oracle及Hive的使用、SQL/HQL開發及性能優化;
6、有政務大數據平臺、金融風控模型、客戶畫像等開發經驗者優先;
7、較強的邏輯思考能力和學習能力;
8、良好的編碼習慣、團隊合作精神、溝通能力;