1、 負責多源數據采集（業務系統 / 互聯網 / 傳感器 / 合作伙伴數據） 2、負責對結構化數據（MySQL/Oracle）、非結構化數（HBase/MongoDB）、海量數據（HDFS ）做分布式存儲。 3、實施數據清洗（去重 / 補全 / 糾錯）、格式轉換（類型 / 編碼統一），保障數據質量。 4、運用數據挖掘算法（K-Means / 決策樹 / Apriori 等）分析業務模式，輸出可視化報告， 5、搭建大數據平臺（Hadoop/Spark 生態），設計實時 / 離線處理架構（如 Spark Streaming） 6、監控平臺性能，優化算法、參數及查詢策略（如 Hadoop 任務調優 / Hive 索引優化） 任職要求： 1. 工作經驗5年以上，其中至少有2年完成參與過的大數據的工作經驗。 2. 熟悉至少一種主流編程語言（如 Python/Java/Scala），有扎實的編碼能力。 3. 熟練掌握數據存儲與管理或者數據處理與分析 4. 具備極強的團隊協作能力和解決問題的能力。