<noframes id="lx9dz"><form id="lx9dz"></form>
    <address id="lx9dz"></address>
       

          <em id="lx9dz"><span id="lx9dz"></span></em>
          
<span id="lx9dz"></span>
          <noframes id="lx9dz"><form id="lx9dz"></form>
          <address id="lx9dz"></address>
          <noframes id="lx9dz">
            
    
            400-885-9898
            更新于 今天
            智聯APPAPP
            舉報
            大數據開發（平頂山市）
            8000-12000元
            雇員點評標簽
            • 同事很nice
            • 工作環境好
            • 人際關系好
            • 團隊執行強
            • 氛圍活躍
            • 準時發工資
            • 管理人性化
            • 實力大公司
            職位描述
            Hadoop大數據開發
             崗位職責：
            1. 平臺開發與部署：
? 設計、開發和維護基于Hadoop生態系統的大數據平臺（如HDFS、YARN、Hive、Spark、HBase等）。
? 開發和優化數據管道（Data Pipeline），支持數據采集、存儲、處理和分析。
? 編寫和維護自動化腳本（如Shell、Python）以簡化部署和管理流程。
2. 平臺運維與監控：
? 負責Hadoop集群的日常運維，包括安裝、配置、升級和故障排除。
? 監控集群性能，優化資源利用率，確保系統高可用性和穩定性。
? 使用監控工具（如Ganglia、Nagios、Prometheus等）實時監控集群狀態，及時發現并解決問題。
3. 性能優化：
? 分析和優化Hadoop集群的性能，解決數據傾斜、資源爭用等問題。
? 優化MapReduce、Spark等計算框架的任務執行效率。
? 調整HDFS存儲策略，優化數據讀寫性能。
4. 安全管理：
? 配置和管理Hadoop平臺的安全機制，包括Kerberos認證、權限控制（ACL）和數據加密。
? 定期進行安全審計，確保平臺符合公司安全政策和行業標準。
5. 故障排查與恢復：
? 快速定位和解決Hadoop集群中的故障，包括硬件故障、網絡問題和軟件異常。
? 制定和實施災難恢復計劃，確保數據安全
             任職要求：
             1. 教育背景： 
? 計算機科學、信息技術、軟件工程或相關專業本科及以上學歷。 
2. 工作經驗： 
? 4年以上大數據平臺開發或運維經驗，熟悉Hadoop生態系統及其核心組件（如HDFS、YARN、Hive、Spark、HBase等）。 
? 有大規模集群（100+節點）運維經驗者優先。 
3. 技術技能： 
? 熟練掌握Hadoop生態系統的部署、配置和優化。 
? 熟悉至少一種編程語言（如Java、Python、Scala）。 
? 熟悉Linux操作系統，具備Shell腳本編寫能力。 
? 熟悉大數據處理框架（如MapReduce、Spark、Flink）。 
? 熟悉數據倉庫工具（如Hive、Impala）和消息隊列（如Kafka）。 
? 了解容器化技術（如Docker、Kubernetes）和云計算平臺（如AWS、Azure、阿里云）者優先。 
4. 軟技能： 
? 具備良好的問題分析和解決能力。 
? 具備較強的溝通能力和團隊協作精神。 
? 能夠在高壓環境下工作，具備快速學習和適應新技術的能力。 

            工作地點
            平頂山湛河區平高集團
            相似職位
            查看更多相似職位
             
             
            職位發布者
            李女士/HR
            昨日活躍
            立即溝通 
            公司Logo華蘇科技
            南京華蘇科技有限公司（簡稱：華蘇科技）成立于2003年，是軟件產品、解決方案和技術服務的提供商，致力為產業數字化轉型注入新動能?？偛课挥谥袊暇┸浖?，目前在北京、廣州、福州、沈陽、成都、西安、杭州、濟南等多地擁有分支機構。2016年加入神州信息，承載其ICT業務。深耕行業二十年，華蘇科技具備行業領先的研發能力、產品和服務。憑借對IT、網絡環境和行業運營需求的深入理解，過硬的項目管理能力和豐富的產品研發經驗，與中國移動、中國電信、中國聯通、華為、中興、愛立信、國家電網等行業龍頭企業建立了深厚的合作伙伴關系。業務覆蓋全國除港澳臺外所有省級行政區，以及海外多個國家和地區。華蘇科技始終堅持研發高投入，以通信基礎能力為底座，加速擁抱5G、人工智能、云計算、大數據、物聯網等新興技術，形成“浩”和“Howso@”系列數字化產品。以深厚的技術底蘊和敏捷的創新能力，持續驅動軟件和服務產品的智能化迭代，深度參與產業數字化發展進程，為通信、電力、政企、汽車、地產、互聯網等行業獻力賦能。
            公司主頁
            
    
  
  
  
  
  
    
    
    
    
    
    
    
    

    
    
    
    
    
    
    
    
    
    
  
  
  
  
  
  
  
  
天天综合色天天综合网