<noframes id="lx9dz"><form id="lx9dz"></form>
    <address id="lx9dz"></address>

          <em id="lx9dz"><span id="lx9dz"></span></em>
          <span id="lx9dz"></span>
          <noframes id="lx9dz"><form id="lx9dz"></form>
          <address id="lx9dz"></address>

          <noframes id="lx9dz">

            更新于 今天

            大數據開發(平頂山市)

            8000-12000元

            雇員點評標簽

            • 同事很nice
            • 工作環境好
            • 人際關系好
            • 團隊執行強
            • 氛圍活躍
            • 準時發工資
            • 管理人性化
            • 實力大公司

            職位描述

            Hadoop大數據開發
            崗位職責:
            1. 平臺開發與部署: ? 設計、開發和維護基于Hadoop生態系統的大數據平臺(如HDFS、YARN、Hive、Spark、HBase等)。 ? 開發和優化數據管道(Data Pipeline),支持數據采集、存儲、處理和分析。 ? 編寫和維護自動化腳本(如Shell、Python)以簡化部署和管理流程。 2. 平臺運維與監控: ? 負責Hadoop集群的日常運維,包括安裝、配置、升級和故障排除。 ? 監控集群性能,優化資源利用率,確保系統高可用性和穩定性。 ? 使用監控工具(如Ganglia、Nagios、Prometheus等)實時監控集群狀態,及時發現并解決問題。 3. 性能優化: ? 分析和優化Hadoop集群的性能,解決數據傾斜、資源爭用等問題。 ? 優化MapReduce、Spark等計算框架的任務執行效率。 ? 調整HDFS存儲策略,優化數據讀寫性能。 4. 安全管理: ? 配置和管理Hadoop平臺的安全機制,包括Kerberos認證、權限控制(ACL)和數據加密。 ? 定期進行安全審計,確保平臺符合公司安全政策和行業標準。 5. 故障排查與恢復: ? 快速定位和解決Hadoop集群中的故障,包括硬件故障、網絡問題和軟件異常。 ? 制定和實施災難恢復計劃,確保數據安全
            任職要求:
            1. 教育背景: ? 計算機科學、信息技術、軟件工程或相關專業本科及以上學歷。 2. 工作經驗: ? 4年以上大數據平臺開發或運維經驗,熟悉Hadoop生態系統及其核心組件(如HDFS、YARN、Hive、Spark、HBase等)。 ? 有大規模集群(100+節點)運維經驗者優先。 3. 技術技能: ? 熟練掌握Hadoop生態系統的部署、配置和優化。 ? 熟悉至少一種編程語言(如Java、Python、Scala)。 ? 熟悉Linux操作系統,具備Shell腳本編寫能力。 ? 熟悉大數據處理框架(如MapReduce、Spark、Flink)。 ? 熟悉數據倉庫工具(如Hive、Impala)和消息隊列(如Kafka)。 ? 了解容器化技術(如Docker、Kubernetes)和云計算平臺(如AWS、Azure、阿里云)者優先。 4. 軟技能: ? 具備良好的問題分析和解決能力。 ? 具備較強的溝通能力和團隊協作精神。 ? 能夠在高壓環境下工作,具備快速學習和適應新技術的能力。

            工作地點

            平頂山湛河區平高集團

            相似職位

            查看更多相似職位

            職位發布者

            李女士/HR

            昨日活躍
            立即溝通
            公司Logo華蘇科技
            南京華蘇科技有限公司(簡稱:華蘇科技)成立于2003年,是軟件產品、解決方案和技術服務的提供商,致力為產業數字化轉型注入新動能??偛课挥谥袊暇┸浖?,目前在北京、廣州、福州、沈陽、成都、西安、杭州、濟南等多地擁有分支機構。2016年加入神州信息,承載其ICT業務。深耕行業二十年,華蘇科技具備行業領先的研發能力、產品和服務。憑借對IT、網絡環境和行業運營需求的深入理解,過硬的項目管理能力和豐富的產品研發經驗,與中國移動、中國電信、中國聯通、華為、中興、愛立信、國家電網等行業龍頭企業建立了深厚的合作伙伴關系。業務覆蓋全國除港澳臺外所有省級行政區,以及海外多個國家和地區。華蘇科技始終堅持研發高投入,以通信基礎能力為底座,加速擁抱5G、人工智能、云計算、大數據、物聯網等新興技術,形成“浩”和“Howso@”系列數字化產品。以深厚的技術底蘊和敏捷的創新能力,持續驅動軟件和服務產品的智能化迭代,深度參與產業數字化發展進程,為通信、電力、政企、汽車、地產、互聯網等行業獻力賦能。
            公司主頁
            天天综合色天天综合网