崗位職責:
1. 理解大數據項目相關的需求,參與平臺軟件產品需求分析、設計、開發和維護工作。
2. 負責數據的采集、預處理、實時分析、離線分析、數據優化等開發工作。
3. 參與產品開發重點、難點的技術攻關。
4. 負責軟件開發相關文檔的撰寫和維護。
任職要求:
1. 具備扎實的計算機操作系統和網絡基礎知識,了解分布式系統的設計原理和實現方法,了解大數據生態的關鍵技術;
2. 熟悉Hadoop、Hive、HBase、Spark、Flink等大數據處理平臺其中一種或多種;
3. 熟悉MySQL、PostgreSQL等關系型數據庫,了解StarRocks、Clickhouse、HBase等KV數據庫,精通SQL語言,能夠進行SQL調優;
4. 熟練掌握Java/C++編程語言,具備扎實的數據結構基礎知識,有良好的編程習慣;
5. 有工具平臺產品開發經驗者優先,包括數據集成、開發工具、調度工具、數據管理、維護監控等產品研發經驗;
6. 有較強的學習能力,有良好的團隊合作精神,善于溝通和交流。