崗位職責? 1. 負責公司核心爬蟲系統的設計與開發，運用 Golang 語言實現高效、穩定的網頁數據抓取功能，滿足業務對海量數據采集的需求。? 2. 對現有爬蟲系統進行持續優化和維護，通過性能調優、架構升級等手段，提升系統的抓取效率、穩定性和并發處理能力，確保系統在高負載下穩定運行。? 3. 深入研究反爬蟲機制，針對性地制定有效的爬蟲策略，突破網站的限制，保障數據采集工作的順利進行。同時，遵循相關法律法規和道德規范，確保數據采集的合法性和合規性。? 4. 與數據處理、算法、產品等團隊緊密協作，深入理解業務需求，根據不同的業務場景定制化開發爬蟲解決方案，為數據驅動的業務決策提供有力支持。? 5. 關注行業最新技術動態，積極引入新技術、新方法，推動爬蟲技術在公司的創新應用，提升公司在數據采集領域的技術競爭力。? 任職要求? 1. 本科及以上學歷，具備扎實的計算機基礎理論知識，包括數據結構、算法、操作系統等。? 2. 擁有 3 年以上 Golang 開發經驗，熟練掌握 Golang 語言特性，能夠熟練運用 Golang 進行高性能、高并發程序開發，熟悉 Golang 標準庫及常用第三方庫。? 3. 有豐富的爬蟲系統開發經驗，熟悉常見的爬蟲框架和工具，如 Colly、Goquery、Chromedp 等，對爬蟲原理、網頁解析、HTTP 協議有深入理解，能夠獨立完成爬蟲項目的全流程開發。? 4. 具備較強的問題解決能力和邏輯思維能力，能夠快速定位和解決爬蟲開發過程中遇到的各種問題，如網