崗位職責： 1、根據業務目標制定評測方案、建設評估數據集，并能夠站在用戶視角和模型視角構建理想態答案并拆解考察點； 2、對模型回復效果或搜索效果進行定性和定量的評估分析，能夠從全鏈路中進行問題拆解和分析，幫助產品研發側定位問題并推動優化； 3、清洗、整理文本數據，參與人工評估與自動評估、評估與標注數據的交叉驗證，保證單位時間內的產出和質量，并嘗試利用平臺工具、PE工程不斷提高工作效率和效果。 任職要求： 1、本科及以上學歷，有相關評測經驗和AI產品經驗優先； 2、在較多垂直領域有很好的涉獵，能夠剖析領域相關問題者優先； 3、有較好的搜索習慣，或大模型產品使用習慣，善于站在用戶視角反饋體驗問題，善于結合多角度反饋問題，有產品分析經驗優先； 4、對數據和文字敏感，文字理解及歸納能力強且擅長數據分析者優先； 5、做事細心，較強的溝通協作能力、執行力、復盤思考以及抗壓能力。