崗位職責(zé)：
●負(fù)責(zé)各類大語言模型（LLM）通用能力的一線評(píng)測(cè)工作，包括但不限于文本生成、邏輯推理、知識(shí)問答、多輪對(duì)話、代碼生成等核心場(chǎng)景的效果驗(yàn)證。
●按照評(píng)測(cè)標(biāo)準(zhǔn)和流程，對(duì)模型輸出結(jié)果進(jìn)行客觀、準(zhǔn)確的打分與標(biāo)注，記錄評(píng)測(cè)過程中的異常情況和模型不足，形成詳細(xì)的評(píng)測(cè)日志。
●參與構(gòu)建自動(dòng)評(píng)估集，完成題目構(gòu)建、考點(diǎn)撰寫、打分邏輯等任務(wù)。
●參與評(píng)測(cè)數(shù)據(jù)集的整理、清洗與標(biāo)注工作，協(xié)助優(yōu)化評(píng)測(cè)樣本的覆蓋度和代表性，提升評(píng)測(cè)數(shù)據(jù)的質(zhì)量。
●配合團(tuán)隊(duì)完成評(píng)測(cè)任務(wù)的推進(jìn)，及時(shí)反饋評(píng)測(cè)過程中遇到的問題（如評(píng)測(cè)標(biāo)準(zhǔn)模糊、樣本異常等），協(xié)助優(yōu)化評(píng)測(cè)方案和流程。
崗位要求：
●本科及以上學(xué)歷，專業(yè)不限。
●具備良好的文字理解與表達(dá)能力，邏輯思維清晰，具備較好的同理心和用戶視角。
●工作認(rèn)真細(xì)致、責(zé)任心強(qiáng)，具備較強(qiáng)的執(zhí)行力和團(tuán)隊(duì)協(xié)作精神，能嚴(yán)格遵守評(píng)測(cè)標(biāo)準(zhǔn)和流程。
●具備基本的計(jì)算機(jī)操作能力，能熟練使用辦公軟件（如Excel、Word），有數(shù)據(jù)標(biāo)注、模型評(píng)測(cè)相關(guān)經(jīng)驗(yàn)者優(yōu)先。
●對(duì)人工智能、大語言模型領(lǐng)域有一定興趣，深度使用主流AI產(chǎn)品，并有自己的認(rèn)知和見解；了解大模型的基本原理和技術(shù)框架。