1.負(fù)責(zé)AI模型訓(xùn)練數(shù)據(jù)的處理，協(xié)助支持公司重點(diǎn)項(xiàng)目的數(shù)據(jù)管理；
2.根據(jù)AI模型及項(xiàng)目相關(guān)數(shù)據(jù)需求，負(fù)責(zé)數(shù)據(jù)調(diào)研數(shù)據(jù)需求規(guī)劃、數(shù)據(jù)處理工作，協(xié)助數(shù)據(jù)標(biāo)準(zhǔn)建設(shè)數(shù)據(jù)工作管理和執(zhí)行；
3.負(fù)責(zé)對(duì)海量多模態(tài)數(shù)據(jù)進(jìn)行采集、清洗、整合和標(biāo)注，篩選和質(zhì)量檢查，使其滿足訓(xùn)練AI模型的要求;
4.負(fù)責(zé)對(duì)圖像數(shù)據(jù)的預(yù)處理、標(biāo)注，進(jìn)行人工預(yù)標(biāo)注與半自動(dòng)標(biāo)注等相關(guān)腳本的編寫，結(jié)合第三方多模態(tài)大模型、提示詞等對(duì)已有訓(xùn)練數(shù)據(jù)集進(jìn)行泛化擴(kuò)充5.綜合使用各種數(shù)據(jù)采集工具，實(shí)現(xiàn)對(duì)文本、圖片視頻等多模態(tài)數(shù)據(jù)的抓取、提取、采集；
6.與數(shù)據(jù)標(biāo)注團(tuán)隊(duì)進(jìn)行合作，對(duì)接、監(jiān)督外包團(tuán)隊(duì)的數(shù)據(jù)采集、處理及標(biāo)注質(zhì)量；
7.參與模型訓(xùn)練效果評(píng)估，評(píng)測(cè)與分析模型效果，對(duì)訓(xùn)練數(shù)據(jù)進(jìn)行歸因分析，并對(duì)訓(xùn)練數(shù)據(jù)進(jìn)行改進(jìn)，持續(xù)優(yōu)化數(shù)據(jù)采集與標(biāo)注方案，支撐訓(xùn)練效果迭代優(yōu)化。
崗位要求:
1.本科及以上學(xué)歷，計(jì)算機(jī)、自動(dòng)化、人工智能、軟件等相關(guān)專業(yè)，有數(shù)據(jù)采集、清洗和AI相關(guān)工作經(jīng)驗(yàn)優(yōu)先；
2.精通Python、爬蟲抓取工具等工具和腳本組件了解市面多模態(tài)大模型應(yīng)用優(yōu)先；
3.熟悉Linux系統(tǒng)及開發(fā)環(huán)境，能熟練編寫使用腳本如shell、python等；
4.熟悉數(shù)據(jù)采集、清洗與標(biāo)注方法和工具，尤其熟練圖像數(shù)據(jù)的采集和標(biāo)注；
5.熟練掌握網(wǎng)頁內(nèi)容提取、計(jì)算機(jī)視覺、瀏覽器自動(dòng)化和仿真等Python庫者優(yōu)先；
6.具有有AI模型訓(xùn)練數(shù)據(jù)運(yùn)營(yíng)或相關(guān)領(lǐng)域經(jīng)驗(yàn)者優(yōu)先；
7.對(duì)數(shù)據(jù)敏感，具備良好的邏輯思維能力，優(yōu)秀的溝通、協(xié)調(diào)能力，能夠和多部門人員合作，具有團(tuán)隊(duì)精神以及優(yōu)秀的問題解決能力。