(網(wǎng)經(jīng)社訊)11月7日，北京第二外國(guó)語學(xué)院數(shù)字文旅研究中心在杭州主辦的研討會(huì)上，正式發(fā)布了國(guó)內(nèi)首份系統(tǒng)性的《AI旅行助手評(píng)價(jià)體系》。該體系旨在為快速成長(zhǎng)但標(biāo)準(zhǔn)尚不完善的AI旅行規(guī)劃領(lǐng)域建立科學(xué)的評(píng)測(cè)基準(zhǔn)，以引導(dǎo)行業(yè)向高質(zhì)量和標(biāo)準(zhǔn)化方向發(fā)展。
當(dāng)前，隨著生成式人工智能技術(shù)的發(fā)展，AI旅行助手市場(chǎng)已形成包括在線旅游平臺(tái)（OTA）代表的“交易閉環(huán)型”助手、泛生活類平臺(tái)代表的“內(nèi)容生態(tài)型”助手、基于通用大模型的“信息生成型”助手以及依托通用智能體平臺(tái)的“服務(wù)聚合型”助手四大類產(chǎn)品競(jìng)相發(fā)展的格局。然而，行業(yè)在“何為智能”及“如何評(píng)價(jià)”等核心問題上缺乏共識(shí)，導(dǎo)致產(chǎn)品優(yōu)化方向不明確，用戶體驗(yàn)差異較大。
據(jù)網(wǎng)經(jīng)社數(shù)字生活臺(tái)（DL.100EC.CN）了解，針對(duì)這一行業(yè)痛點(diǎn)，北二外數(shù)字文旅研究中心構(gòu)建了一套包含“可用性”、“易用性”、“個(gè)性化”、“安全性”和“流暢性”五個(gè)維度的AI旅行助手綜合評(píng)價(jià)體系。該體系共細(xì)化為24項(xiàng)可量化的三級(jí)指標(biāo)，全面覆蓋從用戶需求理解、行程規(guī)劃到服務(wù)履約的全流程體驗(yàn)。
研究團(tuán)隊(duì)基于此評(píng)價(jià)體系對(duì)當(dāng)前市場(chǎng)主流的八款A(yù)I旅行助手產(chǎn)品進(jìn)行了首輪橫向評(píng)測(cè)。初步結(jié)果顯示，行業(yè)整體處于“快速成長(zhǎng)早期”，平均得分為689.49分（滿分900），并呈現(xiàn)出“強(qiáng)于內(nèi)容推薦，弱于執(zhí)行落地”的顯著特征。具體而言，產(chǎn)品在“活動(dòng)及玩法推薦”、“路線推薦”等場(chǎng)景中表現(xiàn)較好，但在依賴實(shí)時(shí)數(shù)據(jù)與復(fù)雜決策的“出行方式推薦”環(huán)節(jié)存在明顯短板。在二級(jí)指標(biāo)層面，各產(chǎn)品在“需求理解”、“個(gè)人數(shù)據(jù)脫敏”等基礎(chǔ)維度得分較高，但在“多模態(tài)能力”、“輸出內(nèi)容體驗(yàn)”等維度則有待提升。
與會(huì)專家認(rèn)為，該評(píng)價(jià)體系的發(fā)布為產(chǎn)品優(yōu)化提供了明確方向，并為產(chǎn)業(yè)協(xié)同發(fā)展建立了共同語言。未來，北二外數(shù)字文旅研究中心計(jì)劃聯(lián)合產(chǎn)業(yè)各方，持續(xù)迭代優(yōu)化評(píng)價(jià)體系，定期發(fā)布行業(yè)評(píng)測(cè)報(bào)告，并建立產(chǎn)學(xué)研用協(xié)同創(chuàng)新機(jī)制，以推動(dòng)AI旅行助手從“新奇工具”成長(zhǎng)為值得用戶信賴的“智能旅行伙伴”。
