研究人員利用真實購物資料打造效能衡量工具,用於評估大型自然語言模型用於電商服務標榜使用亞馬遜真實購物數據

首圖

印第安納州聖母大學 (University of Notre Dame)與香港科技大學合作,藉由亞馬遜電商真實購物資料,共同建構一組對應大規模、多任務的評測工具Shopping MMLU,可用於衡量目前諸多大型自然語言模型用於線上電商服務時的執行成效表現。 由於越來越多業者開始將大型自然語言用於電商服務,例如人工智慧新創Perplexity AI近期......