生成式推薦補上關鍵一環,語義ID首次實現可微分聯合優化

生成式推薦補上關鍵一環,語義ID首次實現可微分聯合優化

核心突破:可微分語義ID聯合優化

首次將可微分語義ID聯合優化帶入生成式推薦,讓推薦損失直接參與語義ID的學習過程,實現推薦任務與語義ID表徵的協同優化。

訓練穩定性提升機制

通過引入Gumbel noise與不確定性衰減機制,有效提升模型訓練的穩定性,緩解傳統方法中常見的碼本塌縮問題。

語義ID作為關鍵基礎設施

語義ID(Semantic ID)在生成式推薦範式中承擔物品表徵的核心作用,是連接物品與用戶興趣的關鍵橋樑。

技術演進背景

相較於傳統推薦系統在物品集合上進行分類的方法,生成式推薦更傾向於將物品編碼為離散token,並由模型生成用戶可能感興趣的「下一個物品表示」,成為推薦系統的重要發展方向。

相關研究與應用

  • SIGIR’26會議論文提出該技術,標誌著語義ID在生成式推薦中的關鍵進展。
  • Meta的GR、美團的MTGR等模型已探索類似排序機制,推動生成式推薦的落地。
  • 多模態預訓練模型的嵌入(emb)與推薦系統協同信號對齊,成為優化方向之一。

來源:https://www.36kr.com/p/3788953341615111

返回頂端