向量搜尋成功 在 2022 年之前,如果您想快速回憶起您最喜歡的書中的特定段落或您剛剛看過的電影中的台詞,而作品本身不在您面前,您可能會轉向搜尋引擎。您可以使用格式良好的搜尋輸入來提示它,解析返回的結果,訪問似乎包含您的答案的 SparkNotes 或 IMDB 鏈接,並在幾分鐘內在頁面上找到您要查找的文本。現在,您只需打開 ChatGPT,輸入“最著名的《終結者》名言是什麼?”或「寫出《兩個城市的故事》的開頭段落」並在幾秒鐘內得到你的逐字回答。 大型語言模型 (LLM) 最簡單的用途之一是作為知識資料庫。 LLMs 已經接受過包含豐富資訊的海量資料集的訓練,像 ChatGPT 這樣的介面使得檢索變得很容易。例如,當您提示 ChatGPT 返回電影或書籍中的內容時,您只是利用模型的能力來回憶其在訓練期間接觸到的信息。但是,如果它沒有接受《魔鬼終結者》劇本的訓練,或者它的權重不重視狄更斯的作品,該怎麼辦?為了即使是最簡單的用例(例如基本資訊檢索)也能提供最準確和相關的結果,LLMs 需要複雜的索引和檢索機制,能夠精確地存取廣泛的資訊。 理解LLM內容生成和訓練LLM內容是透過稱為下...