本課程旨在教導您如何利用大型語言模型(LLM)的力量有效地與基於文本的文件進行互動。重點將放在處理PDF文件,因為它們是商業環境中最常見的格式。然而,您將學習到的技術可以應用於任何類型的基於文本的文件。

課程將從構建基本檢索管道並探索其不同組件開始。從那裡,我們將深入探討更高級的技術,如重新排名、查詢擴展、多查詢檢索和假設文件嵌入。我們還將介紹如何將語義搜索與傳統基於關鍵字的搜索相結合,並探討使用金字塔文件檢索器擴展嵌入模型檢索的上下文。

目標不僅是教您這些不同技術是什麼,還要教您何時以及為什麼使用它們。在整個課程中,我們將提供實用的代碼示例,以幫助您在自己的項目中實施這些技術。到課程結束時,您將擁有一個完全可用的Python套件,可以在自己的工作中使用。

本課程的目標受眾是SaaS創始人、開發人員、高管和愛好者。要充分利用本課程,您需要具有Python背景。本課程將幫助您將您的出色想法轉化為可工作的原型,並在幾分鐘內分析數千份文件,而不是幾天。

在本課程中,我們將涵蓋一系列與使用大型語言模型(LLM)與基於文本的文件互動相關的主題。重點將放在處理PDF文件,因為它們是商業環境中最常見的格式。

我們將從構建基本檢索管道並在代碼中實現其不同組件開始。從那裡,我們將深入探討更多提高檢索管道性能的高級技術,如重新排名、查詢擴展和多查詢檢索。

此外,我們將探索基於您正在處理的問題生成假設文件的技術,即「假設文件嵌入」。我們還將研究如何結合多個檢索來提高檢索管道的性能,將語義搜索技術與傳統基於關鍵字的搜索相結合。

此外,我們將介紹金字塔文件檢索器,這是一種有助於擴展嵌入模型檢索的上下文的技術。

在整個課程中,重點不僅在於理解這些不同的技術,還在於何時以及為什麼使用它們。我們將提供實用的代碼示例,演示如何在各種情況下應用這些技術。

本課程將最初涵蓋這些主題,但由於檢索和生成(RAG)領域使用LLM的技術不斷發展,課程將隨時間更新新的講座和主題。

本課程旨在為您提供實用的技能和知識,以利用大型語言模型(LLM)與基於文本的文件(尤其是PDF)進行互動。作為參與者,您將學習如何構建強大的檢索管道,應用重新排名、查詢擴展和多查詢檢索等高級技術,並探索基於您具體需求生成假設文件的方法。

講師擁有博士學位,在領導機器學習和AI團隊方面有超過7年的行業經驗,具有強大的技術背景和對開源項目的熱情。他們已經建立了為數十萬台消費者設備提供動力的系統,並創建了最受歡迎的開源RAG項目之一Local GPT,在GitHub上擁有超過19,000顆星。

通過參加本課程,您將有機會提升技能、在您的領域創新,並與志同道合的專業人士建立聯繫。課程將為您提供一個完全可用的Python套件,您可以在自己的項目中使用,並且您將獲得對Prompt Engineering Discord服務器上的專用頻道的訪問權限,在那裡您可以直接與講師和其他從業者就課程中涵蓋的主題及其他主題進行交流。

本課程將主要關注使用OpenAI的大型語言模型(LLM)和嵌入模型。這樣做的原因是OpenAI的API提供了一種簡單直接的方式來快速構建原型。

然而,在課程的後期,我們還將探討如何使用本地LLM和嵌入模型來完全離線運行整個管道,而不依賴任何外部API。這將使您能夠靈活地使用您選擇的模型,並完全離線運行系統。

我們將使用的具體模型包括:

• OpenAI的GPT-3和其他LLM,用於各種文本生成和理解任務
• OpenAI的嵌入模型,用於生成文本的語義表示
• 來自Hugging Face等的本地LLM和嵌入模型,以實現完全離線部署

到課程結束時,您將深入了解如何利用這些模型構建強大的基於文本的文件處理應用程序,並擁有一個完全可用的Python套件,可以在自己的項目中使用。

這個「超越基礎」課程旨在為您提供知識和技能,以利用大型語言模型(LLM)有效地與基於文本的文件進行互動。無論您是SaaS創始人、開發人員、高管還是愛好者,本課程都將為您提供實用的技術,以將您的想法轉化為可工作的原型,並在極短的時間內分析大量文件。

在整個課程中,我們將涵蓋一系列主題,包括構建基本檢索管道、重新排名、查詢擴展和多查詢檢索等高級技術。我們還將探討文檔嵌入,以及如何將語義搜索與傳統基於關鍵字的搜索方法相結合。此外,我們還將深入探討使用金字塔文檔檢索器擴展嵌入模型檢索的上下文。

本課程的重點不僅在於理解這些技術,還在於何時以及為什麼使用它們。您將獲得實用的代碼示例,以幫助您在自己的項目中實施這些策略。此外,您還將獲得一個完全可用的Python套件,可以在您未來的工作中使用。

本課程最初將涵蓋這些核心主題,但由於檢索和生成(RAG)領域不斷發展,課程將隨時間更新新的講座和內容,以確保您保持最新的發展動態。

講師擁有博士學位,在領導機器學習和AI團隊方面有超過7年的行業經驗,熱衷於開源,並創建了最受歡迎的開源RAG項目之一Local GPT,在GitHub上擁有超過19,000顆星。您將有機會通過Prompt Engineering Discord服務器上的專用頻道直接與講師和其他從業者互動,從而提升技能、在您的領域創新,並與志同道合的專業人士建立聯繫。

加入我們,一起踏上使用LLM與基於文本的文件互動的精彩之旅,開啟您領域的新可能性。