国产av日韩一区二区三区精品,成人性爱视频在线观看,国产,欧美,日韩,一区,www.成色av久久成人,2222eeee成人天堂

首頁 後端開發(fā) Python教學(xué) 創(chuàng)建您自己的 AI RAG 聊天機(jī)器人:LangChain 的 Python 指南

創(chuàng)建您自己的 AI RAG 聊天機(jī)器人:LangChain 的 Python 指南

Oct 20, 2024 pm 02:15 PM

誰不想從他們的文件中得到即時(shí)答案?這正是 RAG 聊天機(jī)器人所做的事——將檢索與人工智慧生成相結(jié)合,以實(shí)現(xiàn)快速、準(zhǔn)確的回應(yīng)!

在本指南中,我將向您展示如何使用 檢索增強(qiáng)生成 (RAG) 以及 LangChainStreamlit 創(chuàng)建聊天機(jī)器人。該聊天機(jī)器人將從知識(shí)庫中提取相關(guān)資訊並使用語言模型產(chǎn)生回應(yīng)。

我將引導(dǎo)您完成每個(gè)步驟,提供多種回應(yīng)產(chǎn)生選項(xiàng),無論您使用OpenAI、GeminiFireworks — 確保靈活且具有成本效益的解決方案。

什麼是檢索增強(qiáng)生成 (RAG)?

RAG 是一種結(jié)合了檢索產(chǎn)生的方法,以提供更準(zhǔn)確和上下文感知的聊天機(jī)器人回應(yīng)。檢索過程從知識(shí)庫中提取相關(guān)文檔,而生成過程則使用語言模型根據(jù)檢索到的內(nèi)容創(chuàng)建連貫的回應(yīng)。這可確保您的聊天機(jī)器人可以使用最新資料回答問題,即使語言模型本身尚未針對(duì)該資訊進(jìn)行專門訓(xùn)練。

想像一下您有一位私人助理,但他並不總是知道您問題的答案。因此,當(dāng)你提出問題時(shí),他們會(huì)翻閱書籍並找到相關(guān)資訊(檢索),然後他們總結(jié)這些資訊並用自己的話告訴你(產(chǎn)生)。這本質(zhì)上就是 RAG 的工作原理,結(jié)合了兩全其美的優(yōu)點(diǎn)。

在流程圖中,RAG 流程有點(diǎn)像這樣:

Create Your Own AI RAG Chatbot: A Python Guide with LangChain

現(xiàn)在,讓我們開始吧,建立我們自己的聊天機(jī)器人!


設(shè)定專案環(huán)境

本教學(xué)中我們將主要使用 Python,如果您是 JS 頭,您可以按照說明並瀏覽 langchain js 的文檔。

首先,我們需要設(shè)定專案環(huán)境。這包括建立專案目錄、安裝依賴項(xiàng)以及為不同語言模型設(shè)定 API 金鑰。

1. 建立專案資料夾和虛擬環(huán)境

先建立專案資料夾與虛擬環(huán)境:

mkdir rag-chatbot
cd rag-chatbot
python -m venv venv
source venv/bin/activate

2.安裝依賴項(xiàng)

接下來,建立一個(gè)requirements.txt 檔案來列出所有必要的依賴項(xiàng):

langchain==0.0.329
streamlit==1.27.2
faiss-cpu==1.7.4
python-dotenv==1.0.0
tiktoken==0.5.1
openai==0.27.10
gemini==0.3.1
fireworks==0.4.0
sentence_transformers==2.2.2

現(xiàn)在,安裝這些相依性:

pip install -r requirements.txt

3. 設(shè)定 API 金鑰

我們將使用 OpenAIGeminiFireworks 來產(chǎn)生聊天機(jī)器人的回應(yīng)。您可以根據(jù)自己的喜好選擇其中任何一個(gè)。

如果您正在嘗試,請(qǐng)不要擔(dān)心,F(xiàn)ireworks 免費(fèi)提供價(jià)值 1 美元的 API 金鑰,gemini-1.5-flash 型號(hào)在一定程度上也是免費(fèi)的!

設(shè)定 .env 檔案來儲(chǔ)存您首選模型的 API 金鑰:

mkdir rag-chatbot
cd rag-chatbot
python -m venv venv
source venv/bin/activate

請(qǐng)務(wù)必註冊(cè)這些服務(wù)並取得您的 API 金鑰。 GeminiFireworks 皆提供免費(fèi)套餐,而 OpenAI 依使用情況收費(fèi)。


文件處理和分塊

為了提供聊天機(jī)器人上下文,我們需要處理文件並將它們分成可管理的區(qū)塊。這很重要,因?yàn)樾枰纸獯笪谋疽赃M(jìn)行嵌入和索引。

1.建立document_processor.py

建立一個(gè)名為 document_processor.py 的新 Python 腳本來處理文件處理:

langchain==0.0.329
streamlit==1.27.2
faiss-cpu==1.7.4
python-dotenv==1.0.0
tiktoken==0.5.1
openai==0.27.10
gemini==0.3.1
fireworks==0.4.0
sentence_transformers==2.2.2

此腳本載入一個(gè)文字文件,並將其分割成約 1000 個(gè)字元的較小區(qū)塊,並有少量重疊,以確保區(qū)塊之間不會(huì)遺失上下文。處理完成後,文件就可以嵌入並建立索引了。


建立嵌入和索引

現(xiàn)在我們已經(jīng)對(duì)文件進(jìn)行了分塊,下一步是將它們轉(zhuǎn)換為嵌入(文字的數(shù)字表示)並為它們建立索引以便快速檢索。 (因?yàn)闄C(jī)器理解數(shù)字比理解單字更容易)

1.創(chuàng)建embedding_indexer.py

建立另一個(gè)名為 embedding_indexer.py 的腳本:

pip install -r requirements.txt

在此腳本中,嵌入是使用 Hugging Face 模型(all-MiniLM-L6-v2)建立的。然後,我們將這些嵌入儲(chǔ)存在 FAISS 向量儲(chǔ)存中,這使我們能夠根據(jù)查詢快速檢索相似的文字區(qū)塊。


實(shí)施檢索和回應(yīng)生成

令人興奮的部分來了:將檢索與語言生成結(jié)合!現(xiàn)在,您將建立一個(gè) RAG 鏈 ,它從向量儲(chǔ)存中取得相關(guān)區(qū)塊並使用語言模型產(chǎn)生回應(yīng)。 (向量儲(chǔ)存是一個(gè)資料庫,我們儲(chǔ)存轉(zhuǎn)換為數(shù)字作為向量的資料)

1.創(chuàng)建rag_chain.py

讓我們建立檔案 rag_chain.py:

# Uncomment your API key
# OPENAI_API_KEY=your_openai_api_key_here
# GEMINI_API_KEY=your_gemini_api_key_here
# FIREWORKS_API_KEY=your_fireworks_api_key_here

在這裡,我們根據(jù)您提供的 API 金鑰在 OpenAI、GeminiFireworks 之間進(jìn)行選擇。 RAG 鏈將檢索前 3 個(gè)最相關(guān)的文檔,並使用語言模型產(chǎn)生回應(yīng)。

您可以根據(jù)自己的預(yù)算或使用偏好在模型之間切換 - GeminiFireworks 是免費(fèi)的,而 OpenAI 根據(jù)使用情況收費(fèi)。


建構(gòu)聊天機(jī)器人介面

現(xiàn)在,我們將建立一個(gè)簡單的聊天機(jī)器人介面,以使用我們的 RAG 鏈獲取用戶輸入並產(chǎn)生回應(yīng)。

1.創(chuàng)建chatbot.py

建立一個(gè)名為chatbot.py的新檔案:

mkdir rag-chatbot
cd rag-chatbot
python -m venv venv
source venv/bin/activate

此腳本建立一個(gè)命令列聊天機(jī)器人介面,持續(xù)偵聽使用者輸入,透過 RAG 鏈對(duì)其進(jìn)行處理,並傳回產(chǎn)生的回應(yīng)。


建立 Streamlit UI

是時(shí)候使用 Streamlit 建立 Web 介面,讓您的聊天機(jī)器人更加用戶友好。這將允許用戶透過瀏覽器與您的聊天機(jī)器人互動(dòng)。

1.創(chuàng)建app.py

建立app.py:

langchain==0.0.329
streamlit==1.27.2
faiss-cpu==1.7.4
python-dotenv==1.0.0
tiktoken==0.5.1
openai==0.27.10
gemini==0.3.1
fireworks==0.4.0
sentence_transformers==2.2.2

2. 運(yùn)行 Streamlit 應(yīng)用程式

要運(yùn)行您的 Streamlit 應(yīng)用程序,只需使用:

pip install -r requirements.txt

這將啟動(dòng)一個(gè)網(wǎng)頁介面,您可以在其中上傳文字檔案、提出問題並從聊天機(jī)器人接收答案。


優(yōu)化效能

為了獲得更好的效能,您可以在分割文字時(shí)嘗試區(qū)塊大小和重疊。較大的區(qū)塊提供更多上下文,但較小的區(qū)塊可能使檢索速度更快。您也可以使用 Streamlit 快取 來避免重複產(chǎn)生嵌入等昂貴的操作。

如果您想要最佳化成本,可以依照查詢複雜度在OpenAIGeminiFireworks 之間切換— 使用OpenAI對(duì)於複雜的問題,GeminiFireworks 對(duì)於更簡單的問題以降低成本。


總結(jié)

恭喜!您已成功創(chuàng)建自己的基於 RAG 的聊天機(jī)器人。現(xiàn)在,可能性是無限的:

    創(chuàng)建您自己的個(gè)人化學(xué)習(xí)夥伴。
  • 不再需要查看冗長的文件 - 只需「RAG it out」即可獲得快速、準(zhǔn)確的答案!
旅程從這裡開始,潛力無限!


您可以在 GitHub 上關(guān)注我的工作。請(qǐng)隨時(shí)與我聯(lián)繫 - 我的 DM 在 X 和 LinkedIn 上始終開放。

以上是創(chuàng)建您自己的 AI RAG 聊天機(jī)器人:LangChain 的 Python 指南的詳細(xì)內(nèi)容。更多資訊請(qǐng)關(guān)注PHP中文網(wǎng)其他相關(guān)文章!

本網(wǎng)站聲明
本文內(nèi)容由網(wǎng)友自願(yuàn)投稿,版權(quán)歸原作者所有。本站不承擔(dān)相應(yīng)的法律責(zé)任。如發(fā)現(xiàn)涉嫌抄襲或侵權(quán)的內(nèi)容,請(qǐng)聯(lián)絡(luò)admin@php.cn

熱AI工具

Undress AI Tool

Undress AI Tool

免費(fèi)脫衣圖片

Undresser.AI Undress

Undresser.AI Undress

人工智慧驅(qū)動(dòng)的應(yīng)用程序,用於創(chuàng)建逼真的裸體照片

AI Clothes Remover

AI Clothes Remover

用於從照片中去除衣服的線上人工智慧工具。

Clothoff.io

Clothoff.io

AI脫衣器

Video Face Swap

Video Face Swap

使用我們完全免費(fèi)的人工智慧換臉工具,輕鬆在任何影片中換臉!

熱工具

記事本++7.3.1

記事本++7.3.1

好用且免費(fèi)的程式碼編輯器

SublimeText3漢化版

SublimeText3漢化版

中文版,非常好用

禪工作室 13.0.1

禪工作室 13.0.1

強(qiáng)大的PHP整合開發(fā)環(huán)境

Dreamweaver CS6

Dreamweaver CS6

視覺化網(wǎng)頁開發(fā)工具

SublimeText3 Mac版

SublimeText3 Mac版

神級(jí)程式碼編輯軟體(SublimeText3)

Python類中的多態(tài)性 Python類中的多態(tài)性 Jul 05, 2025 am 02:58 AM

多態(tài)是Python面向?qū)ο缶幊讨械暮诵母拍睿浮耙环N接口,多種實(shí)現(xiàn)”,允許統(tǒng)一處理不同類型的對(duì)象。 1.多態(tài)通過方法重寫實(shí)現(xiàn),子類可重新定義父類方法,如Animal類的speak()方法在Dog和Cat子類中有不同實(shí)現(xiàn)。 2.多態(tài)的實(shí)際用途包括簡化代碼結(jié)構(gòu)、增強(qiáng)可擴(kuò)展性,例如圖形繪製程序中統(tǒng)一調(diào)用draw()方法,或遊戲開發(fā)中處理不同角色的共同行為。 3.Python實(shí)現(xiàn)多態(tài)需滿足:父類定義方法,子類重寫該方法,但不要求繼承同一父類,只要對(duì)象實(shí)現(xiàn)相同方法即可,這稱為“鴨子類型”。 4.注意事項(xiàng)包括保持方

什麼是python的列表切片? 什麼是python的列表切片? Jun 29, 2025 am 02:15 AM

ListslicinginPythonextractsaportionofalistusingindices.1.Itusesthesyntaxlist[start:end:step],wherestartisinclusive,endisexclusive,andstepdefinestheinterval.2.Ifstartorendareomitted,Pythondefaultstothebeginningorendofthelist.3.Commonusesincludegetting

Python函數(shù)參數(shù)和參數(shù) Python函數(shù)參數(shù)和參數(shù) Jul 04, 2025 am 03:26 AM

參數(shù)(parameters)是定義函數(shù)時(shí)的佔(zhàn)位符,而傳參(arguments)是調(diào)用時(shí)傳入的具體值。 1.位置參數(shù)需按順序傳遞,順序錯(cuò)誤會(huì)導(dǎo)致結(jié)果錯(cuò)誤;2.關(guān)鍵字參數(shù)通過參數(shù)名指定,可改變順序且提高可讀性;3.默認(rèn)參數(shù)值在定義時(shí)賦值,避免重複代碼,但應(yīng)避免使用可變對(duì)像作為默認(rèn)值;4.args和*kwargs可處理不定數(shù)量的參數(shù),適用於通用接口或裝飾器,但應(yīng)謹(jǐn)慎使用以保持可讀性。

python`@classmethod'裝飾師解釋了 python`@classmethod'裝飾師解釋了 Jul 04, 2025 am 03:26 AM

類方法是Python中通過@classmethod裝飾器定義的方法,其第一個(gè)參數(shù)為類本身(cls),用於訪問或修改類狀態(tài)。它可通過類或?qū)嵗{(diào)用,影響的是整個(gè)類而非特定實(shí)例;例如在Person類中,show_count()方法統(tǒng)計(jì)創(chuàng)建的對(duì)像數(shù)量;定義類方法時(shí)需使用@classmethod裝飾器並將首參命名為cls,如change_var(new_value)方法可修改類變量;類方法與實(shí)例方法(self參數(shù))、靜態(tài)方法(無自動(dòng)參數(shù))不同,適用於工廠方法、替代構(gòu)造函數(shù)及管理類變量等場景;常見用途包括從

解釋Python發(fā)電機(jī)和迭代器。 解釋Python發(fā)電機(jī)和迭代器。 Jul 05, 2025 am 02:55 AM

迭代器是實(shí)現(xiàn)__iter__()和__next__()方法的對(duì)象,生成器是簡化版的迭代器,通過yield關(guān)鍵字自動(dòng)實(shí)現(xiàn)這些方法。 1.迭代器每次調(diào)用next()返回一個(gè)元素,無更多元素時(shí)拋出StopIteration異常。 2.生成器通過函數(shù)定義,使用yield按需生成數(shù)據(jù),節(jié)省內(nèi)存且支持無限序列。 3.處理已有集合時(shí)用迭代器,動(dòng)態(tài)生成大數(shù)據(jù)或需惰性求值時(shí)用生成器,如讀取大文件時(shí)逐行加載。注意:列表等可迭代對(duì)像不是迭代器,迭代器到盡頭後需重新創(chuàng)建,生成器只能遍歷一次。

如何在Python中結(jié)合兩個(gè)列表? 如何在Python中結(jié)合兩個(gè)列表? Jun 30, 2025 am 02:04 AM

合併兩個(gè)列表有多種方法,選擇合適方式可提升效率。 1.使用 號(hào)拼接生成新列表,如list1 list2;2.使用 =修改原列表,如list1 =list2;3.使用extend()方法在原列表上操作,如list1.extend(list2);4.使用號(hào)解包合併(Python3.5 ),如[list1,*list2],支持靈活組合多個(gè)列表或添加元素。不同方法適用於不同場景,需根據(jù)是否修改原列表及Python版本進(jìn)行選擇。

如何處理Python中的API身份驗(yàn)證 如何處理Python中的API身份驗(yàn)證 Jul 13, 2025 am 02:22 AM

處理API認(rèn)證的關(guān)鍵在於理解並正確使用認(rèn)證方式。 1.APIKey是最簡單的認(rèn)證方式,通常放在請(qǐng)求頭或URL參數(shù)中;2.BasicAuth使用用戶名和密碼進(jìn)行Base64編碼傳輸,適合內(nèi)部系統(tǒng);3.OAuth2需先通過client_id和client_secret獲取Token,再在請(qǐng)求頭中帶上BearerToken;4.為應(yīng)對(duì)Token過期,可封裝Token管理類自動(dòng)刷新Token;總之,根據(jù)文檔選擇合適方式,並安全存儲(chǔ)密鑰信息是關(guān)鍵。

什麼是python魔法方法或dunder方法? 什麼是python魔法方法或dunder方法? Jul 04, 2025 am 03:20 AM

Python的magicmethods(或稱dunder方法)是用於定義對(duì)象行為的特殊方法,它們以雙下劃線開頭和結(jié)尾。 1.它們使對(duì)象能夠響應(yīng)內(nèi)置操作,如加法、比較、字符串表示等;2.常見用例包括對(duì)像初始化與表示(__init__、__repr__、__str__)、算術(shù)運(yùn)算(__add__、__sub__、__mul__)及比較運(yùn)算(__eq__、__lt__);3.使用時(shí)應(yīng)確保其行為符合預(yù)期,例如__repr__應(yīng)返回可重構(gòu)對(duì)象的表達(dá)式,算術(shù)方法應(yīng)返回新實(shí)例;4.應(yīng)避免過度使用或以令人困惑的方

See all articles