国产av日韩一区二区三区精品,成人性爱视频在线观看,国产,欧美,日韩,一区,www.成色av久久成人,2222eeee成人天堂

首頁(yè) 後端開(kāi)發(fā) Python教學(xué) 創(chuàng)建您自己的 AI RAG 聊天機(jī)器人:LangChain 的 Python 指南

創(chuàng)建您自己的 AI RAG 聊天機(jī)器人:LangChain 的 Python 指南

Oct 20, 2024 pm 02:15 PM

誰(shuí)不想從他們的文件中得到即時(shí)答案?這正是 RAG 聊天機(jī)器人所做的事——將檢索與人工智慧生成相結(jié)合,以實(shí)現(xiàn)快速、準(zhǔn)確的回應(yīng)!

在本指南中,我將向您展示如何使用 檢索增強(qiáng)生成 (RAG) 以及 LangChainStreamlit 創(chuàng)建聊天機(jī)器人。該聊天機(jī)器人將從知識(shí)庫(kù)中提取相關(guān)資訊並使用語(yǔ)言模型產(chǎn)生回應(yīng)。

我將引導(dǎo)您完成每個(gè)步驟,提供多種回應(yīng)產(chǎn)生選項(xiàng),無(wú)論您使用OpenAIGeminiFireworks — 確保靈活且具有成本效益的解決方案。

什麼是檢索增強(qiáng)生成 (RAG)?

RAG 是一種結(jié)合了檢索產(chǎn)生的方法,以提供更準(zhǔn)確和上下文感知的聊天機(jī)器人回應(yīng)。檢索過(guò)程從知識(shí)庫(kù)中提取相關(guān)文檔,而生成過(guò)程則使用語(yǔ)言模型根據(jù)檢索到的內(nèi)容創(chuàng)建連貫的回應(yīng)。這可確保您的聊天機(jī)器人可以使用最新資料回答問(wèn)題,即使語(yǔ)言模型本身尚未針對(duì)該資訊進(jìn)行專(zhuān)門(mén)訓(xùn)練。

想像一下您有一位私人助理,但他並不總是知道您問(wèn)題的答案。因此,當(dāng)你提出問(wèn)題時(shí),他們會(huì)翻閱書(shū)籍並找到相關(guān)資訊(檢索),然後他們總結(jié)這些資訊並用自己的話(huà)告訴你(產(chǎn)生)。這本質(zhì)上就是 RAG 的工作原理,結(jié)合了兩全其美的優(yōu)點(diǎn)。

在流程圖中,RAG 流程有點(diǎn)像這樣:

Create Your Own AI RAG Chatbot: A Python Guide with LangChain

現(xiàn)在,讓我們開(kāi)始吧,建立我們自己的聊天機(jī)器人!


設(shè)定專(zhuān)案環(huán)境

本教學(xué)中我們將主要使用 Python,如果您是 JS 頭,您可以按照說(shuō)明並瀏覽 langchain js 的文檔。

首先,我們需要設(shè)定專(zhuān)案環(huán)境。這包括建立專(zhuān)案目錄、安裝依賴(lài)項(xiàng)以及為不同語(yǔ)言模型設(shè)定 API 金鑰。

1. 建立專(zhuān)案資料夾和虛擬環(huán)境

先建立專(zhuān)案資料夾與虛擬環(huán)境:

mkdir rag-chatbot
cd rag-chatbot
python -m venv venv
source venv/bin/activate

2.安裝依賴(lài)項(xiàng)

接下來(lái),建立一個(gè)requirements.txt 檔案來(lái)列出所有必要的依賴(lài)項(xiàng):

langchain==0.0.329
streamlit==1.27.2
faiss-cpu==1.7.4
python-dotenv==1.0.0
tiktoken==0.5.1
openai==0.27.10
gemini==0.3.1
fireworks==0.4.0
sentence_transformers==2.2.2

現(xiàn)在,安裝這些相依性:

pip install -r requirements.txt

3. 設(shè)定 API 金鑰

我們將使用 OpenAIGeminiFireworks 來(lái)產(chǎn)生聊天機(jī)器人的回應(yīng)。您可以根據(jù)自己的喜好選擇其中任何一個(gè)。

如果您正在嘗試,請(qǐng)不要擔(dān)心,F(xiàn)ireworks 免費(fèi)提供價(jià)值 1 美元的 API 金鑰,gemini-1.5-flash 型號(hào)在一定程度上也是免費(fèi)的!

設(shè)定 .env 檔案來(lái)儲(chǔ)存您首選模型的 API 金鑰:

mkdir rag-chatbot
cd rag-chatbot
python -m venv venv
source venv/bin/activate

請(qǐng)務(wù)必註冊(cè)這些服務(wù)並取得您的 API 金鑰。 GeminiFireworks 皆提供免費(fèi)套餐,而 OpenAI 依使用情況收費(fèi)。


文件處理和分塊

為了提供聊天機(jī)器人上下文,我們需要處理文件並將它們分成可管理的區(qū)塊。這很重要,因?yàn)樾枰纸獯笪谋疽赃M(jìn)行嵌入和索引。

1.建立document_processor.py

建立一個(gè)名為 document_processor.py 的新 Python 腳本來(lái)處理文件處理:

langchain==0.0.329
streamlit==1.27.2
faiss-cpu==1.7.4
python-dotenv==1.0.0
tiktoken==0.5.1
openai==0.27.10
gemini==0.3.1
fireworks==0.4.0
sentence_transformers==2.2.2

此腳本載入一個(gè)文字文件,並將其分割成約 1000 個(gè)字元的較小區(qū)塊,並有少量重疊,以確保區(qū)塊之間不會(huì)遺失上下文。處理完成後,文件就可以嵌入並建立索引了。


建立嵌入和索引

現(xiàn)在我們已經(jīng)對(duì)文件進(jìn)行了分塊,下一步是將它們轉(zhuǎn)換為嵌入(文字的數(shù)字表示)並為它們建立索引以便快速檢索。 (因?yàn)闄C(jī)器理解數(shù)字比理解單字更容易)

1.創(chuàng)建embedding_indexer.py

建立另一個(gè)名為 embedding_indexer.py 的腳本:

pip install -r requirements.txt

在此腳本中,嵌入是使用 Hugging Face 模型(all-MiniLM-L6-v2)建立的。然後,我們將這些嵌入儲(chǔ)存在 FAISS 向量?jī)?chǔ)存中,這使我們能夠根據(jù)查詢(xún)快速檢索相似的文字區(qū)塊。


實(shí)施檢索和回應(yīng)生成

令人興奮的部分來(lái)了:將檢索與語(yǔ)言生成結(jié)合!現(xiàn)在,您將建立一個(gè) RAG 鏈 ,它從向量?jī)?chǔ)存中取得相關(guān)區(qū)塊並使用語(yǔ)言模型產(chǎn)生回應(yīng)。 (向量?jī)?chǔ)存是一個(gè)資料庫(kù),我們儲(chǔ)存轉(zhuǎn)換為數(shù)字作為向量的資料)

1.創(chuàng)建rag_chain.py

讓我們建立檔案 rag_chain.py:

# Uncomment your API key
# OPENAI_API_KEY=your_openai_api_key_here
# GEMINI_API_KEY=your_gemini_api_key_here
# FIREWORKS_API_KEY=your_fireworks_api_key_here

在這裡,我們根據(jù)您提供的 API 金鑰在 OpenAIGeminiFireworks 之間進(jìn)行選擇。 RAG 鏈將檢索前 3 個(gè)最相關(guān)的文檔,並使用語(yǔ)言模型產(chǎn)生回應(yīng)。

您可以根據(jù)自己的預(yù)算或使用偏好在模型之間切換 - GeminiFireworks 是免費(fèi)的,而 OpenAI 根據(jù)使用情況收費(fèi)。


建構(gòu)聊天機(jī)器人介面

現(xiàn)在,我們將建立一個(gè)簡(jiǎn)單的聊天機(jī)器人介面,以使用我們的 RAG 鏈獲取用戶(hù)輸入並產(chǎn)生回應(yīng)。

1.創(chuàng)建chatbot.py

建立一個(gè)名為chatbot.py的新檔案:

mkdir rag-chatbot
cd rag-chatbot
python -m venv venv
source venv/bin/activate

此腳本建立一個(gè)命令列聊天機(jī)器人介面,持續(xù)偵聽(tīng)使用者輸入,透過(guò) RAG 鏈對(duì)其進(jìn)行處理,並傳回產(chǎn)生的回應(yīng)。


建立 Streamlit UI

是時(shí)候使用 Streamlit 建立 Web 介面,讓您的聊天機(jī)器人更加用戶(hù)友好。這將允許用戶(hù)透過(guò)瀏覽器與您的聊天機(jī)器人互動(dòng)。

1.創(chuàng)建app.py

建立app.py:

langchain==0.0.329
streamlit==1.27.2
faiss-cpu==1.7.4
python-dotenv==1.0.0
tiktoken==0.5.1
openai==0.27.10
gemini==0.3.1
fireworks==0.4.0
sentence_transformers==2.2.2

2. 運(yùn)行 Streamlit 應(yīng)用程式

要運(yùn)行您的 Streamlit 應(yīng)用程序,只需使用:

pip install -r requirements.txt

這將啟動(dòng)一個(gè)網(wǎng)頁(yè)介面,您可以在其中上傳文字檔案、提出問(wèn)題並從聊天機(jī)器人接收答案。


優(yōu)化效能

為了獲得更好的效能,您可以在分割文字時(shí)嘗試區(qū)塊大小和重疊。較大的區(qū)塊提供更多上下文,但較小的區(qū)塊可能使檢索速度更快。您也可以使用 Streamlit 快取 來(lái)避免重複產(chǎn)生嵌入等昂貴的操作。

如果您想要最佳化成本,可以依照查詢(xún)複雜度在OpenAI、GeminiFireworks 之間切換— 使用OpenAI對(duì)於複雜的問(wèn)題,GeminiFireworks 對(duì)於更簡(jiǎn)單的問(wèn)題以降低成本。


總結(jié)

恭喜!您已成功創(chuàng)建自己的基於 RAG 的聊天機(jī)器人?,F(xiàn)在,可能性是無(wú)限的:

    創(chuàng)建您自己的個(gè)人化學(xué)習(xí)夥伴。
  • 不再需要查看冗長(zhǎng)的文件 - 只需「RAG it out」即可獲得快速、準(zhǔn)確的答案!
旅程從這裡開(kāi)始,潛力無(wú)限!


您可以在 GitHub 上關(guān)注我的工作。請(qǐng)隨時(shí)與我聯(lián)繫 - 我的 DM 在 X 和 LinkedIn 上始終開(kāi)放。

以上是創(chuàng)建您自己的 AI RAG 聊天機(jī)器人:LangChain 的 Python 指南的詳細(xì)內(nèi)容。更多資訊請(qǐng)關(guān)注PHP中文網(wǎng)其他相關(guān)文章!

本網(wǎng)站聲明
本文內(nèi)容由網(wǎng)友自願(yuàn)投稿,版權(quán)歸原作者所有。本站不承擔(dān)相應(yīng)的法律責(zé)任。如發(fā)現(xiàn)涉嫌抄襲或侵權(quán)的內(nèi)容,請(qǐng)聯(lián)絡(luò)admin@php.cn

熱AI工具

Undress AI Tool

Undress AI Tool

免費(fèi)脫衣圖片

Undresser.AI Undress

Undresser.AI Undress

人工智慧驅(qū)動(dòng)的應(yīng)用程序,用於創(chuàng)建逼真的裸體照片

AI Clothes Remover

AI Clothes Remover

用於從照片中去除衣服的線(xiàn)上人工智慧工具。

Clothoff.io

Clothoff.io

AI脫衣器

Video Face Swap

Video Face Swap

使用我們完全免費(fèi)的人工智慧換臉工具,輕鬆在任何影片中換臉!

熱工具

記事本++7.3.1

記事本++7.3.1

好用且免費(fèi)的程式碼編輯器

SublimeText3漢化版

SublimeText3漢化版

中文版,非常好用

禪工作室 13.0.1

禪工作室 13.0.1

強(qiáng)大的PHP整合開(kāi)發(fā)環(huán)境

Dreamweaver CS6

Dreamweaver CS6

視覺(jué)化網(wǎng)頁(yè)開(kāi)發(fā)工具

SublimeText3 Mac版

SublimeText3 Mac版

神級(jí)程式碼編輯軟體(SublimeText3)

熱門(mén)話(huà)題

Python類(lèi)中的多態(tài)性 Python類(lèi)中的多態(tài)性 Jul 05, 2025 am 02:58 AM

多態(tài)是Python面向?qū)ο缶幊讨械暮诵母拍睿浮耙环N接口,多種實(shí)現(xiàn)”,允許統(tǒng)一處理不同類(lèi)型的對(duì)象。 1.多態(tài)通過(guò)方法重寫(xiě)實(shí)現(xiàn),子類(lèi)可重新定義父類(lèi)方法,如Animal類(lèi)的speak()方法在Dog和Cat子類(lèi)中有不同實(shí)現(xiàn)。 2.多態(tài)的實(shí)際用途包括簡(jiǎn)化代碼結(jié)構(gòu)、增強(qiáng)可擴(kuò)展性,例如圖形繪製程序中統(tǒng)一調(diào)用draw()方法,或遊戲開(kāi)發(fā)中處理不同角色的共同行為。 3.Python實(shí)現(xiàn)多態(tài)需滿(mǎn)足:父類(lèi)定義方法,子類(lèi)重寫(xiě)該方法,但不要求繼承同一父類(lèi),只要對(duì)象實(shí)現(xiàn)相同方法即可,這稱(chēng)為“鴨子類(lèi)型”。 4.注意事項(xiàng)包括保持方

什麼是python的列表切片? 什麼是python的列表切片? Jun 29, 2025 am 02:15 AM

ListslicinginPythonextractsaportionofalistusingindices.1.Itusesthesyntaxlist[start:end:step],wherestartisinclusive,endisexclusive,andstepdefinestheinterval.2.Ifstartorendareomitted,Pythondefaultstothebeginningorendofthelist.3.Commonusesincludegetting

python`@classmethod'裝飾師解釋了 python`@classmethod'裝飾師解釋了 Jul 04, 2025 am 03:26 AM

類(lèi)方法是Python中通過(guò)@classmethod裝飾器定義的方法,其第一個(gè)參數(shù)為類(lèi)本身(cls),用於訪問(wèn)或修改類(lèi)狀態(tài)。它可通過(guò)類(lèi)或?qū)嵗{(diào)用,影響的是整個(gè)類(lèi)而非特定實(shí)例;例如在Person類(lèi)中,show_count()方法統(tǒng)計(jì)創(chuàng)建的對(duì)像數(shù)量;定義類(lèi)方法時(shí)需使用@classmethod裝飾器並將首參命名為cls,如change_var(new_value)方法可修改類(lèi)變量;類(lèi)方法與實(shí)例方法(self參數(shù))、靜態(tài)方法(無(wú)自動(dòng)參數(shù))不同,適用於工廠方法、替代構(gòu)造函數(shù)及管理類(lèi)變量等場(chǎng)景;常見(jiàn)用途包括從

Python函數(shù)參數(shù)和參數(shù) Python函數(shù)參數(shù)和參數(shù) Jul 04, 2025 am 03:26 AM

參數(shù)(parameters)是定義函數(shù)時(shí)的佔(zhàn)位符,而傳參(arguments)是調(diào)用時(shí)傳入的具體值。 1.位置參數(shù)需按順序傳遞,順序錯(cuò)誤會(huì)導(dǎo)致結(jié)果錯(cuò)誤;2.關(guān)鍵字參數(shù)通過(guò)參數(shù)名指定,可改變順序且提高可讀性;3.默認(rèn)參數(shù)值在定義時(shí)賦值,避免重複代碼,但應(yīng)避免使用可變對(duì)像作為默認(rèn)值;4.args和*kwargs可處理不定數(shù)量的參數(shù),適用於通用接口或裝飾器,但應(yīng)謹(jǐn)慎使用以保持可讀性。

解釋Python發(fā)電機(jī)和迭代器。 解釋Python發(fā)電機(jī)和迭代器。 Jul 05, 2025 am 02:55 AM

迭代器是實(shí)現(xiàn)__iter__()和__next__()方法的對(duì)象,生成器是簡(jiǎn)化版的迭代器,通過(guò)yield關(guān)鍵字自動(dòng)實(shí)現(xiàn)這些方法。 1.迭代器每次調(diào)用next()返回一個(gè)元素,無(wú)更多元素時(shí)拋出StopIteration異常。 2.生成器通過(guò)函數(shù)定義,使用yield按需生成數(shù)據(jù),節(jié)省內(nèi)存且支持無(wú)限序列。 3.處理已有集合時(shí)用迭代器,動(dòng)態(tài)生成大數(shù)據(jù)或需惰性求值時(shí)用生成器,如讀取大文件時(shí)逐行加載。注意:列表等可迭代對(duì)像不是迭代器,迭代器到盡頭後需重新創(chuàng)建,生成器只能遍歷一次。

如何在Python中結(jié)合兩個(gè)列表? 如何在Python中結(jié)合兩個(gè)列表? Jun 30, 2025 am 02:04 AM

合併兩個(gè)列表有多種方法,選擇合適方式可提升效率。 1.使用 號(hào)拼接生成新列表,如list1 list2;2.使用 =修改原列表,如list1 =list2;3.使用extend()方法在原列表上操作,如list1.extend(list2);4.使用號(hào)解包合併(Python3.5 ),如[list1,*list2],支持靈活組合多個(gè)列表或添加元素。不同方法適用於不同場(chǎng)景,需根據(jù)是否修改原列表及Python版本進(jìn)行選擇。

如何處理Python中的API身份驗(yàn)證 如何處理Python中的API身份驗(yàn)證 Jul 13, 2025 am 02:22 AM

處理API認(rèn)證的關(guān)鍵在於理解並正確使用認(rèn)證方式。 1.APIKey是最簡(jiǎn)單的認(rèn)證方式,通常放在請(qǐng)求頭或URL參數(shù)中;2.BasicAuth使用用戶(hù)名和密碼進(jìn)行Base64編碼傳輸,適合內(nèi)部系統(tǒng);3.OAuth2需先通過(guò)client_id和client_secret獲取Token,再在請(qǐng)求頭中帶上BearerToken;4.為應(yīng)對(duì)Token過(guò)期,可封裝Token管理類(lèi)自動(dòng)刷新Token;總之,根據(jù)文檔選擇合適方式,並安全存儲(chǔ)密鑰信息是關(guān)鍵。

什麼是python魔法方法或dunder方法? 什麼是python魔法方法或dunder方法? Jul 04, 2025 am 03:20 AM

Python的magicmethods(或稱(chēng)dunder方法)是用於定義對(duì)象行為的特殊方法,它們以雙下劃線(xiàn)開(kāi)頭和結(jié)尾。 1.它們使對(duì)象能夠響應(yīng)內(nèi)置操作,如加法、比較、字符串表示等;2.常見(jiàn)用例包括對(duì)像初始化與表示(__init__、__repr__、__str__)、算術(shù)運(yùn)算(__add__、__sub__、__mul__)及比較運(yùn)算(__eq__、__lt__);3.使用時(shí)應(yīng)確保其行為符合預(yù)期,例如__repr__應(yīng)返回可重構(gòu)對(duì)象的表達(dá)式,算術(shù)方法應(yīng)返回新實(shí)例;4.應(yīng)避免過(guò)度使用或以令人困惑的方

See all articles