国产av日韩一区二区三区精品,成人性爱视频在线观看,国产,欧美,日韩,一区,www.成色av久久成人,2222eeee成人天堂

首頁(yè) 後端開發(fā) Python教學(xué) 創(chuàng)建您自己的 AI RAG 聊天機(jī)器人:LangChain 的 Python 指南

創(chuàng)建您自己的 AI RAG 聊天機(jī)器人:LangChain 的 Python 指南

Oct 20, 2024 pm 02:15 PM

誰(shuí)不想從他們的文件中得到即時(shí)答案?這正是 RAG 聊天機(jī)器人所做的事——將檢索與人工智慧生成相結(jié)合,以實(shí)現(xiàn)快速、準(zhǔn)確的回應(yīng)!

在本指南中,我將向您展示如何使用 檢索增強(qiáng)生成 (RAG) 以及 LangChainStreamlit 創(chuàng)建聊天機(jī)器人。該聊天機(jī)器人將從知識(shí)庫(kù)中提取相關(guān)資訊並使用語(yǔ)言模型產(chǎn)生回應(yīng)。

我將引導(dǎo)您完成每個(gè)步驟,提供多種回應(yīng)產(chǎn)生選項(xiàng),無(wú)論您使用OpenAI、GeminiFireworks — 確保靈活且具有成本效益的解決方案。

什麼是檢索增強(qiáng)生成 (RAG)?

RAG 是一種結(jié)合了檢索產(chǎn)生的方法,以提供更準(zhǔn)確和上下文感知的聊天機(jī)器人回應(yīng)。檢索過(guò)程從知識(shí)庫(kù)中提取相關(guān)文檔,而生成過(guò)程則使用語(yǔ)言模型根據(jù)檢索到的內(nèi)容創(chuàng)建連貫的回應(yīng)。這可確保您的聊天機(jī)器人可以使用最新資料回答問(wèn)題,即使語(yǔ)言模型本身尚未針對(duì)該資訊進(jìn)行專門訓(xùn)練。

想像一下您有一位私人助理,但他並不總是知道您問(wèn)題的答案。因此,當(dāng)你提出問(wèn)題時(shí),他們會(huì)翻閱書籍並找到相關(guān)資訊(檢索),然後他們總結(jié)這些資訊並用自己的話告訴你(產(chǎn)生)。這本質(zhì)上就是 RAG 的工作原理,結(jié)合了兩全其美的優(yōu)點(diǎn)。

在流程圖中,RAG 流程有點(diǎn)像這樣:

Create Your Own AI RAG Chatbot: A Python Guide with LangChain

現(xiàn)在,讓我們開始吧,建立我們自己的聊天機(jī)器人!


設(shè)定專案環(huán)境

本教學(xué)中我們將主要使用 Python,如果您是 JS 頭,您可以按照說(shuō)明並瀏覽 langchain js 的文檔。

首先,我們需要設(shè)定專案環(huán)境。這包括建立專案目錄、安裝依賴項(xiàng)以及為不同語(yǔ)言模型設(shè)定 API 金鑰。

1. 建立專案資料夾和虛擬環(huán)境

先建立專案資料夾與虛擬環(huán)境:

mkdir rag-chatbot
cd rag-chatbot
python -m venv venv
source venv/bin/activate

2.安裝依賴項(xiàng)

接下來(lái),建立一個(gè)requirements.txt 檔案來(lái)列出所有必要的依賴項(xiàng):

langchain==0.0.329
streamlit==1.27.2
faiss-cpu==1.7.4
python-dotenv==1.0.0
tiktoken==0.5.1
openai==0.27.10
gemini==0.3.1
fireworks==0.4.0
sentence_transformers==2.2.2

現(xiàn)在,安裝這些相依性:

pip install -r requirements.txt

3. 設(shè)定 API 金鑰

我們將使用 OpenAIGeminiFireworks 來(lái)產(chǎn)生聊天機(jī)器人的回應(yīng)。您可以根據(jù)自己的喜好選擇其中任何一個(gè)。

如果您正在嘗試,請(qǐng)不要擔(dān)心,F(xiàn)ireworks 免費(fèi)提供價(jià)值 1 美元的 API 金鑰,gemini-1.5-flash 型號(hào)在一定程度上也是免費(fèi)的!

設(shè)定 .env 檔案來(lái)儲(chǔ)存您首選模型的 API 金鑰:

mkdir rag-chatbot
cd rag-chatbot
python -m venv venv
source venv/bin/activate

請(qǐng)務(wù)必註冊(cè)這些服務(wù)並取得您的 API 金鑰。 GeminiFireworks 皆提供免費(fèi)套餐,而 OpenAI 依使用情況收費(fèi)。


文件處理和分塊

為了提供聊天機(jī)器人上下文,我們需要處理文件並將它們分成可管理的區(qū)塊。這很重要,因?yàn)樾枰纸獯笪谋疽赃M(jìn)行嵌入和索引。

1.建立document_processor.py

建立一個(gè)名為 document_processor.py 的新 Python 腳本來(lái)處理文件處理:

langchain==0.0.329
streamlit==1.27.2
faiss-cpu==1.7.4
python-dotenv==1.0.0
tiktoken==0.5.1
openai==0.27.10
gemini==0.3.1
fireworks==0.4.0
sentence_transformers==2.2.2

此腳本載入一個(gè)文字文件,並將其分割成約 1000 個(gè)字元的較小區(qū)塊,並有少量重疊,以確保區(qū)塊之間不會(huì)遺失上下文。處理完成後,文件就可以嵌入並建立索引了。


建立嵌入和索引

現(xiàn)在我們已經(jīng)對(duì)文件進(jìn)行了分塊,下一步是將它們轉(zhuǎn)換為嵌入(文字的數(shù)字表示)並為它們建立索引以便快速檢索。 (因?yàn)闄C(jī)器理解數(shù)字比理解單字更容易)

1.創(chuàng)建embedding_indexer.py

建立另一個(gè)名為 embedding_indexer.py 的腳本:

pip install -r requirements.txt

在此腳本中,嵌入是使用 Hugging Face 模型(all-MiniLM-L6-v2)建立的。然後,我們將這些嵌入儲(chǔ)存在 FAISS 向量?jī)?chǔ)存中,這使我們能夠根據(jù)查詢快速檢索相似的文字區(qū)塊。


實(shí)施檢索和回應(yīng)生成

令人興奮的部分來(lái)了:將檢索與語(yǔ)言生成結(jié)合!現(xiàn)在,您將建立一個(gè) RAG 鏈 ,它從向量?jī)?chǔ)存中取得相關(guān)區(qū)塊並使用語(yǔ)言模型產(chǎn)生回應(yīng)。 (向量?jī)?chǔ)存是一個(gè)資料庫(kù),我們儲(chǔ)存轉(zhuǎn)換為數(shù)字作為向量的資料)

1.創(chuàng)建rag_chain.py

讓我們建立檔案 rag_chain.py:

# Uncomment your API key
# OPENAI_API_KEY=your_openai_api_key_here
# GEMINI_API_KEY=your_gemini_api_key_here
# FIREWORKS_API_KEY=your_fireworks_api_key_here

在這裡,我們根據(jù)您提供的 API 金鑰在 OpenAI、GeminiFireworks 之間進(jìn)行選擇。 RAG 鏈將檢索前 3 個(gè)最相關(guān)的文檔,並使用語(yǔ)言模型產(chǎn)生回應(yīng)。

您可以根據(jù)自己的預(yù)算或使用偏好在模型之間切換 - GeminiFireworks 是免費(fèi)的,而 OpenAI 根據(jù)使用情況收費(fèi)。


建構(gòu)聊天機(jī)器人介面

現(xiàn)在,我們將建立一個(gè)簡(jiǎn)單的聊天機(jī)器人介面,以使用我們的 RAG 鏈獲取用戶輸入並產(chǎn)生回應(yīng)。

1.創(chuàng)建chatbot.py

建立一個(gè)名為chatbot.py的新檔案:

mkdir rag-chatbot
cd rag-chatbot
python -m venv venv
source venv/bin/activate

此腳本建立一個(gè)命令列聊天機(jī)器人介面,持續(xù)偵聽使用者輸入,透過(guò) RAG 鏈對(duì)其進(jìn)行處理,並傳回產(chǎn)生的回應(yīng)。


建立 Streamlit UI

是時(shí)候使用 Streamlit 建立 Web 介面,讓您的聊天機(jī)器人更加用戶友好。這將允許用戶透過(guò)瀏覽器與您的聊天機(jī)器人互動(dòng)。

1.創(chuàng)建app.py

建立app.py:

langchain==0.0.329
streamlit==1.27.2
faiss-cpu==1.7.4
python-dotenv==1.0.0
tiktoken==0.5.1
openai==0.27.10
gemini==0.3.1
fireworks==0.4.0
sentence_transformers==2.2.2

2. 運(yùn)行 Streamlit 應(yīng)用程式

要運(yùn)行您的 Streamlit 應(yīng)用程序,只需使用:

pip install -r requirements.txt

這將啟動(dòng)一個(gè)網(wǎng)頁(yè)介面,您可以在其中上傳文字檔案、提出問(wèn)題並從聊天機(jī)器人接收答案。


優(yōu)化效能

為了獲得更好的效能,您可以在分割文字時(shí)嘗試區(qū)塊大小和重疊。較大的區(qū)塊提供更多上下文,但較小的區(qū)塊可能使檢索速度更快。您也可以使用 Streamlit 快取 來(lái)避免重複產(chǎn)生嵌入等昂貴的操作。

如果您想要最佳化成本,可以依照查詢複雜度在OpenAI、GeminiFireworks 之間切換— 使用OpenAI對(duì)於複雜的問(wèn)題,GeminiFireworks 對(duì)於更簡(jiǎn)單的問(wèn)題以降低成本。


總結(jié)

恭喜!您已成功創(chuàng)建自己的基於 RAG 的聊天機(jī)器人?,F(xiàn)在,可能性是無(wú)限的:

    創(chuàng)建您自己的個(gè)人化學(xué)習(xí)夥伴。
  • 不再需要查看冗長(zhǎng)的文件 - 只需「RAG it out」即可獲得快速、準(zhǔn)確的答案!
旅程從這裡開始,潛力無(wú)限!


您可以在 GitHub 上關(guān)注我的工作。請(qǐng)隨時(shí)與我聯(lián)繫 - 我的 DM 在 X 和 LinkedIn 上始終開放。

以上是創(chuàng)建您自己的 AI RAG 聊天機(jī)器人:LangChain 的 Python 指南的詳細(xì)內(nèi)容。更多資訊請(qǐng)關(guān)注PHP中文網(wǎng)其他相關(guān)文章!

本網(wǎng)站聲明
本文內(nèi)容由網(wǎng)友自願(yuàn)投稿,版權(quán)歸原作者所有。本站不承擔(dān)相應(yīng)的法律責(zé)任。如發(fā)現(xiàn)涉嫌抄襲或侵權(quán)的內(nèi)容,請(qǐng)聯(lián)絡(luò)admin@php.cn

熱AI工具

Undress AI Tool

Undress AI Tool

免費(fèi)脫衣圖片

Undresser.AI Undress

Undresser.AI Undress

人工智慧驅(qū)動(dòng)的應(yīng)用程序,用於創(chuàng)建逼真的裸體照片

AI Clothes Remover

AI Clothes Remover

用於從照片中去除衣服的線上人工智慧工具。

Clothoff.io

Clothoff.io

AI脫衣器

Video Face Swap

Video Face Swap

使用我們完全免費(fèi)的人工智慧換臉工具,輕鬆在任何影片中換臉!

熱工具

記事本++7.3.1

記事本++7.3.1

好用且免費(fèi)的程式碼編輯器

SublimeText3漢化版

SublimeText3漢化版

中文版,非常好用

禪工作室 13.0.1

禪工作室 13.0.1

強(qiáng)大的PHP整合開發(fā)環(huán)境

Dreamweaver CS6

Dreamweaver CS6

視覺(jué)化網(wǎng)頁(yè)開發(fā)工具

SublimeText3 Mac版

SublimeText3 Mac版

神級(jí)程式碼編輯軟體(SublimeText3)

Python類中的多態(tài)性 Python類中的多態(tài)性 Jul 05, 2025 am 02:58 AM

多態(tài)是Python面向?qū)ο缶幊讨械暮诵母拍?,指“一種接口,多種實(shí)現(xiàn)”,允許統(tǒng)一處理不同類型的對(duì)象。 1.多態(tài)通過(guò)方法重寫實(shí)現(xiàn),子類可重新定義父類方法,如Animal類的speak()方法在Dog和Cat子類中有不同實(shí)現(xiàn)。 2.多態(tài)的實(shí)際用途包括簡(jiǎn)化代碼結(jié)構(gòu)、增強(qiáng)可擴(kuò)展性,例如圖形繪製程序中統(tǒng)一調(diào)用draw()方法,或遊戲開發(fā)中處理不同角色的共同行為。 3.Python實(shí)現(xiàn)多態(tài)需滿足:父類定義方法,子類重寫該方法,但不要求繼承同一父類,只要對(duì)象實(shí)現(xiàn)相同方法即可,這稱為“鴨子類型”。 4.注意事項(xiàng)包括保持方

我如何寫一個(gè)簡(jiǎn)單的'你好,世界!” Python的程序? 我如何寫一個(gè)簡(jiǎn)單的'你好,世界!” Python的程序? Jun 24, 2025 am 12:45 AM

"Hello,World!"程序是用Python編寫的最基礎(chǔ)示例,用於展示基本語(yǔ)法並驗(yàn)證開發(fā)環(huán)境是否正確配置。 1.它通過(guò)一行代碼print("Hello,World!")實(shí)現(xiàn),運(yùn)行後會(huì)在控制臺(tái)輸出指定文本;2.運(yùn)行步驟包括安裝Python、使用文本編輯器編寫代碼、保存為.py文件、在終端執(zhí)行該文件;3.常見錯(cuò)誤有遺漏括號(hào)或引號(hào)、誤用大寫Print、未保存為.py格式以及運(yùn)行環(huán)境錯(cuò)誤;4.可選工具包括本地文本編輯器 終端、在線編輯器(如replit.com)

Python中的算法是什麼?為什麼它們很重要? Python中的算法是什麼?為什麼它們很重要? Jun 24, 2025 am 12:43 AM

AlgorithmsinPythonareessentialforefficientproblem-solvinginprogramming.Theyarestep-by-stepproceduresusedtosolvetaskslikesorting,searching,anddatamanipulation.Commontypesincludesortingalgorithmslikequicksort,searchingalgorithmslikebinarysearch,andgrap

什麼是python的列表切片? 什麼是python的列表切片? Jun 29, 2025 am 02:15 AM

ListslicinginPythonextractsaportionofalistusingindices.1.Itusesthesyntaxlist[start:end:step],wherestartisinclusive,endisexclusive,andstepdefinestheinterval.2.Ifstartorendareomitted,Pythondefaultstothebeginningorendofthelist.3.Commonusesincludegetting

python`@classmethod'裝飾師解釋了 python`@classmethod'裝飾師解釋了 Jul 04, 2025 am 03:26 AM

類方法是Python中通過(guò)@classmethod裝飾器定義的方法,其第一個(gè)參數(shù)為類本身(cls),用於訪問(wèn)或修改類狀態(tài)。它可通過(guò)類或?qū)嵗{(diào)用,影響的是整個(gè)類而非特定實(shí)例;例如在Person類中,show_count()方法統(tǒng)計(jì)創(chuàng)建的對(duì)像數(shù)量;定義類方法時(shí)需使用@classmethod裝飾器並將首參命名為cls,如change_var(new_value)方法可修改類變量;類方法與實(shí)例方法(self參數(shù))、靜態(tài)方法(無(wú)自動(dòng)參數(shù))不同,適用於工廠方法、替代構(gòu)造函數(shù)及管理類變量等場(chǎng)景;常見用途包括從

Python函數(shù)參數(shù)和參數(shù) Python函數(shù)參數(shù)和參數(shù) Jul 04, 2025 am 03:26 AM

參數(shù)(parameters)是定義函數(shù)時(shí)的佔(zhàn)位符,而傳參(arguments)是調(diào)用時(shí)傳入的具體值。 1.位置參數(shù)需按順序傳遞,順序錯(cuò)誤會(huì)導(dǎo)致結(jié)果錯(cuò)誤;2.關(guān)鍵字參數(shù)通過(guò)參數(shù)名指定,可改變順序且提高可讀性;3.默認(rèn)參數(shù)值在定義時(shí)賦值,避免重複代碼,但應(yīng)避免使用可變對(duì)像作為默認(rèn)值;4.args和*kwargs可處理不定數(shù)量的參數(shù),適用於通用接口或裝飾器,但應(yīng)謹(jǐn)慎使用以保持可讀性。

如何使用CSV模塊在Python中使用CSV文件? 如何使用CSV模塊在Python中使用CSV文件? Jun 25, 2025 am 01:03 AM

Python的csv模塊提供了讀寫CSV文件的簡(jiǎn)單方法。 1.讀取CSV文件時(shí),可使用csv.reader()逐行讀取,並將每行數(shù)據(jù)作為字符串列表返回;若需通過(guò)列名訪問(wèn)數(shù)據(jù),則可用csv.DictReader(),它將每行映射為字典。 2.寫入CSV文件時(shí),使用csv.writer()並調(diào)用writerow()或writerows()方法寫入單行或多行數(shù)據(jù);若要寫入字典數(shù)據(jù),則使用csv.DictWriter(),需先定義列名並通過(guò)writeheader()寫入表頭。 3.處理邊緣情況時(shí),模塊自動(dòng)處理

解釋Python發(fā)電機(jī)和迭代器。 解釋Python發(fā)電機(jī)和迭代器。 Jul 05, 2025 am 02:55 AM

迭代器是實(shí)現(xiàn)__iter__()和__next__()方法的對(duì)象,生成器是簡(jiǎn)化版的迭代器,通過(guò)yield關(guān)鍵字自動(dòng)實(shí)現(xiàn)這些方法。 1.迭代器每次調(diào)用next()返回一個(gè)元素,無(wú)更多元素時(shí)拋出StopIteration異常。 2.生成器通過(guò)函數(shù)定義,使用yield按需生成數(shù)據(jù),節(jié)省內(nèi)存且支持無(wú)限序列。 3.處理已有集合時(shí)用迭代器,動(dòng)態(tài)生成大數(shù)據(jù)或需惰性求值時(shí)用生成器,如讀取大文件時(shí)逐行加載。注意:列表等可迭代對(duì)像不是迭代器,迭代器到盡頭後需重新創(chuàng)建,生成器只能遍歷一次。

See all articles