国产 无码 综合区,色欲AV无码国产永久播放,无码天堂亚洲国产AV,国产日韩欧美女同一区二区

  1. Toy模板網(wǎng)首頁
  2. >Toy博客

【LangChain學(xué)習(xí)】基于PDF文檔構(gòu)建問答知識(shí)庫（一）前期準(zhǔn)備

2年前作者：reui分類：Toy博客閱讀(101)違法舉報(bào)

這篇具有很好參考價(jià)值的文章主要介紹了【LangChain學(xué)習(xí)】基于PDF文檔構(gòu)建問答知識(shí)庫（一）前期準(zhǔn)備。希望對大家有所幫助。如果存在錯(cuò)誤或未考慮完全的地方，請大家不吝賜教，您也可以點(diǎn)擊"舉報(bào)違法"按鈕提交疑問。

這系列主要介紹如何使用LangChain大模型，結(jié)合ChatGPT3.5，基于PDF文檔構(gòu)建專屬的問答知識(shí)庫。

一、 環(huán)境搭建

LangChain 和 OpenAI 本身可支持 Nodejs 和 Python 兩個(gè)版本，筆者后續(xù)的介紹主要用到Python版本，如果有需要Nodejs版本的同學(xué)，也可以給我留言，因?yàn)镹odejs版本我也實(shí)現(xiàn)了。

Python環(huán)境搭建

Python 版本為 ≥ 3.8.1 且 <4.0，強(qiáng)烈建議使用3.10版本，因?yàn)楣P者試過其他的版本出現(xiàn)的奇奇怪怪的異常錯(cuò)誤，后續(xù)介紹的代碼也是在3.10版本下通過的。

二、OpenAI

申請一個(gè)OpenAI賬號，如何申請就不再此討論，需要用到API-KEY，目前新用戶有免費(fèi)5刀三個(gè)月的優(yōu)惠期。

如果大家有能力，建議可以開一個(gè)Plus會(huì)員，訂閱每月20刀，那處理速度上真是一個(gè)質(zhì)的飛躍，筆者實(shí)測沒開通前，一次問答接口請求需要30-50秒，開通后7秒...

三、云函數(shù)

眾所周知，OpenAi 在國內(nèi)已經(jīng)走不通了，所以需要找一種代理的方式來訪問，有些云服務(wù)商目前還有新用戶免費(fèi)使用三個(gè)月的優(yōu)惠。

至于怎么搭建，也不在此討論，大家可以自行查閱資料。文章來源地址http://www.zghlxwxcb.cn/news/detail-637276.html

到了這里，關(guān)于【LangChain學(xué)習(xí)】基于PDF文檔構(gòu)建問答知識(shí)庫（一）前期準(zhǔn)備的文章就介紹完了。如果您還想了解更多內(nèi)容，請?jiān)谟疑辖撬阉鱐OY模板網(wǎng)以前的文章或繼續(xù)瀏覽下面的相關(guān)文章，希望大家以后多多支持TOY模板網(wǎng)！

本文來自互聯(lián)網(wǎng)用戶投稿，該文觀點(diǎn)僅代表作者本人，不代表本站立場。本站僅提供信息存儲(chǔ)空間服務(wù)，不擁有所有權(quán)，不承擔(dān)相關(guān)法律責(zé)任。如若轉(zhuǎn)載，請注明出處： 如若內(nèi)容造成侵權(quán)/違法違規(guī)/事實(shí)不符，請點(diǎn)擊違法舉報(bào)進(jìn)行投訴反饋，一經(jīng)查實(shí)，立即刪除！

領(lǐng)支付寶紅包贊助服務(wù)器費(fèi)用

相關(guān)文章

  • 基于GPT-4和LangChain構(gòu)建云端定制化PDF知識(shí)庫AI聊天機(jī)器人

    基于GPT-4和LangChain構(gòu)建云端定制化PDF知識(shí)庫AI聊天機(jī)器人

    參考： GitHub - mayooear/gpt4-pdf-chatbot-langchain: GPT4 LangChain Chatbot for large PDF docs 使用新的GPT-4 api為多個(gè)大型PDF文件構(gòu)建chatGPT聊天機(jī)器人。 使用的技術(shù)棧包括LangChain, Pinecone, Typescript, Openai和Next.js。LangChain是一個(gè)框架，可以更容易地構(gòu)建可擴(kuò)展的AI/LLM大語言模型應(yīng)用程序和聊天機(jī)器

    2024年02月11日
    瀏覽(19)
  • LangChain入門(四)-構(gòu)建本地知識(shí)庫問答機(jī)器人

    LangChain入門(四)-構(gòu)建本地知識(shí)庫問答機(jī)器人

    在這個(gè)例子中，我們會(huì)介紹如何從我們本地讀取多個(gè)文檔構(gòu)建知識(shí)庫，并且使用 Openai API 在知識(shí)庫中進(jìn)行搜索并給出答案。 目錄 一、安裝向量數(shù)據(jù)庫chromadb和tiktoken 二、使用案例 三、embeddings持久化 四、在線的向量數(shù)據(jù)庫Pinecone 一、安裝向量數(shù)據(jù)庫chromadb和tiktoken ?? 其中h

    2024年02月05日
    瀏覽(102)
  • 開源大模型ChatGLM2-6B 2. 跟著LangChain參考文檔搭建LLM+知識(shí)庫問答系統(tǒng)

    開源大模型ChatGLM2-6B 2. 跟著LangChain參考文檔搭建LLM+知識(shí)庫問答系統(tǒng)

    租用了1臺(tái)GPU服務(wù)器，系統(tǒng) ubuntu20，Tesla V100-16GB （GPU服務(wù)器已經(jīng)關(guān)機(jī)結(jié)束租賃了） SSH地址：* 端口：17520 SSH賬戶：root 密碼：Jaere7pa 內(nèi)網(wǎng)： 3389 ， 外網(wǎng)：17518 VNC地址：* 端口：17519 VNC用戶名：root 密碼：Jaere7pa 硬件需求，ChatGLM-6B和ChatGLM2-6B相當(dāng)。 量化等級?? ?最低 GPU 顯存 F

    2024年02月03日
    瀏覽(32)
  • 使用PAI-DSW搭建基于LangChain的檢索知識(shí)庫問答機(jī)器人

    使用PAI-DSW搭建基于LangChain的檢索知識(shí)庫問答機(jī)器人

    教程簡述 在本教程中，您將學(xué)習(xí)如何在阿里云交互式建模（PAI-DSW）中，基于LangChain的檢索知識(shí)庫實(shí)現(xiàn)知識(shí)問答。旨在建立一套對中文場景與開源模型支持友好、可離線運(yùn)行的知識(shí)庫問答解決方案。 LangChain是一個(gè)開源的框架，可以讓AI開發(fā)人員將像GPT-4這樣的大語言模型（LL

    2024年02月01日
    瀏覽(21)
  • 基于大語言模型知識(shí)問答應(yīng)用落地實(shí)踐 – 知識(shí)庫構(gòu)建（下）

    基于大語言模型知識(shí)問答應(yīng)用落地實(shí)踐 – 知識(shí)庫構(gòu)建（下）

    上篇介紹了構(gòu)建知識(shí)庫的大體流程和一些優(yōu)化經(jīng)驗(yàn)細(xì)節(jié)，但并沒有結(jié)合一個(gè)具體的場景給出更細(xì)節(jié)的實(shí)戰(zhàn)經(jīng)驗(yàn)以及相關(guān)的一些 benchmark 等，所以本文將會(huì)切入到一個(gè)具體場景進(jìn)行討論。 目標(biāo)場景：對于?PubMed?醫(yī)療學(xué)術(shù)數(shù)據(jù)中的 1w 篇文章進(jìn)行知識(shí)庫構(gòu)建，實(shí)現(xiàn)快速的注入和查

    2024年02月10日
    瀏覽(25)
  • 基于Langchain+向量數(shù)據(jù)庫+ChatGPT構(gòu)建企業(yè)級知識(shí)庫

    基于Langchain+向量數(shù)據(jù)庫+ChatGPT構(gòu)建企業(yè)級知識(shí)庫

    ▼最近直播超級多， 預(yù)約 保你有收獲 近期直播： 《 基于 LLM 大模型的向量數(shù)據(jù)庫企業(yè)級應(yīng)用實(shí)踐 》 ?1 — LangChain 是什么？ 眾所周知 OpenAI 的 API 無法聯(lián)網(wǎng)的，所以如果只使用自己的功能實(shí)現(xiàn)聯(lián)網(wǎng)搜索并給出回答、總結(jié) PDF 文檔、基于某個(gè) Youtube 視頻進(jìn)行問答等等的功能肯定

    2024年02月06日
    瀏覽(25)

  • 【Langchain】+ 【baichuan】實(shí)現(xiàn)領(lǐng)域知識(shí)庫【RAG】問答系統(tǒng)

    本項(xiàng)目使用 Langchain 和 baichuan 大模型， 結(jié)合領(lǐng)域百科詞條數(shù)據(jù)（用xlsx保存），簡單地實(shí)現(xiàn)了領(lǐng)域百科問答實(shí)現(xiàn)。

    2024年02月21日
    瀏覽(25)

  • 使用langchain+chatGPT搭建自有知識(shí)庫問答機(jī)器人

    ? ? ? ? 自去年年底OpenAI發(fā)布ChatGPT以來，大型語言模型在人工智能領(lǐng)域掀起了一股熱潮。隨后，各家公司紛紛推出自己的大型語言模型，如百度的文心一言、訊飛的星火大模型等。在這個(gè)過程中，文本轉(zhuǎn)圖片和文本轉(zhuǎn)視頻等相關(guān)領(lǐng)域也備受關(guān)注。然而，很顯然，這只是一時(shí)的

    2024年02月13日
    瀏覽(32)
  • 基于Llama2和LangChain構(gòu)建本地化定制化知識(shí)庫AI聊天機(jī)器人

    基于Llama2和LangChain構(gòu)建本地化定制化知識(shí)庫AI聊天機(jī)器人

    參考： 本項(xiàng)目?https://github.com/PromtEngineer/localGPT 模型?https://huggingface.co/TheBloke/Llama-2-7B-Chat-GGML 云端知識(shí)庫項(xiàng)目：基于GPT-4和LangChain構(gòu)建云端定制化PDF知識(shí)庫AI聊天機(jī)器人_Entropy-Go的博客-CSDN博客? ????????相比OpenAI的LLM ChatGPT模型必須網(wǎng)絡(luò)連接并通過API key云端調(diào)用模型，擔(dān)心

    2024年02月08日
    瀏覽(33)
  • AIGC：【LLM（四）】——LangChain+ChatGLM:本地知識(shí)庫問答方案

    AIGC：【LLM（四）】——LangChain+ChatGLM:本地知識(shí)庫問答方案

    LangChain+ChatGLM項(xiàng)目(https://github.com/chatchat-space/langchain-ChatGLM)實(shí)現(xiàn)原理如下圖所示 (與基于文檔的問答 大同小異，過程包括：1 加載文檔 - 2 讀取文檔 - 3/4文檔分割 - 5/6 文本向量化 - 8/9 問句向量化 - 10 在文檔向量中匹配出與問句向量最相似的top k個(gè) - 11/12/13 匹配出的文本作為上下

    2024年02月13日
    瀏覽(90)

覺得文章有用就打賞一下文章作者

支付寶掃一掃打賞

博客贊助

微信掃一掃打賞

請作者喝杯咖啡吧~博客贊助

支付寶掃一掃領(lǐng)取紅包，優(yōu)惠每天領(lǐng)

二維碼1

領(lǐng)取紅包

二維碼2

領(lǐng)紅包