[大模型]Langchain-Chatchat安装和使用

2024-04-18 1339阅读

项目地址:

https://github.com/chatchat-space/Langchain-Chatchat

快速上手

1. 环境配置

  • 首先,确保你的机器安装了 Python 3.8 - 3.11 (我们强烈推荐使用 Python3.11)。
    $ python --version
    Python 3.11.7
    

    接着,创建一个虚拟环境,并在虚拟环境内安装项目的依赖

    # 拉取仓库
    $ git clone https://github.com/chatchat-space/Langchain-Chatchat.git
    # 进入目录
    $ cd Langchain-Chatchat
    # 安装全部依赖
    $ pip install -r requirements.txt 
    $ pip install -r requirements_api.txt
    $ pip install -r requirements_webui.txt  
    # 默认依赖包括基本运行环境(FAISS向量库)。如果要使用 milvus/pg_vector 等向量库,请将 requirements.txt 中相应依赖取消注释再安装。

    请注意,LangChain-Chatchat 0.2.x 系列是针对 Langchain 0.0.x 系列版本的,如果你使用的是 Langchain 0.1.x 系列版本,需要降级您的Langchain版本。

    2, 模型下载

    如需在本地或离线环境下运行本项目,需要首先将项目所需的模型下载至本地,通常开源 LLM 与 Embedding 模型可以从 HuggingFace 下载。

    以本项目中默认使用的 LLM 模型 THUDM/ChatGLM3-6B 与 Embedding 模型 BAAI/bge-large-zh 为例:

    下载模型需要先安装 Git LFS ,然后运行

    $ git lfs install
    $ git clone https://huggingface.co/THUDM/chatglm3-6b
    $ git clone https://huggingface.co/BAAI/bge-large-zh

    3. 初始化知识库和配置文件

    按照下列方式初始化自己的知识库和简单的复制配置文件

    $ python copy_config_example.py
    $ python init_database.py --recreate-vs

    4. 一键启动

    按照以下命令启动项目

    $ python startup.py -a

    5. 启动界面示例

    如果正常启动,你将能看到以下界面

    1. FastAPI Docs 界面

    [大模型]Langchain-Chatchat安装和使用

    1. Web UI 启动界面示例:
    • Web UI 对话界面:

      [大模型]Langchain-Chatchat安装和使用

      • Web UI 知识库管理页面:

        [大模型]Langchain-Chatchat安装和使用

        注意

        以上方式只是为了快速上手,如果需要更多的功能和自定义启动方式 ,请参考Wiki

VPS购买请点击我

免责声明:我们致力于保护作者版权,注重分享,被刊用文章因无法核实真实出处,未能及时与作者取得联系,或有版权异议的,请联系管理员,我们会立即处理! 部分文章是来自自研大数据AI进行生成,内容摘自(百度百科,百度知道,头条百科,中国民法典,刑法,牛津词典,新华词典,汉语词典,国家院校,科普平台)等数据,内容仅供学习参考,不准确地方联系删除处理! 图片声明:本站部分配图来自人工智能系统AI生成,觅知网授权图片,PxHere摄影无版权图库和百度,360,搜狗等多加搜索引擎自动关键词搜索配图,如有侵权的图片,请第一时间联系我们,邮箱:ciyunidc@ciyunshuju.com。本站只作为美观性配图使用,无任何非法侵犯第三方意图,一切解释权归图片著作权方,本站不承担任何责任。如有恶意碰瓷者,必当奉陪到底严惩不贷!

目录[+]