安装指南

本指南将引导您完成以下安装 NeMo Guardrails 的步骤

  1. 设置全新的虚拟环境。

  2. 使用 pip 安装。

  3. 从源代码安装。

  4. 可选依赖。

  5. 使用 Docker。

准备条件

Python 3.8、3.9 或 3.10。

额外依赖

NeMo Guardrails 使用 annoy,这是一个带有 Python 绑定的 C++ 库。要安装它,您的计算机上需要有一个有效的 C++ 运行时。大多数系统已经安装了 C++ 运行时。如果由于缺少 C++ 运行时而导致 annoy 安装失败,您可以按如下方式安装 C++ 运行时

在 Linux、Mac 或类 Unix 操作系统上安装 C++ 运行时

  1. 使用 apt-get install gcc g++ 安装 gccg++

  2. 更新以下环境变量:export CC=clang 路径export CXX=clang 路径(通常,clang 路径/usr/bin/clang)。

  3. 在某些情况下,您可能还需要使用 apt-get install python-dev (或 apt-get install python3-dev) 安装 python-dev 包。如果错误仍然存在,请查看此线程

在 Windows 上安装 C++ 运行时

安装 Microsoft C++ 生成工具。这将安装 Microsoft Visual C++(最新版本的 annoy 需要 14.0 或更高版本)。

设置虚拟环境

要从头开始试用 NeMo Guardrails,请使用全新的虚拟环境。否则,您可以跳到下一节。

在 Linux、Mac 或类 Unix 操作系统上设置虚拟环境

  1. 为您的项目创建一个文件夹,例如 my_assistant

> mkdir my_assistant
> cd my_assistant
  1. 创建一个虚拟环境。

> python3 -m venv venv
  1. 激活虚拟环境。

> source venv/bin/activate

在 Windows 上设置虚拟环境

  1. 打开一个新的 CMD 提示符(Windows 键 + R,cmd.exe

  2. 使用命令 pip install virtualenv 安装 virtualenv

  3. 使用命令 pip --version 检查 virtualenv 是否已安装。

  4. 使用命令 pip install virtualenvwrapper-win 安装 virtualenvwrapper-win

使用 mkvirtualenv name 命令激活一个名为 name 的新虚拟环境。

安装 NeMo Guardrails

使用 pip 安装 NeMo Guardrails

> pip install nemoguardrails

从源代码安装

NeMo Guardrails 正在积极开发中,主分支始终包含最新的开发版本。要从源代码安装

  1. 克隆存储库

    git clone https://github.com/NVIDIA/NeMo-Guardrails.git
    
  2. 在本地安装软件包

    cd NeMo-Guardrails
    pip install -e .
    

额外的依赖

nemoguardrails 包还定义了以下额外的依赖

  • dev:开发人员的某些额外 Guardrails 功能(例如 autoreload 功能)所需的软件包。

  • eval:用于 Guardrails 评估工具 的软件包。

  • openai:安装 NeMo Guardrails 支持的最新 openai 软件包。

  • sdd敏感数据检测器 集成到 NeMo Guardrails 中使用的软件包。

  • all:安装所有额外的软件包。

为了尽可能减少 nemoguardrails 的占用空间,默认情况下不安装这些依赖项。要安装任何额外的依赖项,您也可以使用 pip。例如,要安装 dev 额外的依赖项,请运行以下命令

> pip install nemoguardrails[dev]

可选依赖

要使用 OpenAI,只需使用 openai 额外的依赖项,以确保安装所有必需的软件包。确保设置了 OPENAI_API_KEY 环境变量,如下例所示,其中 YOUR_KEY 是您的 OpenAI 密钥。

> pip install nemoguardrails[openai]
> export OPENAI_API_KEY=YOUR_KEY

一些 NeMo Guardrails LLM 和功能具有特定的安装要求,包括更复杂的一组步骤。例如,AlignScore 事实核查,使用 Llama-2 需要两个额外的软件包。对于每个功能或 LLM 示例,请查看与其关联的 readme 文件。

使用 Docker

NeMo Guardrails 也可以通过 Docker 使用。有关如何构建和使用 Docker 镜像的详细信息,请参阅 使用 Docker 部署 NeMo Guardrails

下一步是什么?