为单台本地服务器设置虚拟机

请按照以下步骤在本地部署中的单台服务器上设置和配置您的虚拟机。


系统要求

验证您的系统是否满足 VM 要求。

资源最低要求
处理器16 个虚拟 CPU
内存64 GB 内存
本地磁盘存储500 GB SSD,最小磁盘 IOPS 为 1000(标准 4kb 块大小)
(注意:这必须是 SSD;其他存储选项可能导致系统不稳定,且不受支持。)
网络接口速度1 Gb NIC
虚拟机监控程序KVM/QCOW(QEMU Copy on Write)映像,适用于运行 Ubuntu 的服务器;
VMware ESXi™ 6.5 或更高版本(OVA 映像),适用于运行 Cumulus Linux 或 Ubuntu 的服务器

端口要求

确认所需的端口已打开以进行通信。

端口或协议号协议组件访问
4IP 协议Calico 网络(IP-in-IP 协议)
22TCPSSH
80TCPnginx
179TCPCalico 网络 (BGP)
443TCPNetQ UI
2379TCPetcd 数据存储
4789UDPCalico 网络 (VxLAN)
5000TCPDocker 注册表
6443TCPkube-apiserver
30001TCPDPU 通信
31980TCPNetQ 代理通信
31982TCPNetQ 代理 SSL 通信
32708TCPAPI 网关

安装和配置

  1. 下载 NetQ 映像。

    a. 登录您的 NVIDIA 应用程序中心 帐户。
    b. 选择NVIDIA 许可门户
    c. 从菜单中选择软件下载
    d. 单击产品系列,然后选择 NetQ
    e. 对于使用 KVM 的部署,请下载 NetQ SW 4.12 KVM 映像。对于使用 VMware 的部署,请下载 NetQ SW 4.12 VMware 映像。
    f. 如果出现提示,请阅读许可协议并继续下载。

NVIDIA 员工可以直接从 NVIDIA 许可门户 下载 NetQ。

  1. 打开虚拟机监控程序并配置您的 VM。您可以参考以下示例,或使用您自己的虚拟机监控程序说明。

KVM 示例配置

此示例展示了安装了 Libvirt 和 KVM/QEMU 的系统的 VM 设置过程。

  1. 确认 SHA256 校验和与 NVIDIA 应用程序中心上发布的校验和匹配,以确保映像下载未损坏。

    $ sha256sum ./Downloads/netq-4.12.0-ubuntu-20.04-ts-qemu.qcow2
    $ a0d9a4f9ce8925b7dfb90a5a44616cadbf3fc667013abae07cd774555c08ff6f ./Downloads/netq-4.12.0-ubuntu-20.04-ts-qemu.qcow2
  2. 将 QCOW2 映像复制到您要运行它的目录。

    提示:复制而不是移动下载的原始 QCOW2 映像,以避免以后需要再次执行此过程时重新下载。

    $ sudo mkdir /vms
    $ sudo cp ./Downloads/netq-4.12.0-ubuntu-20.04-ts-qemu.qcow2 /vms/ts.qcow2
  3. 创建 VM。

    对于直接 VM,其中 VM 使用 MACVLAN 接口位于主机接口上以进行连接

    $ virt-install --name=netq_ts --vcpus=16 --memory=65536 --os-type=linux --os-variant=generic --disk path=/vms/ts.qcow2,format=qcow2,bus=virtio,cache=none --network=type=direct,source=eth0,model=virtio --import --noautoconsole

    将磁盘路径值替换为 QCOW2 映像所在的路径。将网络模型值(以上示例中的 eth0)替换为 VM 连接到外部网络的接口名称。

    或者,对于桥接 VM,其中 VM 连接到已设置为允许外部访问的网桥

    $ virt-install --name=netq_ts --vcpus=16 --memory=65536 --os-type=linux --os-variant=generic \ --disk path=/vms/ts.qcow2,format=qcow2,bus=virtio,cache=none --network=bridge=br0,model=virtio --import --noautoconsole

    将网络桥接值(以上示例中的 br0)替换为 VM 连接到外部网络的(预先存在的)桥接接口名称。

    记下安装期间使用的名称,因为稍后的步骤中需要用到。

  4. 在另一个终端窗口中观看启动过程。
    $ virsh console netq_ts
VMware 示例配置此示例展示了使用带有 VMware ESXi 的 OVA 文件设置 VM 的过程。
  1. 在浏览器中输入硬件地址。

  2. 使用具有 root 访问权限的凭据登录 VMware。

  3. 单击导航器中的存储,以验证您是否安装了 SSD。

  4. 单击右侧窗格顶部的创建/注册 VM

  5. 选择从 OVF 或 OVA 文件部署虚拟机,然后单击下一步

  6. 为 VM 提供名称,例如NetQ

    提示:记下安装期间使用的名称,因为稍后的步骤中需要用到。

  7. 拖放您在上面的步骤 1 中下载的 NetQ 平台映像文件。

  8. 单击下一步

  9. 选择映像要使用的存储类型和数据存储,然后单击下一步。在此示例中,只有一个可用。

  10. 接受默认部署选项,或根据您的网络需求进行修改。完成后,单击下一步

  11. 查看配置摘要。单击返回以更改任何设置,或单击完成以继续创建 VM。

    请求的进度显示在应用程序底部的“最近的任务”窗口中。这可能需要一些时间,因此请继续执行您的其他工作,直到上传完成。

  12. 完成后,查看 VM 和硬件的完整详细信息。

  1. 登录 VM 并更改密码。

首次登录时使用默认凭据

  • 用户名:cumulus
  • 密码:cumulus
$ ssh cumulus@<ipaddr>
Warning: Permanently added '<ipaddr>' (ECDSA) to the list of known hosts.
Ubuntu 20.04 LTS
cumulus@<ipaddr>'s password:
You are required to change your password immediately (root enforced)
System information as of Thu Dec  3 21:35:42 UTC 2020
System load:  0.09              Processes:           120
Usage of /:   8.1% of 61.86GB   Users logged in:     0
Memory usage: 5%                IP address for eth0: <ipaddr>
Swap usage:   0%
WARNING: Your password has expired.
You must change your password now and login again!
Changing password for cumulus.
(current) UNIX password: cumulus
Enter new UNIX password:
Retype new UNIX password:
passwd: password updated successfully
Connection to <ipaddr> closed.

使用新密码再次登录。

$ ssh cumulus@<ipaddr>
Warning: Permanently added '<ipaddr>' (ECDSA) to the list of known hosts.
Ubuntu 20.04 LTS
cumulus@<ipaddr>'s password:
  System information as of Thu Dec  3 21:35:59 UTC 2020
  System load:  0.07              Processes:           121
  Usage of /:   8.1% of 61.86GB   Users logged in:     0
  Memory usage: 5%                IP address for eth0: <ipaddr>
  Swap usage:   0%
Last login: Thu Dec  3 21:35:43 2020 from <local-ipaddr>
cumulus@ubuntu:~$
  1. 验证平台是否已准备好进行安装。在安装 NetQ 软件之前修复任何错误。
cumulus@hostname:~$ sudo opta-check
  1. 将 VM 的主机名从默认值更改。

NetQ 虚拟机的默认主机名为 ubuntu。更改主机名以符合您的命名约定,同时满足 Internet 和 Kubernetes 命名标准。

Kubernetes 要求主机名由一系列标签组成,并用点连接。例如,“en.wikipedia.org”是一个主机名。每个标签的长度必须为 1 到 63 个字符。包括分隔点在内的整个主机名的最大长度为 253 个 ASCII 字符。

协议的 Internet 标准 (RFC) 规定,标签可能只包含 ASCII 字母 a 到 z(小写)、数字 0 到 9 和连字符“-”。

使用以下命令

cumulus@hostname:~$ sudo hostnamectl set-hostname NEW_HOSTNAME

将相同的 NEW_HOSTNAME 值添加到 VM 上的 /etc/hosts 中的 localhost 条目。例如

127.0.0.1 localhost NEW_HOSTNAME
  1. 在您的 NetQ 服务器上运行安装命令
cumulus@hostname:~$ netq install standalone full interface eth0 bundle /mnt/installables/NetQ-4.12.0.tgz

NetQ 默认使用 10.244.0.0/16 (pod-ip-range) 和 10.96.0.0/16 (service-ip-range) 网络进行内部通信。如果您正在使用这些网络,则必须通过在 install 命令中为这些参数指定新的子网来覆盖每个范围

cumulus@hostname:~$ netq install standalone full interface eth0 bundle /mnt/installables/NetQ-4.12.0.tgz pod-ip-range <pod-ip-range> service-ip-range <service-ip-range>

您可以使用 ip-addr <ip-address> 参数指定服务器的 IP 地址而不是接口名称

cumulus@hostname:~$ netq install standalone full ip-addr <ip-address> bundle /mnt/installables/NetQ-4.12.0.tgz

如果在安装 NetQ 后更改服务器 IP 地址或主机名,则必须使用 netq bootstrap reset keep-db 命令重置服务器,然后重新运行 install 命令。

如果此步骤因任何原因失败,请运行 netq bootstrap reset,然后重试。

验证安装状态

要查看安装状态,请使用 netq show status [verbose] 命令。以下示例显示了成功的本地安装

State: Active
    Version: 4.12.0
    Installer Version: 4.12.0
    Installation Type: Standalone
    Activation Key: PKrgipMGEhVuZXRxLWVuZHBvaW50LWdhdGV3YXkYsagDIixUQmFLTUhzZU80RUdTL3pOT01uQ2lnRnrrUhTbXNPUGRXdnUwTVo5SEpBPTIHZGVmYXVsdDoHbmV0cWRldgz=
    Master SSH Public Key: a3NoLXJzYSBBQUFNOemFDMXljMkVBQUFBREFRQUJBQUFCQVFEazliekZDblJUajkvQVhOZ0hteXByTzZIb3Y2cVZBWFdsNVNtKzVrTXo3dmMrcFNZTGlOdWl1bEhZeUZZVDhSNmU3bFdqS3NrSE10bzArNFJsQVd6cnRvbVVzLzlLMzQ4M3pUMjVZQXpIU2N1ZVhBSE1TdZ0JyUkpXYUpTNjJ2RTkzcHBDVjBxWWJvUFo3aGpCY3ozb0VVWnRsU1lqQlZVdjhsVjBNN3JEWW52TXNGSURWLzJ2eks3K0x2N01XTG5aT054S09hdWZKZnVOT0R4YjFLbk1mN0JWK3hURUpLWW1mbTY1ckoyS1ArOEtFUllrr5TkF3bFVRTUdmT3daVNoZnpQajMwQ29CWDZZMzVST2hDNmhVVnN5OEkwdjVSV0tCbktrWk81MWlMSDAyZUpJbXJHUGdQa2s1SzhJdGRrQXZISVlTZ0RwRlpRb3Igcm9vdEBucXRzLTEwLTE4OC00NC0xNDc=
    Is Cloud: False
    
    Standalone Status:
    IP Address     Hostname       Role    Status
    -------------  -------------  ------  --------
    10.188.44.147  10.188.44.147  Role    Ready
    
    NetQ... Active

运行 netq show opta-health 命令以验证所有应用程序是否正常运行。至少等待 15 分钟,让所有应用程序启动并报告其状态。

cumulus@hostname:~$ netq show opta-health
    Application                                            Status    Namespace      Restarts    Timestamp
    -----------------------------------------------------  --------  -------------  ----------  ------------------------
    cassandra-rc-0-w7h4z                                   READY     default        0           Fri Apr 10 16:08:38 2020
    cp-schema-registry-deploy-6bf5cbc8cc-vwcsx             READY     default        0           Fri Apr 10 16:08:38 2020
    kafka-broker-rc-0-p9r2l                                READY     default        0           Fri Apr 10 16:08:38 2020
    kafka-connect-deploy-7799bcb7b4-xdm5l                  READY     default        0           Fri Apr 10 16:08:38 2020
    netq-api-gateway-deploy-55996ff7c8-w4hrs               READY     default        0           Fri Apr 10 16:08:38 2020
    netq-app-address-deploy-66776ccc67-phpqk               READY     default        0           Fri Apr 10 16:08:38 2020
    netq-app-admin-oob-mgmt-server                         READY     default        0           Fri Apr 10 16:08:38 2020
    netq-app-bgp-deploy-7dd4c9d45b-j9bfr                   READY     default        0           Fri Apr 10 16:08:38 2020
    netq-app-clagsession-deploy-69564895b4-qhcpr           READY     default        0           Fri Apr 10 16:08:38 2020
    netq-app-configdiff-deploy-ff54c4cc4-7rz66             READY     default        0           Fri Apr 10 16:08:38 2020
    ...

如果在 30 分钟后任何应用程序或服务显示 DOWN 状态,请打开支持票证并附加 opta-support 命令的输出。

安装 NetQ 后,您可以从浏览器登录 NetQ