为本地 HA 服务器集群设置虚拟机

按照以下步骤在本地部署的服务器集群上设置和配置 VM。首先在主节点上配置 VM，然后在每个工作节点上配置 VM。NVIDIA 建议将虚拟机安装在不同的物理服务器上，以提高硬件故障时的冗余性。

系统要求

验证集群中的每个节点（主节点和两个工作节点）是否满足 VM 要求。

端口要求

确认所需的端口已打开以进行通信。

此外，对于内部集群通信，您必须打开以下端口

安装和配置

1. 下载 NetQ 映像。

   a. 登录您的 NVIDIA 应用程序中心 帐户。
   b. 选择NVIDIA 许可门户。
   c. 从菜单中选择软件下载。
   d. 单击产品系列，然后选择 NetQ。
   e. 对于使用 KVM 的部署，下载 NetQ SW 4.12 KVM 映像。对于使用 VMware 的部署，下载 NetQ SW 4.12 VMware 映像
   f. 如果出现提示，请阅读许可协议并继续下载。
   

2. 打开您的虚拟机监控程序并配置您的 VM。您可以参考以下示例，或使用您自己的虚拟机监控程序说明。

3. 登录到 VM 并更改密码。

首次登录时使用默认凭据

• 用户名：cumulus
• 密码：cumulus

$ ssh cumulus@<ipaddr>
Warning: Permanently added '<ipaddr>' (ECDSA) to the list of known hosts.
Ubuntu 20.04 LTS
cumulus@<ipaddr>'s password:
You are required to change your password immediately (root enforced)
System information as of Thu Dec  3 21:35:42 UTC 2020
System load:  0.09              Processes:           120
Usage of /:   8.1% of 61.86GB   Users logged in:     0
Memory usage: 5%                IP address for eth0: <ipaddr>
Swap usage:   0%
WARNING: Your password has expired.
You must change your password now and login again!
Changing password for cumulus.
(current) UNIX password: cumulus
Enter new UNIX password:
Retype new UNIX password:
passwd: password updated successfully
Connection to <ipaddr> closed.

使用您的新密码再次登录。

$ ssh cumulus@<ipaddr>
Warning: Permanently added '<ipaddr>' (ECDSA) to the list of known hosts.
Ubuntu 20.04 LTS
cumulus@<ipaddr>'s password:
  System information as of Thu Dec  3 21:35:59 UTC 2020
  System load:  0.07              Processes:           121
  Usage of /:   8.1% of 61.86GB   Users logged in:     0
  Memory usage: 5%                IP address for eth0: <ipaddr>
  Swap usage:   0%
Last login: Thu Dec  3 21:35:43 2020 from <local-ipaddr>
cumulus@ubuntu:~$

4. 验证主节点是否已准备好进行安装。在安装 NetQ 软件之前修复任何错误。

cumulus@hostname:~$ sudo opta-check

5. 从默认值更改 VM 的主机名。

NetQ 虚拟机的默认主机名为 ubuntu。更改主机名以符合您的命名约定，同时满足 Internet 和 Kubernetes 命名标准。

使用以下命令

cumulus@hostname:~$ sudo hostnamectl set-hostname NEW_HOSTNAME

将相同的 NEW_HOSTNAME 值添加到 VM 上的 /etc/hosts 以用于 localhost 条目。例如

127.0.0.1 localhost NEW_HOSTNAME

6. 打开您的虚拟机监控程序，并以与主节点相同的方式设置 VM。

   记下您分配给工作节点的私有 IP 地址。您将需要它来完成安装。

7. 验证工作节点是否已准备好进行安装。在安装 NetQ 软件之前修复指示的任何错误。

cumulus@hostname:~$ sudo opta-check

8. 对集群中的每个附加工作节点重复步骤 6 和 7。

9. 使用 CLI 安装和激活 NetQ 软件。

在您的主节点上运行以下命令以初始化集群。复制命令的输出以在您的工作节点上使用

cumulus@<hostname>:~$ netq install cluster master-init
    Please run the following command on all worker nodes:
    netq install cluster worker-init c3NoLXJzYSBBQUFBQjNOemFDMXljMkVBQUFBREFRQUJBQUFCQVFDM2NjTTZPdVM3dQN9MWTU1a

10. 在每个工作节点上运行 netq install cluster worker-init <ssh-key> 命令。

11. 在您的主节点上运行以下命令，使用您的工作节点的 IP 地址和 HA 集群虚拟 IP 地址 (VIP)

cumulus@<hostname>:~$ netq install cluster full interface eth0 bundle /mnt/installables/NetQ-4.12.0.tgz workers <worker-1-ip> <worker-2-ip> cluster-vip <vip-ip>

cumulus@hostname:~$ netq install cluster full interface eth0 bundle /mnt/installables/NetQ-4.12.0.tgz workers <worker-1-ip> <worker-2-ip> pod-ip-range <pod-ip-range> service-ip-range <service-ip-range>

cumulus@hostname:~$ netq install cluster full ip-addr <ip-address> bundle /mnt/installables/NetQ-4.12.0.tgz workers <worker-1-ip> <worker-2-ip>

验证安装状态

要查看安装状态，请使用 netq show status [verbose] 命令。以下示例显示了成功的本地安装

State: Active
    NetQ Live State: Active
    Installation Status: FINISHED
    Version: 4.12.0
    Installer Version: 4.12.0
    Installation Type: Cluster
    Activation Key: EhVuZXRxLWVuZHBvaW50LWdhdGV3YXkYsagDIixPSUJCOHBPWUFnWXI2dGlGY2hTRzExR2E5aSt6ZnpjOUvpVVTaDdpZEhFPQ==
    Master SSH Public Key: c3NoLXJzYSBBQUFBQjNOemFDMXljMkVBQUFBREFRQUJBQUFCZ1FDNW9iVXB6RkczNkRC
    Is Cloud: False
    
    Kubernetes Cluster Nodes Status:
    IP Address    Hostname     Role    NodeStatus    Virtual IP
    ------------  -----------  ------  ------------  ------------
    10.213.7.52   10.213.7.52  Worker  Ready         10.213.7.53
    10.213.7.51   10.213.7.51  Worker  Ready         10.213.7.53
    10.213.7.49   10.213.7.49  Master  Ready         10.213.7.53
    
    In Summary, Live state of the NetQ is... Active

运行 netq show opta-health 命令以验证所有应用程序是否正常运行。至少等待 15 分钟，让所有应用程序启动并报告其状态。

cumulus@hostname:~$ netq show opta-health
    Application                                            Status    Namespace      Restarts    Timestamp
    -----------------------------------------------------  --------  -------------  ----------  ------------------------
    cassandra-rc-0-w7h4z                                   READY     default        0           Fri Apr 10 16:08:38 2020
    cp-schema-registry-deploy-6bf5cbc8cc-vwcsx             READY     default        0           Fri Apr 10 16:08:38 2020
    kafka-broker-rc-0-p9r2l                                READY     default        0           Fri Apr 10 16:08:38 2020
    kafka-connect-deploy-7799bcb7b4-xdm5l                  READY     default        0           Fri Apr 10 16:08:38 2020
    netq-api-gateway-deploy-55996ff7c8-w4hrs               READY     default        0           Fri Apr 10 16:08:38 2020
    netq-app-address-deploy-66776ccc67-phpqk               READY     default        0           Fri Apr 10 16:08:38 2020
    netq-app-admin-oob-mgmt-server                         READY     default        0           Fri Apr 10 16:08:38 2020
    netq-app-bgp-deploy-7dd4c9d45b-j9bfr                   READY     default        0           Fri Apr 10 16:08:38 2020
    netq-app-clagsession-deploy-69564895b4-qhcpr           READY     default        0           Fri Apr 10 16:08:38 2020
    netq-app-configdiff-deploy-ff54c4cc4-7rz66             READY     default        0           Fri Apr 10 16:08:38 2020
    ...