运维复盘—高可用K8S的VIP原理

在项目的开发运维过程中，我们定期查看环境运行的状态，发现K8S集群的命令全部出现了问题，通过问题定位发现是许可问题，问题到位后对其加以解决。

对于运维或者开发项目来说，定期地查看环境的状态格外重要，因此我们要早发现、早定位、早解决。现对这次环境的深入了解进行详细记录，输出为文档，也为后续的工作做出沉淀。

1事情经过

通过使用UMC产品发现很多集群的信息都消失不见了，产品无法部署和查看日志，虽然这个问题很难定位，但是经过层层处理，最后解决了这个问题。

1.1情况反馈

在使用UMC产品时，我们的开发人员反馈UMC上关于集群的信息都消失了，并且对于容器的创建、删除和更新操作也都没有反应，因为环境为开发环境，所以这个情况非常紧急，需要尽快解决。

1.2问题定位

因为产品没法启动，点击操作也没有反应，因此第一次我怀疑可能是许可问题，因为产品还是在集群上运行，只是没法查看信息，但是这个集群已经做过了K8S集群到期时间的延长操作，我也怀疑可能是K8S延长操作没有做全面。

输入命令查看授权文件的日志发现没有到期，所以我在这里重启了K8S集群和docker镜像库，这时发现命令已经全部好用。

1.3后续规划

虽然已经解决了问题，但是解决的过程也是非常惊险的，因为目标环境是正在运行的生产环境，如果操作不当会造成不可挽回的损失，也暴露出来自己对集群的了解还是不够，难以快速定位问题。

2升级许可 

之前的文件有着很多漏洞，尽管给许可进行过升级但还是时间过期，所以对之前的许可升级进行补充。 

2.1许可查看 

首先输入如下命令进行许可的查看，After是许可到期的时间： 

2.2许可替换 

1.首先进行许可文件备份，防止操作不当难以还原： 

2.到/usr/bin目录，上