如何排查centos k8s故障

排查CentOS Kubernetes（k8s）集群的故障，可以遵循以下步骤：

1. 检查集群状态

使用kubectl命令：

kubectl get nodes
kubectl get pods --all-namespaces
kubectl get services --all-namespaces

查看集群事件：

kubectl get events --sort-by=.metadata.creationTimestamp

2. 检查节点状态

查看节点详细信息：
```
kubectl describe node <node-name>
```
检查节点资源使用情况：
```
top nodes
```

3. 检查Pod状态

查看Pod详细信息：

kubectl describe pod <pod-name> -n <namespace>

查看Pod日志：
```
kubectl logs <pod-name> -n <namespace>
```

4. 检查服务和Ingress

查看服务详细信息：

kubectl describe service <service-name> -n <namespace>

检查Ingress控制器状态：

kubectl get pods -n ingress-controller-namespace

5. 检查网络问题

检查网络策略：

kubectl get networkpolicy -n <namespace>

测试网络连通性：

kubectl run -it --rm --image=busybox:1.28 netcat -- nc -zv <node-ip> <port>

6. 检查存储问题

查看PersistentVolume和PersistentVolumeClaim状态：
```
kubectl get pv
kubectl get pvc
```
检查存储类：
```
kubectl get sc
```

7. 检查控制器和调度器

查看控制器状态：

kubectl get pods -n kube-system | grep controller

检查调度器状态：
```
systemctl status kube-scheduler
```

8. 检查API服务器和etcd

查看API服务器日志：
```
journalctl -u kube-apiserver -f
```

检查etcd状态：

etcdctl member list
etcdctl endpoint health

9. 使用监控工具

使用Prometheus和Grafana：
- 查看监控仪表盘，分析性能指标。
使用Kubernetes Dashboard：
- 通过Web界面查看集群状态和资源使用情况。

10. 日志分析

收集和分析日志：
- 使用ELK Stack（Elasticsearch, Logstash, Kibana）或Fluentd进行日志收集和分析。

11. 更新和重启

更新Kubernetes组件：
```
yum update -y kubernetes*
```

重启关键组件：

systemctl restart kubelet
systemctl restart kube-proxy
systemctl restart kube-apiserver
systemctl restart kube-controller-manager
systemctl restart kube-scheduler

12. 参考文档和社区支持

查阅Kubernetes官方文档：
- Kubernetes官方文档
参与社区讨论：
- 加入Kubernetes社区论坛或Slack频道，寻求帮助。

通过以上步骤，可以系统地排查CentOS Kubernetes集群的故障。根据具体问题，可能需要结合多个步骤进行深入分析。