1
# 查看 Pod 调度状态
2
kubectl describe pod <pod-name> | grep -A 10 "Events:"
3

4
# 常见事件解读
5
# FailedScheduling: 调度失败
6
# NetworkNotReady: 网络未就绪
7
# FailedMount: 挂载失败
8

9
# 查看调度器日志
10
journalctl -u kube-scheduler -n 100
11

12
# 模拟调度
13
kubectl debug node/<node-name> -it --image=busybox

1
# 优先级调度
2
apiVersion: scheduling.k8s.io/v1
3
kind: PriorityClass
4
metadata:
5
  name: high-priority
6
value: 100000
7
globalDefault: false
8
description: "高优先级任务"
9

10
---
11

12
apiVersion: v1
13
kind: Pod
14
metadata:
15
  name: high-priority-app
16
spec:
17
  priorityClassName: high-priority
18
  containers:
19
    - name: app
20
      image: my-app

1
# 1. 进入 Pod 网络空间
2
kubectl exec -it <pod-name> -- sh
3

4
# 2. 检查网络接口
5
ip addr
6
ip route
7

8
# 3. 测试连通性
9
ping <target-ip>
10
curl -v <service-name>
11

12
# 4. 检查 DNS 解析
13
nslookup <service-name>
14
cat /etc/resolv.conf
15

16
# 5. 检查 iptables 规则
17
iptables -L -n -t nat | grep <service-name>

1
# 检查 Endpoints
2
kubectl get endpoints <service-name>
3

4
# 检查 Selector 匹配的 Pod
5
kubectl get pods -l app=<selector> --show-labels
6

7
# 查看 Service 详细信息
8
kubectl describe svc <service-name>
9

10
# 测试 Service 连通性
11
kubectl run curl --image=curlimages/curl -it --rm -- \
12
    curl -v http://<service-name>:<port>

1
# 检查 NetworkPolicy 状态
2
kubectl get networkpolicy
3

4
# 查看策略详情
5
kubectl describe networkpolicy <policy-name>
6

7
# 测试策略是否生效
8
kubectl exec -it frontend -- sh
9
# 在 frontend Pod 内测试到 backend 的连接
10
curl -v http://backend:80
11

12
# 如果连接失败，检查策略是否正确

1
# 查看 PVC 状态
2
kubectl get pvc
3

4
# 查看 PVC 详情
5
kubectl describe pvc <pvc-name>
6

7
# 常见问题
8
# Pending: StorageClass 不存在或 PV 不足
9
# Lost: PV 被意外删除
10
# Bound: PVC 已绑定但 Pod 无法挂载

1
# 查看 StorageClass
2
kubectl get storageclass
3

4
# 查看 PV
5
kubectl get pv
6

7
# 检查 CSI 驱动状态
8
kubectl get csidriver
9

10
# 查看 CSI 日志
11
kubectl logs -n kube-system -l app=csi-driver

1
# 查看资源使用 TOP
2
kubectl top nodes
3
kubectl top pods
4

5
# 按命名空间查看
6
kubectl top pods -n <namespace>
7

8
# 查看详细资源分配
9
kubectl describe node <node-name> | grep -A 10 "Allocated resources"

1
# 资源请求与限制优化
2
apiVersion: v1
3
kind: Pod
4
spec:
5
  containers:
6
    - name: app
7
      resources:
8
        requests:
9
          cpu: "500m"
10
          memory: "512Mi"
11
        limits:
12
          cpu: "2000m" # 限制不能过高
13
          memory: "2Gi"
14

15
---
16

17
apiVersion: v1
18
kind: Pod
19
spec:
20
  affinity:
21
    nodeAffinity:
22
      preferredDuringSchedulingIgnoredDuringExecution:
23
        - weight: 100
24
          preference:
25
            matchExpressions:
26
              - key: "node-type"
27
                operator: In
28
                values:
29
                  - "compute-optimized"

1
# 部署调试工具
2
kubectl run debug --image=busybox --rm -it -- sh
3

4
# 使用 nicolaka/netshoot
5
kubectl run netshoot --rm -it --image=nicolaka/netshoot -- bash
6

7
# 常用诊断命令
8
ip link        # 网络接口
9
ip addr       # IP 地址
10
ss -tulpn    # 端口监听
11
conntrack -L  # 连接跟踪
12
tcpdump       # 抓包

1
# 进入 Pod 进行 profiling
2
kubectl exec -it <pod-name> -- sh
3

4
# Go 应用性能剖析
5
# 1. 获取 profile
6
curl http://localhost:6060/debug/pprof/profile
7

8
# 2. 查看 goroutine
9
curl http://localhost:6060/debug/pprof/goroutine?debug=1
10

11
# Java 应用
12
jstack <pid>  # 线程堆栈
13
jmap -heap <pid>  # 内存映射

1
# 问题：Pod 一直 Pending
2
kubectl describe pod my-app
3

4
# 输出：
5
# Events:
6
#   Type     Reason             Age   From            Message
7
#   ----     ------             ----  ----            -------
8

9
# 分析：节点资源不足或存在污点
10

11
# 解决：
12
# 1. 检查污点
13
kubectl get nodes -o json | jq '.items[].spec.taints'
14

15
# 2. 添加容忍
16
kubectl taint node <node> dedicated=special-user:NoSchedule-

1
# 问题：Service 无法连接
2
kubectl exec -it frontend -- curl backend:80
3

4
# 错误：curl: (7) Failed to connect to backend port 80: Connection timed out
5

6
# 排查步骤：
7
# 1. 检查 Endpoints
8
kubectl get endpoints backend
9
# 如果为空，说明没有 Pod 匹配 Selector
10

11
# 2. 检查 Pod 标签
12
kubectl get pods -l app=backend --show-labels
13

14
# 3. 检查网络策略
15
kubectl get networkpolicy

1
# 问题：Pod 不断重启
2
kubectl get pods
3
# NAME     READY   STATUS      RESTARTS   AGE
4
# my-app   0/1     OOMKilled   3         10m
5

6
# 排查内存使用
7
kubectl top pod my-app
8

9
# 分析：
10
# 可能是内存限制设置过低或应用内存泄漏
11

12
# 解决：
13
# 1. 临时增加内存限制
14
kubectl patch pod my-app -p '{"spec":{"containers":[{"name":"app","resources":{"limits":{"memory":"2Gi"}}}]}}'
15

16
# 2. 长期：优化应用或调整资源配额