Kubernetes
  • 序言
  • 基礎入門
    • Kubernetes 簡介
    • Kubernetes 基本概念
    • Kubernetes 101
    • Kubernetes 201
    • Kubernetes 集群
  • 核心原理
    • 核心原理
    • 架構原理
    • 設計理念
    • 核心組件
      • etcd
      • kube-apiserver
      • kube-scheduler
      • kube-controller-manager
      • kubelet
      • kube-proxy
      • kube-dns
      • Federation
      • kubeadm
      • hyperkube
      • kubectl
    • 資源對象
      • Autoscaling
      • ConfigMap
      • CronJob
      • CustomResourceDefinition
      • DaemonSet
      • Deployment
      • Ingress
      • Job
      • LocalVolume
      • Namespace
      • NetworkPolicy
      • Node
      • PersistentVolume
      • Pod
      • PodPreset
      • ReplicaSet
      • Resource Quota
      • Secret
      • SecurityContext
      • Service
      • ServiceAccount
      • StatefulSet
      • Volume
  • 部署配置
    • 部署指南
    • kubectl 安裝
    • 單機部署
    • 特性開關
    • 最佳配置
    • 版本支持
    • 集群部署
      • kubeadm
      • kops
      • Kubespray
      • Azure
      • Windows
      • LinuxKit
      • kubeasz
    • 附加組件
      • Addon-manager
      • DNS
      • Dashboard
      • 監控
      • 日誌
      • Metrics
      • GPU
      • Cluster Autoscaler
      • ip-masq-agent
    • Kubernetes-The-Hard-Way
      • 準備部署環境
      • 安裝必要工具
      • 創建計算資源
      • 配置創建證書
      • 配置生成配置
      • 配置生成密鑰
      • 部署 Etcd 群集
      • 部署控制節點
      • 部署計算節點
      • 配置 Kubectl
      • 配置網絡路由
      • 部署 DNS 擴展
      • 煙霧測試
      • 刪除集群
  • 插件擴展
    • API 擴展
      • Aggregation
      • CustomResourceDefinition
    • 訪問控制
      • 認證
      • RBAC 授權
      • 准入控制
    • Scheduler 擴展
    • 網絡插件
      • CNI
      • Flannel
      • Calico
      • Weave
      • Cilium
      • OVN
      • Contiv
      • SR-IOV
      • Romana
      • OpenContrail
      • Kuryr
    • 運行時插件 CRI
      • CRI-tools
      • Frakti
    • 存儲插件
      • 容器存儲接口 CSI
      • FlexVolume
      • glusterfs
    • 網絡策略
    • Ingress Controller
      • Ingress + Letsencrypt
      • minikube Ingress
      • Traefik Ingress
      • Keepalived-VIP
    • Cloud Provider 擴展
    • Device 插件
  • 服務治理
    • 服務治理
      • 一般準則
      • 滾動升級
      • Helm
      • Operator
      • Service Mesh
      • Linkerd
      • Linkerd2
    • Istio
      • 安裝
      • 流量管理
      • 安全管理
      • 策略管理
      • 度量管理
      • 排錯
      • 社區
    • Devops
      • Draft
      • Jenkins X
      • Spinnaker
      • Kompose
      • Skaffold
      • Argo
      • Flux GitOps
  • 實踐案例
    • 實踐概覽
    • 資源控制
    • 集群高可用
    • 應用高可用
    • 調試
    • 端口映射
    • 端口轉發
    • 用戶管理
    • GPU
    • HugePage
    • 安全
    • 審計
    • 備份恢復
    • 證書輪換
    • 大規模集群
    • 大數據與機器學習
      • Spark
      • Tensorflow
    • Serverless
  • 排錯指南
    • 排錯概覽
    • 集群排錯
    • Pod 排錯
    • 網絡排錯
    • PV 排錯
      • AzureDisk
      • AzureFile
    • Windows 排錯
    • 雲平臺排錯
      • Azure
    • 排錯工具
  • 社區貢獻
    • 開發指南
    • 單元測試和集成測試
    • 社區貢獻
  • 附錄
    • 生態圈
    • 學習資源
    • 國內鏡像
    • 如何貢獻
    • 參考文檔
Powered by GitBook
On this page
  • Node 未註冊到集群中
  • Kubelet 日誌
  • kube-controller-manager 日誌
  1. 排錯指南

雲平臺排錯

本章主要介紹在公有云中運行 Kubernetes 時可能會碰到的問題以及解決方法。

在公有云平臺上運行 Kubernetes,一般可以使用雲平臺提供的託管 Kubernetes 服務(比如 Google 的 GKE、微軟 Azure 的 AKS 或者 AWS 的 Amazon EKS 等)。當然,爲了更自由的靈活性,也可以直接在這些公有云平臺的虛擬機中部署 Kubernetes。無論哪種方法,一般都需要給 Kubernetes 配置 Cloud Provider 選項,以方便直接利用雲平臺提供的高級網絡、持久化存儲以及安全控制等功能。

而在雲平臺中運行 Kubernetes 的常見問題有

  • 認證授權問題:比如 Kubernetes Cloud Provider 中配置的認證方式無權操作虛擬機所在的網絡或持久化存儲。這一般從 kube-controller-manager 的日誌中很容易發現。

  • 網絡路由配置失敗:正常情況下,Cloud Provider 會爲每個 Node 配置一條 PodCIDR 至 NodeIP 的路由規則,如果這些規則有問題就會導致多主機 Pod 相互訪問的問題。

  • 公網 IP 分配失敗:比如 LoadBalancer 類型的 Service 無法分配公網 IP 或者指定的公網 IP 無法使用。這一版也是配置錯誤導致的。

  • 安全組配置失敗:比如無法爲 Service 創建安全組(如超出配額等)或與已有的安全組衝突等。

  • 持久化存儲分配或者掛載問題:比如分配 PV 失敗(如超出配額、配置錯誤等)或掛載到虛擬機失敗(比如 PV 正被其他異常 Pod 引用而導致無法從舊的虛擬機中卸載)。

  • 網絡插件使用不當:比如網絡插件使用了雲平臺不支持的網絡協議等。

Node 未註冊到集群中

通常,在 Kubelet 啓動時會自動將自己註冊到 kubernetes API 中,然後通過 kubectl get nodes 就可以查詢到該節點。 如果新的 Node 沒有自動註冊到 Kubernetes 集群中,那說明這個註冊過程有錯誤發生,需要檢查 kubelet 和 kube-controller-manager 的日誌,進而再根據日誌查找具體的錯誤原因。

Kubelet 日誌

查看 Kubelet 日誌需要首先 SSH 登錄到 Node 上,然後運行 journalctl 命令查看 kubelet 的日誌:

journalctl -l -u kubelet

kube-controller-manager 日誌

kube-controller-manager 會自動在雲平臺中給 Node 創建路由,如果路由創建創建失敗也有可能導致 Node 註冊失敗。

PODNAME=$(kubectl -n kube-system get pod -l component=kube-controller-manager -o jsonpath='{.items[0].metadata.name}')
kubectl -n kube-system logs $PODNAME --tail 100
PreviousWindows 排錯NextAzure

Last updated 1 year ago