2. 首页 > KubeSphere教程 > 正文

KubeSphere教程FG040-KubeSphere混合云集群管理与统一运维实战

教程整理：风哥教程  |  更新时间：2026-03-13  |  教程分类：KubeSphere教程  |  文档学习：26

本教程详细介绍KubeSphere中混合云集群管理与统一运维的实战操作，包括基础概念、生产环境规划、具体实施方案和实战案例。风哥教程参考KubeSphere官方文档KubeSphere容器平台使用指南、KubeSphere多集群管理指南、KubeSphere混合云部署指南等相关内容。

目录大纲

Part01-基础概念与理论知识

1.1 混合云核心概念

混合云是指同时使用公有云和私有云的云计算模式，它包括：

  • 公有云：由第三方提供商提供的云服务
  • 私有云：由企业自己搭建的云服务
  • 混合云：公有云和私有云的组合
  • 多云：使用多个公有云提供商
  • 边缘云：在边缘节点部署的云服务

1.2 多集群管理核心概念

多集群管理是指统一管理多个Kubernetes集群，它包括：

  • 主集群：控制平面所在的集群
  • 成员集群：被管理的集群
  • 集群联邦：多个集群的联邦
  • 集群同步：集群之间的数据同步
  • 集群调度：跨集群的应用调度

1.3 统一运维核心概念

统一运维是指统一管理多个集群的运维操作，它包括：

  • 统一监控：统一监控多个集群
  • 统一日志：统一收集多个集群的日志
  • 统一告警：统一处理多个集群的告警
  • 统一部署：统一部署应用到多个集群
  • 统一备份：统一备份多个集群的数据

Part02-生产环境规划与建议

2.1 混合云架构规划

在实施混合云集群管理与统一运维时，混合云架构规划是非常重要的：

  • 云平台选择：选择合适的云平台
  • 网络规划：规划混合云的网络连接
  • 安全规划：规划混合云的安全策略
  • 成本规划：规划混合云的成本
  • 容灾规划：规划混合云的容灾方案

2.2 多集群管理规划

多集群管理规划对于混合云集群管理与统一运维也非常重要：

  • 集群规划：规划集群的数量和规模
  • 角色规划：规划主集群和成员集群
  • 网络规划：规划集群之间的网络连接
  • 安全规划：规划集群之间的安全策略
  • 调度规划：规划跨集群的应用调度

2.3 统一运维规划

统一运维规划是混合云集群管理与统一运维的重要组成部分：

  • 监控规划：规划统一监控方案
  • 日志规划：规划统一日志方案
  • 告警规划：规划统一告警方案
  • 部署规划：规划统一部署方案
  • 备份规划：规划统一备份方案

Part03-生产环境项目实施方案

3.1 混合云集群配置

混合云集群的配置步骤：

  • 部署主集群：部署KubeSphere主集群
  • 部署成员集群：部署KubeSphere成员集群
  • 配置集群连接：配置主集群和成员集群的连接
  • 配置集群同步：配置集群之间的数据同步
  • 验证集群连接：验证集群连接是否正常

3.2 多集群管理配置

多集群管理的配置步骤：

  • 启用多集群功能：启用KubeSphere多集群功能
  • 导入成员集群：导入成员集群到主集群
  • 配置集群权限：配置集群访问权限
  • 配置集群调度：配置跨集群的应用调度
  • 验证多集群功能：验证多集群功能是否正常

3.3 统一运维配置

统一运维的配置步骤： 风哥提示：

  • 配置统一监控：配置跨集群的监控
  • 配置统一日志：配置跨集群的日志收集
  • 配置统一告警：配置跨集群的告警
  • 配置统一部署：配置跨集群的应用部署
  • 验证统一运维：验证统一运维是否正常

Part04-生产案例与实战讲解

4.1 混合云集群部署实战

下面我们来实战演示混合云集群部署：

# 查看当前集群
kubectl cluster-info
Kubernetes control plane is running at https://192.168.1.1:6443
CoreDNS is running at https://192.168.1.1:6443/api/v1/namespaces/kube-system/services/kube-dns:dns/proxy
# 启用多集群功能
kubectl edit cc ks-installer -n kubesphere-system
# 在spec.multicluster.clusterRole中设置为主集群
spec:
multicluster:
clusterRole: host
# 获取主集群的连接信息
kubectl get secret -n kubesphere-system ks-installer -o jsonpath='{.data.kubeconfig}’ | base64 -d > host-kubeconfig.yaml
# 在成员集群上准备连接
cat <<EOF > member-cluster.yaml
apiVersion: cluster.kubesphere.io/v1alpha1
kind: Cluster
metadata:
name: member-cluster
spec:
connection:
kubeconfig: |
apiVersion: v1
kind: Config
clusters:
– cluster:
certificate-authority-data: LS0tLS0t…
server: https://192.168.1.1:6443
name: host-cluster
contexts:
– context:
cluster: host-cluster
user: kubesphere
name: kubesphere
current-context: kubesphere
users:
– name: kubesphere
user:
token: eyJhbGciOiJSUzI1NiIs…
enabled: true
EOF
# 在主集群上创建成员集群
kubectl apply -f member-cluster.yaml
cluster.cluster.kubesphere.io/member-cluster created
# 查看集群状态
kubectl get clusters -A
NAMESPACE NAME AGE CONNECTION STATE READY
kubesphere-system member-cluster 10s Connected True
# 查看集群详细信息
kubectl describe cluster member-cluster -n kubesphere-system
Name: member-cluster
Namespace: kubesphere-system
Labels: <none>
Annotations: <none>
API Version: cluster.kubesphere.io/v1alpha1
Kind: Cluster
Metadata:
Creation Timestamp: 2024-01-01T00:00:00Z
Generation: 1
Resource Version: 123456
UID: abc123def456789012345678901234567890
Spec:
，
Connection:
Kubeconfig: <hidden>
Enabled: true
Status:
Connection State: Connected
Ready: true
Version: v1.26.5
# 配置集群网络
cat <<EOF | kubectl apply -f –
apiVersion: network.kubesphere.io/v1alpha1
kind: ClusterNetwork
metadata:
name: cluster-network
namespace: kubesphere-system
spec:
enable: true
type: calico
ippools:
– name: default-ippool
cidr: 10.244.0.0/16
EOF
clusternetwork.network.kubesphere.io/cluster-network created
# 验证集群网络
kubectl get clusternetworks -n kubesphere-system
NAME AGE
cluster-network 10s

4.2 多集群应用分发实战

下面我们来实战演示多集群应用分发： 学习交流加群风哥微信: itpux-com 学习交流加群风哥QQ113257174

# 创建多集群应用
cat <<EOF | kubectl apply -f –
apiVersion: app.kubesphere.io/v1alpha1
kind: Application
metadata:
name: nginx-app
namespace: default
spec:
selector:
matchLabels:
app: nginx
clusters:
– name: host-cluster
namespace: default
– name: member-cluster
namespace: default
template:
apiVersion: apps/v1
kind: Deployment
metadata:
labels:
app: nginx
spec:
replicas: 2
selector:
matchLabels:
app: nginx
template:
metadata:
labels:
app: nginx
spec:
containers:
– name: nginx
image: nginx:latest
ports:
– containerPort: 80
EOF
application.app.kubesphere.io/nginx-app created
# 查看应用状态
kubectl get applications -A
NAMESPACE NAME AGE
default nginx-app 10s
# 查看应用分发状态
kubectl get application nginx-app -n default -o yaml | grep -A 20 “status:”
status:
clusters:
– clusterName: host-cluster
namespace: default
phase: Running
，
– clusterName: member-cluster
namespace: default
phase: Running
phase: Running
# 在主集群查看Pod
kubectl get pods -n default -l app=nginx
NAME READY STATUS RESTARTS AGE
nginx-6b8d9b8c7f-abcde 1/1 Running 0 10s
nginx-6b8d9b8c7f-fghij 1/1 Running 0 10s
# 在成员集群查看Pod
kubectl get pods -n default -l app=nginx –context=member-cluster
NAME READY STATUS RESTARTS AGE
nginx-6b8d9b8c7f-abcde 1/1 Running 0 10s
nginx-6b8d9b8c7f-fghij 1/1 Running 0 10s
# 创建跨集群服务
cat <<EOF | kubectl apply -f –
apiVersion: v1
kind: Service
metadata:
name: nginx-svc
namespace: default
spec:
selector:
app: nginx
ports:
– port: 80
targetPort: 80
type: ClusterIP
—
apiVersion: multicluster.kubesphere.io/v1alpha1
kind: MultiClusterService
metadata:
name: nginx-mcs
namespace: default
spec:
clusters:
– name: host-cluster
namespace: default
– name: member-cluster
namespace: default
service:
name: nginx-svc
namespace: default
EOF
service/nginx-svc created
multiclusterservice.multicluster.kubesphere.io/nginx-mcs created
# 查看跨集群服务
kubectl get multiclusterservices -A
NAMESPACE NAME AGE
default nginx-mcs 10s

4.3 统一运维实战

下面我们来实战演示统一运维： 更多视频教程www.fgedu.net.cn

# 配置统一监控
cat <<EOF | kubectl apply -f –
apiVersion: monitoring.coreos.com/v1
kind: Prometheus
metadata:
name: prometheus-multicluster
namespace: kubesphere-monitoring-system
spec:
serviceAccountName: prometheus
serviceMonitorSelector:
matchLabels:
release: prometheus
serviceMonitorNamespaceSelector:
matchNames:
– default
– kubesphere-monitoring-system
resources:
requests:
memory: 400Mi
externalLabels:
cluster: host-cluster
remoteWrite:
– url: http://thanos-receive.monitoring.svc:19291/api/v1/receive
sendExemplars: true
EOF
prometheus.monitoring.coreos.com/prometheus-multicluster created
# 配置统一日志
cat <<EOF | kubectl apply -f –
apiVersion: logging.kubesphere.io/v1alpha2
kind: FluentBit
metadata:
name: fluentbit-multicluster
namespace: kubesphere-logging-system
spec:
replicas: 2
image:
repository: kubesphere/fluent-bit
tag: v1.8.3
input:
– tail:
path: /var/log/containers/*.log
parser: docker
tag: kube.*
refresh_interval: 5
mem_buf_limit: 5MB
skip_long_lines: true
db: /var/log/flb_kube.db
filter:
– kubernetes:
url: https://kubernetes.default.svc:443
ca_file: /var/run/secrets/kubernetes.io/serviceaccount/ca.crt
tls_verify: false
bearer_token_file: /var/run/secrets/kubernetes.io/serviceaccount/token
output:
– elasticsearch:
host: elasticsearch-logging-data.kubesphere-logging-system.svc
port: 9200
logstash_format: true
logstash_prefix: ks-log
retry_limit: false
http_user: elastic
http_passwd: ${ELASTICSEARCH_PASSWORD}
tls_verify: false
tls_ca_file: /etc/fluent-bit/tls/ca.crt
tls_cert_file: /etc/fluent-bit/tls/client.crt
tls_key_file: /etc/fluent-bit/tls/client.key
EOF
fluentbit.logging.kubesphere.io/fluentbit-multicluster created
# 配置统一告警
cat <<EOF | kubectl apply -f –
apiVersion: monitoring.coreos.com/v1
kind: Alertmanager
metadata:
name: alertmanager-multicluster
namespace: kubesphere-monitoring-system
spec:
replicas: 1
serviceAccountName: alertmanager
EOF
alertmanager.monitoring.coreos.com/alertmanager-multicluster created
# 配置告警路由
cat <<EOF | kubectl apply -f –
apiVersion: v1
kind: Secret
metadata:
name: alertmanager-config
namespace: kubesphere-monitoring-system
stringData:
alertmanager.yaml: |-
global:
resolve_timeout: 5m
route:
group_by: [‘alertname’, ‘cluster’]
group_wait: 10s
group_interval: 10s
repeat_interval: 12h
receiver: ‘default’
routes:
– match:
cluster: host-cluster
receiver: ‘host-cluster’
– match:
cluster: member-cluster
receiver: ‘member-cluster’
receivers:
– name: ‘default’
email_configs:
– to: ‘admin@example.com’
from: ‘alertmanager@example.com’
smarthost: ‘smtp.example.com:587’
，
– name: ‘host-cluster’
email_configs:
– to: ‘host-cluster@example.com’
from: ‘alertmanager@example.com’
smarthost: ‘smtp.example.com:587’
– name: ‘member-cluster’
email_configs:
– to: ‘member-cluster@example.com’
from: ‘alertmanager@example.com’
smarthost: ‘smtp.example.com:587’
EOF
secret/alertmanager-config created
# 验证统一监控
kubectl get prometheus -n kubesphere-monitoring-system
NAME AGE
prometheus-multicluster 10s
# 验证统一日志
kubectl get fluentbit -n kubesphere-logging-system
NAME AGE
fluentbit-multicluster 10s
# 验证统一告警
kubectl get alertmanager -n kubesphere-monitoring-system
NAME AGE
alertmanager-multicluster 10s

Part05-风哥经验总结与分享

5.1 常见问题与解决方案

问题1：集群连接失败

现象：主集群无法连接到成员集群 更多学习教程公众号风哥教程itpux_com

原因：网络不通或kubeconfig配置错误

解决方案：

# 检查网络连接
ping 192.168.1.1
PING 192.168.1.1 (192.168.1.1) 56(84) bytes of data.
64 bytes from 192.168.1.1: icmp_seq=1 ttl=64 time=0.123 ms
64 bytes from 192.168.1.1: icmp_seq=2 ttl=64 time=0.124 ms
# 检查kubeconfig
kubectl –kubeconfig=host-kubeconfig.yaml cluster-info
Kubernetes control plane is running at https://192.168.1.1:6443

问题2：应用分发失败

现象：应用无法分发到成员集群

原因：权限不足或资源配额限制

解决方案：

# 检查应用状态
kubectl get application nginx-app -n default -o yaml | grep -A 10 “status:”
status:
clusters:
– clusterName: host-cluster
namespace: default
phase: Running
– clusterName: member-cluster
namespace: default
phase: Failed
message: “Insufficient resources”
# 检查成员集群资源
kubectl get resourcequota -n default –context=member-cluster
NAME AGE
default-quota 30d

问题3：统一监控数据不完整

现象：统一监控中缺少部分集群的数据

原因：监控配置错误或网络问题

解决方案：

# 检查Prometheus配置
kubectl get prometheus prometheus-multicluster -n kubesphere-monitoring-system -o yaml | grep -A 20 “remoteWrite:”
remoteWrite:
– url: http://thanos-receive.monitoring.svc:19291/api/v1/receive
sendExemplars: true
# 检查Thanos状态
kubectl get pods -n monitoring -l app=thanos-receive
NAME READY STATUS RESTARTS AGE
thanos-receive-6b8d9b8c7f-abcde 1/1 Running 0 10m

5.2 最佳实践建议

建议1：合理规划混合云架构

在规划混合云架构时，应该： from K8S+DB视频:www.itpux.com

  • 根据业务需求选择云平台
  • 规划网络连接和带宽
  • 设计安全策略和访问控制
  • 考虑成本和容灾方案
  • 定期评估和优化架构

建议2：建立完善的监控体系

在建立监控体系时，应该：

  • 监控所有集群的关键指标
  • 设置合理的告警阈值
  • 配置多种告警通知方式
  • 定期审查和优化监控规则
  • 建立故障响应机制

建议3：建立完善的运维流程

在建立运维流程时，应该：

  • 建立统一的运维平台
  • 建立标准化的运维流程
  • 建立自动化的运维工具
  • 建立完善的文档和知识库
  • 定期进行运维演练

5.3 性能优化技巧

技巧1：优化集群网络性能

集群网络性能的优化可以通过以下方式实现：

  • 使用高性能网络插件
  • 优化网络配置
  • 使用网络策略
  • 优化DNS配置
  • 使用Service Mesh

技巧2：优化跨集群通信性能

跨集群通信性能的优化可以通过以下方式实现：

  • 使用专用网络连接
  • 优化网络路由
  • 使用CDN加速
  • 优化数据压缩
  • 使用缓存策略

技巧3：优化统一运维性能

统一运维性能的优化可以通过以下方式实现：

  • 使用分布式架构
  • 优化数据采集策略
  • 使用数据压缩
  • 优化查询性能
  • 使用缓存策略

混合云集群管理与统一运维是KubeSphere企业级应用的重要组成部分，需要根据实际业务需求进行合理规划和配置。在生产环境中，建议建立完善的监控、日志和告警体系，以便统一管理多个集群。同时，要建立标准化的运维流程，提高运维效率。

本教程由风哥提供，更多KubeSphere实战教程请关注风哥课堂

本文由风哥教程整理发布,仅用于学习测试使用,转载注明出处:http://www.fgedu.net.cn/10327.html

相关推荐

联系我们

在线咨询：点击这里给我发消息

微信号：itpux-com

工作日：9:30-18:30，节假日休息