花日

GitHub

标签

1343 字

7 分钟

基于Kind集群部署Mysql和Clickhosue

2025-10-18

Kubernetes

/

Kind

/

Helm

基于Kind搭建测试集群#

可以参考基于Kind搭建测试集群搭建一个测试集群。

搭建集群#

和基于Kind搭建测试集群不同的是，此处还要增加33006、30123、39000端口的映射，以实现mysql和clickhouse使用nodeport方式将服务暴露到集群外部。

将下面的配置写入进huari.yaml文件里

1
kind: Cluster
2
apiVersion: kind.x-k8s.io/v1alpha4
3
networking:
4
  apiServerAddress: "10.10.151.201"
5
nodes:
6
  - role: control-plane
7
    extraPortMappings:
8
      - containerPort: 6443
9
        hostPort: 6443
10
        listenAddress: "10.10.151.201"
11
        protocol: tcp
12
  - role: control-plane
13
  - role: control-plane
14
  - role: worker
15
    extraPortMappings:
16
      - containerPort: 80
17
        hostPort: 7080
18
        listenAddress: "0.0.0.0"
19
        protocol: tcp
20
      - containerPort: 443
21
        hostPort: 7443
22
        listenAddress: "0.0.0.0"
23
        protocol: tcp
24
      - containerPort: 30036
25
        hostPort: 3306
26
        listenAddress: "0.0.0.0"
27
        protocol: tcp
28
      - containerPort: 30123
29
        hostPort: 8123
30
        listenAddress: "0.0.0.0"
31
        protocol: tcp
32
      - containerPort: 30046
33
        hostPort: 30046
34
        listenAddress: "0.0.0.0"
35
        protocol: tcp
36
  - role: worker
37
    extraPortMappings:
38
      - containerPort: 80
39
        hostPort: 8080
40
        listenAddress: "0.0.0.0"
41
        protocol: tcp
42
      - containerPort: 443
43
        hostPort: 8443
44
        listenAddress: "0.0.0.0"
45
        protocol: tcp
46
      - containerPort: 30036
47
        hostPort: 3307
48
        listenAddress: "0.0.0.0"
49
        protocol: tcp
50
      - containerPort: 30123
51
        hostPort: 8124
52
        listenAddress: "0.0.0.0"
53
        protocol: tcp
54
      - containerPort: 30046
55
        hostPort: 30047
56
        listenAddress: "0.0.0.0"
57
        protocol: tcp
58
  - role: worker
59
    extraPortMappings:
60
      - containerPort: 80
61
        hostPort: 9080
62
        listenAddress: "0.0.0.0"
63
        protocol: tcp
64
      - containerPort: 443
65
        hostPort: 9443
66
        listenAddress: "0.0.0.0"
67
        protocol: tcp
68
      - containerPort: 30036
69
        hostPort: 3308
70
        listenAddress: "0.0.0.0"
71
        protocol: tcp
72
      - containerPort: 30123
73
        hostPort: 8125
74
        listenAddress: "0.0.0.0"
75
        protocol: tcp
76
      - containerPort: 30046
77
        hostPort: 30048
78
        listenAddress: "0.0.0.0"
79
        protocol: tcp

创建高可用集群命令：

1
sudo kind create cluster --config=huari.yaml --name huari-test --image kindest/node:v1.34.0 --retain; sudo kind export logs --name huari-test

切换kubectl上下文：

1
sudo kubectl cluster-info --context kind-huari-test

查看信息：

1
# 查看集群节点
2
sudo kubectl get nodes
3

4
# 查看集群全部的pod
5
sudo kubectl get pods -A -owide

删除集群：

1
sudo kind delete cluster --name huari-test

安装ingress#

需要安装官方定制版本的ingress。

安装ingress：

1
sudo kubectl apply -f https://raw.githubusercontent.com/kubernetes/ingress-nginx/main/deploy/static/provider/kind/deploy.yaml

等待 Controller 就绪:

1
sudo kubectl -n ingress-nginx wait --for=condition=ready pod -l app.kubernetes.io/component=controller --timeout=90s

Helm安装mysql集群#

添加Repository#

1
helm repo add bitnami https://charts.bitnami.com/bitnami

拉取chart到本地#

可以通过下面的命令将chart拉取到本地，然后看内部的定义：

1
helm pull bitnami/mysql --untar

这会在当前目录创建一个 mysql 文件夹，里面就是Chart的全部内容。

mysql集群配置#

查看支持的storageclasses：

1
$ sudo kubectl get storageclasses.storage.k8s.io
2
NAME                 PROVISIONER             RECLAIMPOLICY   VOLUMEBINDINGMODE      ALLOWVOLUMEEXPANSION   AGE
3
standard (default)   rancher.io/local-path   Delete          WaitForFirstConsumer   false                  70m

将下面的配置写入进values.yaml文件里：

1
# 使用DaoCloud镜像代理
2
global:
3
  imageRegistry: "m.daocloud.io/docker.io"
4
  security:
5
    allowInsecureImages: true
6

7
# 集群架构 - 主从复制
8
architecture: replication
9

10
# 认证配置
11
auth:
12
  rootPassword: "mysql123"
13
  replicationPassword: "repl123"
14
  database: "myapp"
15

16
# 主节点配置
17
primary:
18
  persistence:
19
    enabled: false
20

21
  extraFlags: "--bind-address=0.0.0.0"
22

23
  # 通过环境变量覆盖配置
24
  extraEnvVars:
25
    - name: MYSQL_BIND_ADDRESS
26
      value: "0.0.0.0"
27
    - name: MYSQL_ROOT_PASSWORD
28
      value: "mysql123"
29

30
  # 完全禁用所有探针
31
  livenessProbe:
32
    enabled: false
33
  readinessProbe:
34
    enabled: false
35
  startupProbe:
36
    enabled: false
37

38
  # MySQL 配置 - 允许远程访问
39
  configuration: |-
40
    [mysqld]
41
    bind-address=0.0.0.0
42
    port=3306
43
    socket=/opt/bitnami/mysql/tmp/mysql.sock
44
    skip-name-resolve
45
    explicit_defaults_for_timestamp
46

47
  service:
48
    type: NodePort
49
    nodePorts:
50
      mysql: 30036
51

52
# 从节点配置
53
secondary:
54
  replicaCount: 1
55
  persistence:
56
    enabled: false

安装Mysql集群#

1
# 安装MySQL集群
2
sudo helm install mysql-cluster bitnami/mysql \
3
  --namespace mysql \
4
  --create-namespace \
5
  -f values.yaml
6

7
# 等待安装完成，查看状态
8
sudo kubectl get pods -n mysql -w

修改root密码：

1
sudo kubectl exec -it mysql-cluster-primary-0 -n mysql -- mysql -S /opt/bitnami/mysql/tmp/mysql.sock -uroot -e "ALTER USER 'root'@'localhost' IDENTIFIED BY 'mysql123'; FLUSH PRIVILEGES;"

允许远程访问：

1
# 创建允许远程连接的用户
2
sudo kubectl exec -it mysql-cluster-primary-0 -n mysql -- mysql -S /opt/bitnami/mysql/tmp/mysql.sock -uroot -pmysql123 -e "
3
CREATE USER 'root'@'%' IDENTIFIED BY 'mysql123';
4
GRANT ALL PRIVILEGES ON *.* TO 'root'@'%' WITH GRANT OPTION;
5
FLUSH PRIVILEGES;
6
"

验证远程用户

1
sudo kubectl exec -it mysql-cluster-primary-0 -n mysql -- mysql -h 127.0.0.1 -P 3306 -uroot -pmysql123 -e "SELECT 1;"

访问mysql集群#

查看 mysql主节点落在了哪个node上

1
$ sudo kubectl get pods -n mysql -owide
2
NAME                        READY   STATUS    RESTARTS   AGE   IP            NODE                 NOMINATED NODE   READINESS GATES
3
mysql-cluster-primary-0     1/1     Running   0          28s   10.244.4.13   huari-test-worker    <none>           <none>
4
mysql-cluster-secondary-0   0/1     Running   0          28s   10.244.5.14   huari-test-worker3   <none>           <none>

现在mysql主节点落在huari-test-worker这个节点上，那么就可以通过宿主机ip加3306端口访问。

这里有两层端口映射：

第一层：host->docker容器(集群node)的映射
第二层：docker容器(集群node)->服务service的映射

测试mysql连接：

1
~ docker run -it --rm mysql:8.0 mysql -h 10.10.151.201 -P 3306 -uroot -pmysql123 -e "SELECT 1;"
2
mysql: [Warning] Using a password on the command line interface can be insecure.
3
+---+
4
| 1 |
5
+---+
6
| 1 |
7
+---+

Helm安装clickhouse#

添加Repository#

1
helm repo add bitnami https://charts.bitnami.com/bitnami

拉取chart到本地#

可以通过下面的命令将chart拉取到本地，然后看内部的定义：

1
helm pull bitnami/clickhouse --untar

这会在当前目录创建一个 clickhouse-cluster 文件夹，里面就是Chart的全部内容。

clickhouse配置#

ClickHouse主要使用两个端口来服务不同类型的客户端连接，它们对应的协议和用途可参考下表：

端口号	协议	主要用途	客户端/工具
8123	HTTP	用于HTTP接口。适合轻量级操作，方便通过REST API跨平台和编程语言使用。	您的可视化工具、`curl`、JDBC驱动
9000	TCP (原生协议)	用于ClickHouse原生二进制协议。由`clickhouse-client`、服务器间通信使用。	`clickhouse-client`
9004	MySQL 模拟协议	用于MySQL兼容接口。允许部分MySQL客户端与ClickHouse进行交互。	您的应用程序（使用3306端口时，需映射到此）

将下面的配置写入进values.yaml文件里：

1
# 使用DaoCloud镜像代理
2
global:
3
  imageRegistry: "m.daocloud.io/docker.io"
4
  security:
5
    allowInsecureImages: true
6

7
# 集群架构 - 主从复制
8
architecture: replication
9

10
# 认证配置
11
auth:
12
  username: "clickhouse"
13
  password: "clickhouse123"
14

15
# 服务配置 - NodePort访问
16
service:
17
  type: NodePort
18
  nodePorts:
19
    http: 30123
20
    mysql: 30046
21

22
# 暴露MySQL协议
23
exposeMysql: true
24

25
# 禁用持久化
26
persistence:
27
  enabled: false
28

29
# 简化探针配置
30
livenessProbe:
31
  enabled: false
32
readinessProbe:
33
  enabled: false
34

35
# 最小资源
36
resources:
37
  requests:
38
    memory: "512Mi"
39
    cpu: "250m"
40

41
# 使用内置Keeper
42
keeper:
43
  enabled: true
44
  replicaCount: 1
45
  persistence:
46
    enabled: false
47
  livenessProbe:
48
    enabled: false
49
  readinessProbe:
50
    enabled: false

安装clickhouse#

1
# 安装clickhouse
2
sudo helm install clickhouse bitnami/clickhouse \
3
  --namespace clickhouse \
4
  --create-namespace \
5
  -f values.yaml
6

7
# 等待安装完成，查看状态
8
sudo kubectl get pods -n clickhouse -w

访问测试#

1
# 宿主机测试：
2
curl http://localhost:8123/
3

4
# 其他机器测试：
5
curl http://10.10.151.201:8123/

期望的结果：

1
➜  ~ curl http://10.10.151.201:8123/
2
Ok.

基于Kind集群部署Mysql和Clickhosue

https://hua-ri.cn/posts/kind集群使用helm部署mysql和clickhouse/

作者

花日

发布于

2025-10-18

许可协议

CC BY-NC-SA 4.0

部分信息可能已经过时

蓝鲸v7.1 mac m系列芯片构建机task进程无法清理排查

GO项目ORM框架对比与选择

花日の博客

基于Kind搭建测试集群#

搭建集群#

安装ingress#

Helm安装mysql集群#

添加Repository#

拉取chart到本地#

mysql集群配置#

安装Mysql集群#

访问mysql集群#

Helm安装clickhouse#

添加Repository#

拉取chart到本地#

clickhouse配置#

安装clickhouse#

访问测试#