获取全局服务集群的数据存储地址¶
可观测性是多集群统一观测的产品,为实现对多集群观测数据的统一存储、查询,子集群需要将采集的观测数据上报给全局管理集群进行统一存储。本文提供了在安装采集组件 insight-agent 时必填的存储组件的地址。
在全局服务集群安装 insight-agent¶
如果在全局服务集群集群安装 insight-agent,推荐通过域名来访问集群:
export vminsert_host="vminsert-insight-victoria-metrics-k8s-stack.insight-system.svc.cluster.local" # 指标
export es_host="insight-es-master.insight-system.svc.cluster.local" # 日志
export otel_col_host="insight-opentelemetry-collector.insight-system.svc.cluster.local" # 链路
在其他集群安装 insight-agent¶
通过 Insight Server 提供的接口获取地址¶
1. 管理集群使用默认的 LoadBalancer 方式暴露¶
登录全局管理集群的控制台,执行以下命令:
Note
请替换命令中的 ${INSIGHT_SERVER_IP} 参数。
export INSIGHT_SERVER_IP=$(kubectl get service insight-server -n insight-system --output=jsonpath={.spec.clusterIP})
curl --location --request POST 'http://'"${INSIGHT_SERVER_IP}"'/apis/insight.io/v1alpha1/agentinstallparam'
获得如下返回值:
{"values":"{\"global\":{\"exporters\":{\"logging\":{\"host\":\"10.6.182.32\"},\"metric\":{\"host\":\"10.6.182.32\"},\"auditLog\":{\"host\":\"10.6.182.32\"},\"trace\":{\"host\":\"10.6.182.32\"}}},\"opentelemetry-operator\":{\"enabled\":true},\"opentelemetry-collector\":{\"enabled\":true}}"}
参数说明:
-
global.exporters.logging.host 是日志服务地址【不需要再设置对应服务的端口,都会使用相应默认值】;
-
global.exporters.metric.host 是指标服务地址;
-
global.exporters.trace.host 是链路服务地址;
-
global.exporters.auditLog.host 是审计日志服务地址(和链路使用的同一个服务不同端口)。
2. 管理集群禁用 LoadBalancer¶
调用接口时需要额外传递集群中任意外部可访问的节点 IP,会使用该 IP 拼接出对应服务的完整访问地址。
export INSIGHT_SERVER_IP=$(kubectl get service insight-server -n insight-system --output=jsonpath={.spec.clusterIP})
curl --location --request POST 'http://'"${INSIGHT_SERVER_IP}"'/apis/insight.io/v1alpha1/agentinstallparam' --data '{"extra": {"EXPORTER_EXTERNAL_IP": "10.5.14.51"}}'
将获得如下的返回值:
{"values":"{\"global\":{\"exporters\":{\"logging\":{\"scheme\":\"https\",\"host\":\"10.5.14.51\",\"port\":32007,\"user\":\"elastic\",\"password\":\"j8V1oVoM1184HvQ1F3C8Pom2\"},\"metric\":{\"host\":\"10.5.14.51\",\"port\":30683},\"auditLog\":{\"host\":\"10.5.14.51\",\"port\":30884},\"trace\":{\"host\":\"10.5.14.51\",\"port\":30274}}},\"opentelemetry-operator\":{\"enabled\":true},\"opentelemetry-collector\":{\"enabled\":true}}"}
其中:
-
global.exporters.logging.host 是日志服务地址;
-
global.exporters.logging.port 是日志服务暴露的 nodePort;
-
global.exporters.metric.host 是指标服务地址;
-
global.exporters.metric.port 是指标服务暴露的 nodePort;
-
global.exporters.trace.host 是链路服务地址;
-
global.exporters.trace.port 是链路服务暴露的 nodePort;
-
global.exporters.auditLog.host 是审计日志服务地址(和链路使用的同一个服务不同端口);
-
global.exporters.auditLog.host 是审计日志服务暴露的 nodePort;
通过 LoadBalancer 连接¶
上述的通过 Insight Server 提供的接口获取地址是通过查询集群的 LoadBalancer 以获取连接地址。除此之外,你也可以手动执行命令 kubectl get service -n insight-system | grep lb 获得相应服务的地址信息。其中:
[root@localhost ~]# kubectl get service -n insight-system | grep lb
lb-insight-es-master LoadBalancer 10.233.35.17 <pending> 9200:31529/TCP 24d
lb-insight-opentelemetry-collector LoadBalancer 10.233.23.12 <pending> 4317:31286/TCP,8006:31351/TCP 24d
lb-vminsert-insight-victoria-metrics-k8s-stack LoadBalancer 10.233.63.67 <pending> 8480:31629/TCP 24d
-
lb-insight-es-master 是日志服务的地址;
-
lb-vminsert-insight-victoria-metrics-k8s-stack 是指标服务的地址;
-
lb-insight-opentelemetry-collector 是链路服务的地址;
通过 NodePort 连接¶
1. 全局服务集群启用 LB 特性【默认启用】¶
通过手动执行命令 kubectl get service -n insight-system | grep lb 获得相应服务的 NodePort 端口信息,参考通过 LoadBalancer 连接;
2.全局服务集群禁用 LB 特性¶
在该情况下,默认不会创建上述的 LoadBalancer 资源,对应服务名为
-
vminsert-insight-victoria-metrics-k8s-stack(指标服务);
-
insight-es-master(日志服务);
-
insight-opentelemetry-collector(链路服务)。
上面两种情况获取到对应服务的对应端口信息后,进行如下设置:
--set global.exporters.logging.host= #外部可访问的管理集群NodeIP
--set global.exporters.logging.port= #是日志服务9200端口对应的NodePort
--set global.exporters.metric.host= #外部可访问的管理集群NodeIP
--set global.exporters.metric.port= #是指标服务8480端口对应的NodePort
--set global.exporters.trace.host= #外部可访问的管理集群NodeIP
--set global.exporters.trace.port= #是链路服务4317端口对应的NodePort
--set global.exporters.auditLog.host= #外部可访问的管理集群NodeIP
--set global.exporters.auditLog.port= #是链路服务8006端口对应的NodePort