求解答一下prometheus和prometheus-k8s-system的区别？

errorcode7

 #kubectl  get svc -n kubesphere-monitoring-system
prometheus-k8s          ClusterIP   None         <none>        9090/TCP            3d22h
prometheus-k8s-system   ClusterIP   None         <none>        9090/TCP            3d22h
prometheus-operated     ClusterIP   None         <none>        9090/TCP            3d22h

1.prometheus和prometheus-k8s-system的区别？分别什么作用？
2.为什么都是9090端口？分别搜集什么数据？
3.prometheus.yaml在prometheus-k8s这个Secret里，但是ui上显示managed-by prometheus-operator，这里的修改了prometheus.yaml和prometheus-operator什么关系？修改后operator会作什么反应？
麻烦大佬解疑答惑！！！谢谢先！

huanggze

errorcode7

当前 KubeSphere 版本，prometheus-k8s 和 prometheus-k8s-system 分别承担了不同监控指标采集，前者主要负责 node-exporter、kube-state-metrics、kubelet 监控数据，后者负责 core-dns、kube-scheduler、kube-apiserver、etcd 监控数据。具体可以查询 prometheus CRD:

kubectl get prometheuses -n kubesphere-monitoirng-system

9090 是 prometheus 默认的端口
请勿直接修改 prometheus.yaml。所有对 prometheus 的操作，都应通过prometheus operator 来完成。即修改 Prometheus Operator CRD https://github.com/coreos/prometheus-operator/blob/master/Documentation/api.md

这里涉及到 k8s 声明式配置和 Operator 的概念，具体可参考我的这篇讲稿 https://mp.weixin.qq.com/s/8wwZVYdxAZpkit4cYgiJVA

errorcode7

huanggze

那如何在ks已经安装的prometheus-operator上面作修改呢？
如果我重新下载prometheus-operator作修改，比如添加新的指标采集job，极大可能和ks不适配。

hsdtsyl

huanggze

受益匪浅，终于搞明白啦；

huanggze

errorcode7 操作 prometheus operator 是修改相关的 CRD，你可以看这张图，下面这个图展示如何将 mysql-exporter 集成到 KubeSphere Prometheus

errorcode7

huanggze
大概明白了
1.在service里添加selector用的label
2.创建一个servicemonitor资源对象，同样写号service和namespace的selector
3.在prometheus资源对象里面添加values的内容，就是新加的servicemonitor
是这样吗？

[root@master ~]# kubectl get prometheus -n kubesphere-monitoring-system
NAME         AGE
k8s          6d22h
k8s-system   6d22h
[root@master ~]# kubectl get servicemonitor -n kubesphere-monitoring-system
NAME                      AGE
coredns                   6d22h
kube-apiserver            6d22h
kube-controller-manager   6d22h
kube-scheduler            6d22h
kube-state-metrics        6d22h
kubelet                   6d22h
node-exporter             6d22h
prometheus                6d22h
prometheus-system         6d22h
s2i-operator              6d21h

huanggze

errorcode7 是的，你的理解是对的

hsdtsyl

huanggze

如果 prometheus 要抓取的采集数据不在 k8s 集群中托管，该如何配置 prometheus 的 operator 呢？

比如我在集群外的某台主机中启用了 node_expoter，如何配置 prometheus 才能采集到呢；