istio+prometheus+grafana 流量监控

 从零到一配置 OpenAPI：

 

概要

       Istio采集指标prometheus+grafana方案，搭建（promethues+prometheus-postgresql-adapter+pg_prometheus） promethues·监控存储平台，

通过Istio+grafana 进行istio流量注入grafana图表展示，实现对API流量的统计。

配置 Prometheus 并且把数据存储至  Postgres (Prometheus + Postgres[TimescaleDB(pg_prometheus)])

 

 

Prometheus TimescaleDB适配器

安装配置 Prometheus

  1. 安装prometheus 
  2. 配置promethues.yaml. 配置参数如下：
global:
scrape_interval: 5s
evaluation_interval: 5s
external_labels:
monitor: 'codelab-monitor'
scrape_configs:
- job_name: prometheus
static_configs:
- targets:
- node-exporter-default:9100

- job_name: dx-servicemesh
static_configs:
- targets:
- istio-telemetry.istio-system:42422

remote_write:
- url: "http://prometheus-postgresql-adapter-default:9201/write"  # 远程写入pg,需要用适配器转接
remote_read:
- url: "http://prometheus-postgresql-adapter-default:9201/read"

 

配置 Prometheus 数据存储至 Postgres

 

要将TimescaleDB和PostgreSQL连接到Prometheus，有两个组件：a. 的 Prometheus_PostgreSQL_Adapter   b.具有pg_prometheus和timescaledb扩展名的PostgreSQL数据库

1.安装pg_prometheus:

  • 在postgresql的postgresql.conf中添加：shared_preload_libraries = 'pg_prometheus'，重启psql
  • 使用psql创建扩展：CREATE EXTENSION pg_prometheus;
  • 创建role: CREATE ROLE admin WITH LOGIN PASSWORD 'admin';
  • 授权role admin：GRANT ALL ON SCHEMA prometheus TO admin;
  • 创建table：SELECT create_prometheus_table('metrics');

2.安装prometheus-postgresql-adapter：

         启动命令如下，需要注意的是，由于在容器内部运行，-pg.host必须指定postgresql主机的地址，而非loopback接口:

        -pg-host\=pg-prometheus-default -pg-password\=123456 -pg-prometheus-log-samples  # 连接pg数据库

 

配置集群外部服务接入，并监控访问流量 （Istio + Prometheus + Grafana）

安装 Istio

 

Istio.yam:l


# Gateway描述了在网格边缘运行的负载均衡器，用于接收传入或传出的HTTP / TCP连接
apiVersion: networking.istio.io/v1alpha3
kind: Gateway
metadata:
name: gateway-external-svcentry
spec:
selector:
istio: ingressgateway # use Istio default gateway implementation
servers:
- port:
number: 80
name: http
protocol: HTTP
hosts:
- external.with.svcentry

---
# VirtualService定义了一组寻址主机时要应用的流量路由规则
apiVersion: networking.istio.io/v1alpha3
kind: VirtualService
metadata:
name: vs-external-svcentry
spec:
hosts:
- external.with.svcentry
gateways:
- gateway-external-svcentry
http:
- match:
- uri:
prefix: /
route:
- destination:
port:
number: 80
host: google-external-svcentry.service-pro.svc.cluster.local


---

apiVersion: v1
kind: Service
metadata:
name: google-external-svcentry
spec:
ports:
- name: http-8205
port: 80
protocol: TCP
targetPort: 8205
sessionAffinity: None
type: ClusterIP
status:
loadBalancer: {}

---

apiVersion: networking.istio.io/v1alpha3
kind: ServiceEntry
metadata:
generation: 1
name: se-external-svcentry
spec:
endpoints:
- address: 10.8.1.157  #接入外部服务IP
labels: {}
hosts:
- google-external-svcentry.service-pro.svc.cluster.local
ports:
- name: http-8205
number: 8205  #外部服务端口
protocol: HTTP
resolution: STATIC

 

安装 Grafana

Grafana接入promethues图表显示，

Grafana接入pgsql进行图表展示。

 配置 Prometheus 抓取 Istio 访问请求

mixer组件中遥测相关的对外提供的Kubernetes的Service的服务名是istio-telemetry，mixer对外开放的exporter的数据查询接口是/metrics；

- job_name: dx-servicemesh
static_configs:
- targets:
- istio-telemetry.istio-system:42422

 

Istio 接入外部服务

开放服务的IP和端口，接入istio服务。（这边开放了一个Google的IP和端口：10.7.122.10:30025）

apiVersion: networking.istio.io/v1alpha3
kind: ServiceEntry
metadata:
generation: 1
name: se-external-svcentry
spec:
endpoints:
- address: 10.7.122.10  #接入外部服务IP
labels: {}
hosts:
- google-external-svcentry.service-pro.svc.cluster.local
ports:
- name: http-8205
number: 30025  #外部服务端口
protocol: HTTP
resolution: STATIC

 

 

  

自己搭建的一个小demo：

1.	pg查询Google翻译istio_requests_total：

	连接pg数据库： 
	命令： psql -U postgres -h 10.7.122.10 -p 30018 -d postgres 

	password：123456

	查询语句：

	SELECT time, name, value, labels FROM metrics WHERE name = 'istio_requests_total' AND time >= '2020-01-03T09:54:53Z' AND time <= '2020-02-03T10:59:53Z'  AND labels @> '{"destination_service":"google-external-svcentry.service-pro.svc.cluster.local","monitor":"codelab-monitor"}' ORDER BY time \g 



2.  promethues：http://10.7.122.10:30008/graph

	PromQL:istio_requests_total{destination_service="google-external-svcentry.service-pro.svc.cluster.local"}


3. Grafana: http://10.7.122.10:31234/dashboard/new?tab=queries&panelId=2&edit&fullscreen&orgId=1

	user: admin 
	password:admin
	Metrics:istio_requests_total{destination_service="google-external-svcentry.service-pro.svc.cluster.local"}
posted @ 2020-01-07 15:38  Hanvans  阅读(2764)  评论(0)    收藏  举报