596 lines
15 KiB
JSON
596 lines
15 KiB
JSON
|
{
|
||
|
|
"annotations": {
|
||
|
|
"list": [
|
||
|
|
{
|
||
|
|
"builtIn": 1,
|
||
|
|
"datasource": {
|
||
|
|
"type": "datasource",
|
||
|
|
"uid": "grafana"
|
||
|
|
},
|
||
|
|
"enable": true,
|
||
|
|
"hide": true,
|
||
|
|
"iconColor": "rgba(0, 211, 255, 1)",
|
||
|
|
"name": "Annotations & Alerts",
|
||
|
|
"target": {
|
||
|
|
"limit": 100,
|
||
|
|
"matchAny": false,
|
||
|
|
"tags": [],
|
||
|
|
"type": "dashboard"
|
||
|
|
},
|
||
|
|
"type": "dashboard"
|
||
|
|
}
|
||
|
|
]
|
||
|
|
},
|
||
|
|
"description": "Loki and Promtail metrics.",
|
||
|
|
"editable": true,
|
||
|
|
"fiscalYearStartMonth": 0,
|
||
|
|
"gnetId": 10880,
|
||
|
|
"graphTooltip": 0,
|
||
|
|
"id": 44,
|
||
|
|
"links": [],
|
||
|
|
"liveNow": false,
|
||
|
|
"panels": [
|
||
|
|
{
|
||
|
|
"datasource": {},
|
||
|
|
"fieldConfig": {
|
||
|
|
"defaults": {
|
||
|
|
"color": {
|
||
|
|
"mode": "palette-classic"
|
||
|
|
},
|
||
|
|
"custom": {
|
||
|
|
"axisBorderShow": false,
|
||
|
|
"axisCenteredZero": false,
|
||
|
|
"axisColorMode": "text",
|
||
|
|
"axisLabel": "",
|
||
|
|
"axisPlacement": "auto",
|
||
|
|
"barAlignment": 0,
|
||
|
|
"drawStyle": "line",
|
||
|
|
"fillOpacity": 0,
|
||
|
|
"gradientMode": "none",
|
||
|
|
"hideFrom": {
|
||
|
|
"legend": false,
|
||
|
|
"tooltip": false,
|
||
|
|
"viz": false
|
||
|
|
},
|
||
|
|
"insertNulls": false,
|
||
|
|
"lineInterpolation": "linear",
|
||
|
|
"lineWidth": 1,
|
||
|
|
"pointSize": 5,
|
||
|
|
"scaleDistribution": {
|
||
|
|
"type": "linear"
|
||
|
|
},
|
||
|
|
"showPoints": "auto",
|
||
|
|
"spanNulls": false,
|
||
|
|
"stacking": {
|
||
|
|
"group": "A",
|
||
|
|
"mode": "none"
|
||
|
|
},
|
||
|
|
"thresholdsStyle": {
|
||
|
|
"mode": "off"
|
||
|
|
}
|
||
|
|
},
|
||
|
|
"mappings": [],
|
||
|
|
"thresholds": {
|
||
|
|
"mode": "absolute",
|
||
|
|
"steps": [
|
||
|
|
{
|
||
|
|
"color": "green",
|
||
|
|
"value": null
|
||
|
|
},
|
||
|
|
{
|
||
|
|
"color": "red",
|
||
|
|
"value": 80
|
||
|
|
}
|
||
|
|
]
|
||
|
|
}
|
||
|
|
},
|
||
|
|
"overrides": []
|
||
|
|
},
|
||
|
|
"gridPos": {
|
||
|
|
"h": 8,
|
||
|
|
"w": 8,
|
||
|
|
"x": 0,
|
||
|
|
"y": 0
|
||
|
|
},
|
||
|
|
"id": 10,
|
||
|
|
"options": {
|
||
|
|
"legend": {
|
||
|
|
"calcs": [],
|
||
|
|
"displayMode": "list",
|
||
|
|
"placement": "bottom",
|
||
|
|
"showLegend": true
|
||
|
|
},
|
||
|
|
"tooltip": {
|
||
|
|
"mode": "single",
|
||
|
|
"sort": "none"
|
||
|
|
}
|
||
|
|
},
|
||
|
|
"targets": [
|
||
|
|
{
|
||
|
|
"datasource": {},
|
||
|
|
"editorMode": "code",
|
||
|
|
"expr": "sum by (status) (\nlabel_replace(\n label_replace(\n rate(loki_request_duration_seconds_count{route=~\"api_prom_push|loki_api_v1_push\"}[$interval]),\n \"status\", \"${1}xx\", \"status_code\", \"([0-9])..\"),\n\"status\", \"${1}\", \"status_code\", \"([a-z]+)\"))",
|
||
|
|
"legendFormat": "{{status}}",
|
||
|
|
"range": true,
|
||
|
|
"refId": "A"
|
||
|
|
}
|
||
|
|
],
|
||
|
|
"title": "pushes/second",
|
||
|
|
"type": "timeseries"
|
||
|
|
},
|
||
|
|
{
|
||
|
|
"datasource": {},
|
||
|
|
"fieldConfig": {
|
||
|
|
"defaults": {
|
||
|
|
"color": {
|
||
|
|
"mode": "palette-classic"
|
||
|
|
},
|
||
|
|
"custom": {
|
||
|
|
"axisBorderShow": false,
|
||
|
|
"axisCenteredZero": false,
|
||
|
|
"axisColorMode": "text",
|
||
|
|
"axisLabel": "",
|
||
|
|
"axisPlacement": "auto",
|
||
|
|
"barAlignment": 0,
|
||
|
|
"drawStyle": "line",
|
||
|
|
"fillOpacity": 10,
|
||
|
|
"gradientMode": "none",
|
||
|
|
"hideFrom": {
|
||
|
|
"legend": false,
|
||
|
|
"tooltip": false,
|
||
|
|
"viz": false
|
||
|
|
},
|
||
|
|
"insertNulls": false,
|
||
|
|
"lineInterpolation": "linear",
|
||
|
|
"lineWidth": 1,
|
||
|
|
"pointSize": 5,
|
||
|
|
"scaleDistribution": {
|
||
|
|
"type": "linear"
|
||
|
|
},
|
||
|
|
"showPoints": "never",
|
||
|
|
"spanNulls": false,
|
||
|
|
"stacking": {
|
||
|
|
"group": "A",
|
||
|
|
"mode": "none"
|
||
|
|
},
|
||
|
|
"thresholdsStyle": {
|
||
|
|
"mode": "off"
|
||
|
|
}
|
||
|
|
},
|
||
|
|
"links": [],
|
||
|
|
"mappings": [],
|
||
|
|
"thresholds": {
|
||
|
|
"mode": "absolute",
|
||
|
|
"steps": [
|
||
|
|
{
|
||
|
|
"color": "green",
|
||
|
|
"value": null
|
||
|
|
},
|
||
|
|
{
|
||
|
|
"color": "red",
|
||
|
|
"value": 80
|
||
|
|
}
|
||
|
|
]
|
||
|
|
},
|
||
|
|
"unit": "short"
|
||
|
|
},
|
||
|
|
"overrides": []
|
||
|
|
},
|
||
|
|
"gridPos": {
|
||
|
|
"h": 8,
|
||
|
|
"w": 8,
|
||
|
|
"x": 8,
|
||
|
|
"y": 0
|
||
|
|
},
|
||
|
|
"id": 2,
|
||
|
|
"options": {
|
||
|
|
"legend": {
|
||
|
|
"calcs": [],
|
||
|
|
"displayMode": "list",
|
||
|
|
"placement": "bottom",
|
||
|
|
"showLegend": true
|
||
|
|
},
|
||
|
|
"tooltip": {
|
||
|
|
"mode": "multi",
|
||
|
|
"sort": "none"
|
||
|
|
}
|
||
|
|
},
|
||
|
|
"pluginVersion": "10.0.3",
|
||
|
|
"targets": [
|
||
|
|
{
|
||
|
|
"datasource": {
|
||
|
|
"type": "prometheus",
|
||
|
|
"uid": "000000001"
|
||
|
|
},
|
||
|
|
"editorMode": "code",
|
||
|
|
"expr": "sum(rate (loki_distributor_ingester_appends_total[$interval]))",
|
||
|
|
"legendFormat": "{{instance}}",
|
||
|
|
"range": true,
|
||
|
|
"refId": "A"
|
||
|
|
}
|
||
|
|
],
|
||
|
|
"title": "Average batch appends sent to ingesters (Loki)",
|
||
|
|
"type": "timeseries"
|
||
|
|
},
|
||
|
|
{
|
||
|
|
"datasource": {},
|
||
|
|
"fieldConfig": {
|
||
|
|
"defaults": {
|
||
|
|
"color": {
|
||
|
|
"mode": "palette-classic"
|
||
|
|
},
|
||
|
|
"custom": {
|
||
|
|
"axisBorderShow": false,
|
||
|
|
"axisCenteredZero": false,
|
||
|
|
"axisColorMode": "text",
|
||
|
|
"axisLabel": "",
|
||
|
|
"axisPlacement": "auto",
|
||
|
|
"barAlignment": 0,
|
||
|
|
"drawStyle": "line",
|
||
|
|
"fillOpacity": 10,
|
||
|
|
"gradientMode": "none",
|
||
|
|
"hideFrom": {
|
||
|
|
"legend": false,
|
||
|
|
"tooltip": false,
|
||
|
|
"viz": false
|
||
|
|
},
|
||
|
|
"insertNulls": false,
|
||
|
|
"lineInterpolation": "linear",
|
||
|
|
"lineWidth": 1,
|
||
|
|
"pointSize": 5,
|
||
|
|
"scaleDistribution": {
|
||
|
|
"type": "linear"
|
||
|
|
},
|
||
|
|
"showPoints": "never",
|
||
|
|
"spanNulls": false,
|
||
|
|
"stacking": {
|
||
|
|
"group": "A",
|
||
|
|
"mode": "none"
|
||
|
|
},
|
||
|
|
"thresholdsStyle": {
|
||
|
|
"mode": "off"
|
||
|
|
}
|
||
|
|
},
|
||
|
|
"links": [],
|
||
|
|
"mappings": [],
|
||
|
|
"thresholds": {
|
||
|
|
"mode": "absolute",
|
||
|
|
"steps": [
|
||
|
|
{
|
||
|
|
"color": "green",
|
||
|
|
"value": null
|
||
|
|
},
|
||
|
|
{
|
||
|
|
"color": "red",
|
||
|
|
"value": 80
|
||
|
|
}
|
||
|
|
]
|
||
|
|
},
|
||
|
|
"unit": "short"
|
||
|
|
},
|
||
|
|
"overrides": []
|
||
|
|
},
|
||
|
|
"gridPos": {
|
||
|
|
"h": 8,
|
||
|
|
"w": 8,
|
||
|
|
"x": 16,
|
||
|
|
"y": 0
|
||
|
|
},
|
||
|
|
"id": 8,
|
||
|
|
"interval": "",
|
||
|
|
"options": {
|
||
|
|
"legend": {
|
||
|
|
"calcs": [],
|
||
|
|
"displayMode": "list",
|
||
|
|
"placement": "bottom",
|
||
|
|
"showLegend": false
|
||
|
|
},
|
||
|
|
"tooltip": {
|
||
|
|
"mode": "multi",
|
||
|
|
"sort": "none"
|
||
|
|
}
|
||
|
|
},
|
||
|
|
"pluginVersion": "10.0.3",
|
||
|
|
"targets": [
|
||
|
|
{
|
||
|
|
"datasource": {},
|
||
|
|
"editorMode": "code",
|
||
|
|
"expr": "rate(loki_ingester_chunk_entries_count[$interval])",
|
||
|
|
"range": true,
|
||
|
|
"refId": "A"
|
||
|
|
}
|
||
|
|
],
|
||
|
|
"title": "chunks ingested/second",
|
||
|
|
"type": "timeseries"
|
||
|
|
},
|
||
|
|
{
|
||
|
|
"datasource": {},
|
||
|
|
"fieldConfig": {
|
||
|
|
"defaults": {
|
||
|
|
"color": {
|
||
|
|
"mode": "palette-classic"
|
||
|
|
},
|
||
|
|
"custom": {
|
||
|
|
"axisBorderShow": false,
|
||
|
|
"axisCenteredZero": false,
|
||
|
|
"axisColorMode": "text",
|
||
|
|
"axisLabel": "",
|
||
|
|
"axisPlacement": "auto",
|
||
|
|
"barAlignment": 0,
|
||
|
|
"drawStyle": "line",
|
||
|
|
"fillOpacity": 10,
|
||
|
|
"gradientMode": "none",
|
||
|
|
"hideFrom": {
|
||
|
|
"legend": false,
|
||
|
|
"tooltip": false,
|
||
|
|
"viz": false
|
||
|
|
},
|
||
|
|
"insertNulls": false,
|
||
|
|
"lineInterpolation": "linear",
|
||
|
|
"lineWidth": 1,
|
||
|
|
"pointSize": 5,
|
||
|
|
"scaleDistribution": {
|
||
|
|
"type": "linear"
|
||
|
|
},
|
||
|
|
"showPoints": "never",
|
||
|
|
"spanNulls": false,
|
||
|
|
"stacking": {
|
||
|
|
"group": "A",
|
||
|
|
"mode": "none"
|
||
|
|
},
|
||
|
|
"thresholdsStyle": {
|
||
|
|
"mode": "off"
|
||
|
|
}
|
||
|
|
},
|
||
|
|
"links": [],
|
||
|
|
"mappings": [],
|
||
|
|
"thresholds": {
|
||
|
|
"mode": "absolute",
|
||
|
|
"steps": [
|
||
|
|
{
|
||
|
|
"color": "green",
|
||
|
|
"value": null
|
||
|
|
},
|
||
|
|
{
|
||
|
|
"color": "red",
|
||
|
|
"value": 80
|
||
|
|
}
|
||
|
|
]
|
||
|
|
},
|
||
|
|
"unit": "binBps"
|
||
|
|
},
|
||
|
|
"overrides": []
|
||
|
|
},
|
||
|
|
"gridPos": {
|
||
|
|
"h": 8,
|
||
|
|
"w": 24,
|
||
|
|
"x": 0,
|
||
|
|
"y": 8
|
||
|
|
},
|
||
|
|
"id": 6,
|
||
|
|
"options": {
|
||
|
|
"legend": {
|
||
|
|
"calcs": [
|
||
|
|
"mean",
|
||
|
|
"min",
|
||
|
|
"sum"
|
||
|
|
],
|
||
|
|
"displayMode": "table",
|
||
|
|
"placement": "right",
|
||
|
|
"showLegend": true
|
||
|
|
},
|
||
|
|
"tooltip": {
|
||
|
|
"mode": "multi",
|
||
|
|
"sort": "none"
|
||
|
|
}
|
||
|
|
},
|
||
|
|
"pluginVersion": "10.0.3",
|
||
|
|
"targets": [
|
||
|
|
{
|
||
|
|
"datasource": {},
|
||
|
|
"editorMode": "code",
|
||
|
|
"exemplar": true,
|
||
|
|
"expr": "sum(rate(promtail_sent_bytes_total[$interval])) by (instance)",
|
||
|
|
"interval": "",
|
||
|
|
"legendFormat": "__auto",
|
||
|
|
"range": true,
|
||
|
|
"refId": "A"
|
||
|
|
}
|
||
|
|
],
|
||
|
|
"title": "sent by total by promtail",
|
||
|
|
"type": "timeseries"
|
||
|
|
},
|
||
|
|
{
|
||
|
|
"datasource": {},
|
||
|
|
"fieldConfig": {
|
||
|
|
"defaults": {
|
||
|
|
"color": {
|
||
|
|
"mode": "palette-classic"
|
||
|
|
},
|
||
|
|
"custom": {
|
||
|
|
"axisBorderShow": false,
|
||
|
|
"axisCenteredZero": false,
|
||
|
|
"axisColorMode": "text",
|
||
|
|
"axisLabel": "",
|
||
|
|
"axisPlacement": "auto",
|
||
|
|
"barAlignment": 0,
|
||
|
|
"drawStyle": "line",
|
||
|
|
"fillOpacity": 10,
|
||
|
|
"gradientMode": "none",
|
||
|
|
"hideFrom": {
|
||
|
|
"legend": false,
|
||
|
|
"tooltip": false,
|
||
|
|
"viz": false
|
||
|
|
},
|
||
|
|
"insertNulls": false,
|
||
|
|
"lineInterpolation": "linear",
|
||
|
|
"lineWidth": 1,
|
||
|
|
"pointSize": 5,
|
||
|
|
"scaleDistribution": {
|
||
|
|
"type": "linear"
|
||
|
|
},
|
||
|
|
"showPoints": "never",
|
||
|
|
"spanNulls": false,
|
||
|
|
"stacking": {
|
||
|
|
"group": "A",
|
||
|
|
"mode": "none"
|
||
|
|
},
|
||
|
|
"thresholdsStyle": {
|
||
|
|
"mode": "off"
|
||
|
|
}
|
||
|
|
},
|
||
|
|
"links": [],
|
||
|
|
"mappings": [],
|
||
|
|
"thresholds": {
|
||
|
|
"mode": "absolute",
|
||
|
|
"steps": [
|
||
|
|
{
|
||
|
|
"color": "green",
|
||
|
|
"value": null
|
||
|
|
},
|
||
|
|
{
|
||
|
|
"color": "red",
|
||
|
|
"value": 80
|
||
|
|
}
|
||
|
|
]
|
||
|
|
},
|
||
|
|
"unit": "binBps"
|
||
|
|
},
|
||
|
|
"overrides": []
|
||
|
|
},
|
||
|
|
"gridPos": {
|
||
|
|
"h": 8,
|
||
|
|
"w": 24,
|
||
|
|
"x": 0,
|
||
|
|
"y": 16
|
||
|
|
},
|
||
|
|
"id": 4,
|
||
|
|
"options": {
|
||
|
|
"legend": {
|
||
|
|
"calcs": [],
|
||
|
|
"displayMode": "table",
|
||
|
|
"placement": "right",
|
||
|
|
"showLegend": true
|
||
|
|
},
|
||
|
|
"tooltip": {
|
||
|
|
"mode": "multi",
|
||
|
|
"sort": "none"
|
||
|
|
}
|
||
|
|
},
|
||
|
|
"pluginVersion": "10.0.3",
|
||
|
|
"targets": [
|
||
|
|
{
|
||
|
|
"datasource": {},
|
||
|
|
"editorMode": "code",
|
||
|
|
"expr": "sum(rate(promtail_encoded_bytes_total[$interval])) by (instance)",
|
||
|
|
"format": "time_series",
|
||
|
|
"instant": false,
|
||
|
|
"legendFormat": "{{ pod }}",
|
||
|
|
"refId": "A"
|
||
|
|
}
|
||
|
|
],
|
||
|
|
"title": "encoded by promtail",
|
||
|
|
"type": "timeseries"
|
||
|
|
}
|
||
|
|
],
|
||
|
|
"refresh": "30s",
|
||
|
|
"schemaVersion": 39,
|
||
|
|
"tags": [],
|
||
|
|
"templating": {
|
||
|
|
"list": [
|
||
|
|
{
|
||
|
|
"auto": false,
|
||
|
|
"auto_count": 30,
|
||
|
|
"auto_min": "10s",
|
||
|
|
"current": {
|
||
|
|
"selected": false,
|
||
|
|
"text": "10m",
|
||
|
|
"value": "10m"
|
||
|
|
},
|
||
|
|
"hide": 0,
|
||
|
|
"name": "interval",
|
||
|
|
"options": [
|
||
|
|
{
|
||
|
|
"selected": false,
|
||
|
|
"text": "1m",
|
||
|
|
"value": "1m"
|
||
|
|
},
|
||
|
|
{
|
||
|
|
"selected": true,
|
||
|
|
"text": "10m",
|
||
|
|
"value": "10m"
|
||
|
|
},
|
||
|
|
{
|
||
|
|
"selected": false,
|
||
|
|
"text": "30m",
|
||
|
|
"value": "30m"
|
||
|
|
},
|
||
|
|
{
|
||
|
|
"selected": false,
|
||
|
|
"text": "1h",
|
||
|
|
"value": "1h"
|
||
|
|
},
|
||
|
|
{
|
||
|
|
"selected": false,
|
||
|
|
"text": "6h",
|
||
|
|
"value": "6h"
|
||
|
|
},
|
||
|
|
{
|
||
|
|
"selected": false,
|
||
|
|
"text": "12h",
|
||
|
|
"value": "12h"
|
||
|
|
},
|
||
|
|
{
|
||
|
|
"selected": false,
|
||
|
|
"text": "1d",
|
||
|
|
"value": "1d"
|
||
|
|
},
|
||
|
|
{
|
||
|
|
"selected": false,
|
||
|
|
"text": "7d",
|
||
|
|
"value": "7d"
|
||
|
|
},
|
||
|
|
{
|
||
|
|
"selected": false,
|
||
|
|
"text": "14d",
|
||
|
|
"value": "14d"
|
||
|
|
},
|
||
|
|
{
|
||
|
|
"selected": false,
|
||
|
|
"text": "30d",
|
||
|
|
"value": "30d"
|
||
|
|
}
|
||
|
|
],
|
||
|
|
"query": "1m,10m,30m,1h,6h,12h,1d,7d,14d,30d",
|
||
|
|
"queryValue": "",
|
||
|
|
"refresh": 2,
|
||
|
|
"skipUrlSync": false,
|
||
|
|
"type": "interval"
|
||
|
|
}
|
||
|
|
]
|
||
|
|
},
|
||
|
|
"time": {
|
||
|
|
"from": "now-24h",
|
||
|
|
"to": "now"
|
||
|
|
},
|
||
|
|
"timepicker": {
|
||
|
|
"refresh_intervals": [
|
||
|
|
"5s",
|
||
|
|
"10s",
|
||
|
|
"30s",
|
||
|
|
"1m",
|
||
|
|
"5m",
|
||
|
|
"15m",
|
||
|
|
"30m",
|
||
|
|
"1h",
|
||
|
|
"2h",
|
||
|
|
"1d"
|
||
|
|
]
|
||
|
|
},
|
||
|
|
"timezone": "",
|
||
|
|
"title": "Loki & Promtail",
|
||
|
|
"uid": "MQHVDmtWk",
|
||
|
|
"version": 5,
|
||
|
|
"weekStart": ""
|
||
|
|
}
|