bundles/grafana: replace the useless builtin of telegraf with something more useful
This commit is contained in:
parent
f6d6ef7aa7
commit
6b641890c3
GPG key ID:
12E3D2136B818350
5 changed files with 299 additions and 23 deletions
228
bundles/grafana/dashboard-rows/smartd.py
Normal file
228
bundles/grafana/dashboard-rows/smartd.py
Normal file
|
|
@ -0,0 +1,228 @@
|
||||||
|
def dashboard_row_smartd(panel_id, node):
|
||||||
|
return {
|
||||||
|
'title': 'smartd',
|
||||||
|
'collapse': False,
|
||||||
|
'editable': False,
|
||||||
|
'height': '250px',
|
||||||
|
'panels': [
|
||||||
|
{
|
||||||
|
'aliasColors': {},
|
||||||
|
'bars': False,
|
||||||
|
'dashLength': 10,
|
||||||
|
'dashes': False,
|
||||||
|
'datasource': None,
|
||||||
|
'fieldConfig': {
|
||||||
|
'defaults': {
|
||||||
|
'displayName': '${__field.labels.device}'
|
||||||
|
},
|
||||||
|
'overrides': []
|
||||||
|
},
|
||||||
|
'fill': 0,
|
||||||
|
'fillGradient': 0,
|
||||||
|
'hiddenSeries': False,
|
||||||
|
'id': next(panel_id),
|
||||||
|
'legend': {
|
||||||
|
'alignAsTable': False,
|
||||||
|
'avg': False,
|
||||||
|
'current': False,
|
||||||
|
'hideEmpty': True,
|
||||||
|
'hideZero': True,
|
||||||
|
'max': False,
|
||||||
|
'min': False,
|
||||||
|
'rightSide': False,
|
||||||
|
'show': True,
|
||||||
|
'total': False,
|
||||||
|
'values': False
|
||||||
|
},
|
||||||
|
'lines': True,
|
||||||
|
'linewidth': 1,
|
||||||
|
'NonePointMode': 'None',
|
||||||
|
'options': {
|
||||||
|
'alertThreshold': True
|
||||||
|
},
|
||||||
|
'percentage': False,
|
||||||
|
'pluginVersion': '7.5.5',
|
||||||
|
'pointradius': 2,
|
||||||
|
'points': False,
|
||||||
|
'renderer': 'flot',
|
||||||
|
'seriesOverrides': [],
|
||||||
|
'spaceLength': 10,
|
||||||
|
'span': 8,
|
||||||
|
'stack': False,
|
||||||
|
'steppedLine': False,
|
||||||
|
'targets': [
|
||||||
|
{
|
||||||
|
'groupBy': [
|
||||||
|
{'type': 'time', 'params': ['$__interval']},
|
||||||
|
{'type': 'fill', 'params': ['linear']},
|
||||||
|
],
|
||||||
|
'orderByTime': "ASC",
|
||||||
|
'policy': "default",
|
||||||
|
'query': f"""from(bucket: "telegraf")
|
||||||
|
|> range(start: v.timeRangeStart, stop: v.timeRangeStop)
|
||||||
|
|> filter(fn: (r) =>
|
||||||
|
r["_measurement"] == "smartd_stats" and
|
||||||
|
r["_field"] == "temperature" and
|
||||||
|
r["host"] == "{node.name}"
|
||||||
|
)
|
||||||
|
|> aggregateWindow(every: v.windowPeriod, fn: mean, createEmpty: false)
|
||||||
|
|> yield(name: "cpu")""",
|
||||||
|
'resultFormat': 'time_series',
|
||||||
|
'select': [[
|
||||||
|
{'type': 'field', 'params': ['value']},
|
||||||
|
{'type': 'mean', 'params': []},
|
||||||
|
]],
|
||||||
|
"tags": []
|
||||||
|
},
|
||||||
|
],
|
||||||
|
'thresholds': [],
|
||||||
|
'timeRegions': [],
|
||||||
|
'title': 'temperatures',
|
||||||
|
'tooltip': {
|
||||||
|
'shared': True,
|
||||||
|
'sort': 0,
|
||||||
|
'value_type': 'individual'
|
||||||
|
},
|
||||||
|
'type': 'graph',
|
||||||
|
'xaxis': {
|
||||||
|
'buckets': None,
|
||||||
|
'mode': 'time',
|
||||||
|
'name': None,
|
||||||
|
'show': True,
|
||||||
|
'values': []
|
||||||
|
},
|
||||||
|
'yaxes': [
|
||||||
|
{
|
||||||
|
'format': 'celsius',
|
||||||
|
'label': None,
|
||||||
|
'logBase': 1,
|
||||||
|
'max': None,
|
||||||
|
'min': 0,
|
||||||
|
'show': True,
|
||||||
|
},
|
||||||
|
{
|
||||||
|
'format': 'short',
|
||||||
|
'label': None,
|
||||||
|
'logBase': 1,
|
||||||
|
'max': None,
|
||||||
|
'min': None,
|
||||||
|
'show': False,
|
||||||
|
}
|
||||||
|
],
|
||||||
|
'yaxis': {
|
||||||
|
'align': False,
|
||||||
|
'alignLevel': None
|
||||||
|
}
|
||||||
|
},
|
||||||
|
{
|
||||||
|
'aliasColors': {},
|
||||||
|
'bars': False,
|
||||||
|
'dashLength': 10,
|
||||||
|
'dashes': False,
|
||||||
|
'datasource': None,
|
||||||
|
'fieldConfig': {
|
||||||
|
'defaults': {
|
||||||
|
'displayName': '${__field.labels.device}'
|
||||||
|
},
|
||||||
|
'overrides': []
|
||||||
|
},
|
||||||
|
'fill': 0,
|
||||||
|
'fillGradient': 0,
|
||||||
|
'hiddenSeries': False,
|
||||||
|
'id': next(panel_id),
|
||||||
|
'legend': {
|
||||||
|
'alignAsTable': False,
|
||||||
|
'avg': False,
|
||||||
|
'current': False,
|
||||||
|
'hideEmpty': True,
|
||||||
|
'hideZero': True,
|
||||||
|
'max': False,
|
||||||
|
'min': False,
|
||||||
|
'rightSide': False,
|
||||||
|
'show': True,
|
||||||
|
'total': False,
|
||||||
|
'values': False
|
||||||
|
},
|
||||||
|
'lines': True,
|
||||||
|
'linewidth': 1,
|
||||||
|
'NonePointMode': 'None',
|
||||||
|
'options': {
|
||||||
|
'alertThreshold': True
|
||||||
|
},
|
||||||
|
'percentage': False,
|
||||||
|
'pluginVersion': '7.5.5',
|
||||||
|
'pointradius': 2,
|
||||||
|
'points': False,
|
||||||
|
'renderer': 'flot',
|
||||||
|
'seriesOverrides': [],
|
||||||
|
'spaceLength': 10,
|
||||||
|
'span': 4,
|
||||||
|
'stack': False,
|
||||||
|
'steppedLine': False,
|
||||||
|
'targets': [
|
||||||
|
{
|
||||||
|
'groupBy': [
|
||||||
|
{'type': 'time', 'params': ['$__interval']},
|
||||||
|
{'type': 'fill', 'params': ['linear']},
|
||||||
|
],
|
||||||
|
'orderByTime': "ASC",
|
||||||
|
'policy': "default",
|
||||||
|
'query': f"""from(bucket: "telegraf")
|
||||||
|
|> range(start: v.timeRangeStart, stop: v.timeRangeStop)
|
||||||
|
|> filter(fn: (r) =>
|
||||||
|
r["_measurement"] == "smartd_stats" and
|
||||||
|
r["_field"] == "power_on_hours" and
|
||||||
|
r["host"] == "{node.name}"
|
||||||
|
)
|
||||||
|
|> aggregateWindow(every: v.windowPeriod, fn: mean, createEmpty: false)
|
||||||
|
|> yield(name: "fan")""",
|
||||||
|
'resultFormat': 'time_series',
|
||||||
|
'select': [[
|
||||||
|
{'type': 'field', 'params': ['value']},
|
||||||
|
{'type': 'mean', 'params': []},
|
||||||
|
]],
|
||||||
|
"tags": []
|
||||||
|
},
|
||||||
|
],
|
||||||
|
'thresholds': [],
|
||||||
|
'timeRegions': [],
|
||||||
|
'title': 'fans',
|
||||||
|
'tooltip': {
|
||||||
|
'shared': True,
|
||||||
|
'sort': 0,
|
||||||
|
'value_type': 'individual'
|
||||||
|
},
|
||||||
|
'type': 'graph',
|
||||||
|
'xaxis': {
|
||||||
|
'buckets': None,
|
||||||
|
'mode': 'time',
|
||||||
|
'name': None,
|
||||||
|
'show': True,
|
||||||
|
'values': []
|
||||||
|
},
|
||||||
|
'yaxes': [
|
||||||
|
{
|
||||||
|
'format': 'hours',
|
||||||
|
'label': None,
|
||||||
|
'logBase': 1,
|
||||||
|
'max': None,
|
||||||
|
'min': None,
|
||||||
|
'show': True,
|
||||||
|
'decimals': 0,
|
||||||
|
},
|
||||||
|
{
|
||||||
|
'format': 'short',
|
||||||
|
'label': None,
|
||||||
|
'logBase': 1,
|
||||||
|
'max': None,
|
||||||
|
'min': None,
|
||||||
|
'show': False,
|
||||||
|
}
|
||||||
|
],
|
||||||
|
'yaxis': {
|
||||||
|
'align': False,
|
||||||
|
'alignLevel': None
|
||||||
|
}
|
||||||
|
},
|
||||||
|
],
|
||||||
|
}
|
||||||
|
|
@ -103,6 +103,10 @@ for rnode in repo.nodes:
|
||||||
dashboard['rows'].append(dashboard_row_sensors(panel_id, rnode))
|
dashboard['rows'].append(dashboard_row_sensors(panel_id, rnode))
|
||||||
dashboard['tags'].add('lm-sensors')
|
dashboard['tags'].add('lm-sensors')
|
||||||
|
|
||||||
|
if rnode.has_bundle('smartd'):
|
||||||
|
dashboard['rows'].append(dashboard_row_smartd(panel_id, rnode))
|
||||||
|
dashboard['tags'].add('smartd')
|
||||||
|
|
||||||
if rnode.has_bundle('telegraf-battery-usage'):
|
if rnode.has_bundle('telegraf-battery-usage'):
|
||||||
dashboard['rows'].append(dashboard_row_battery(panel_id, rnode))
|
dashboard['rows'].append(dashboard_row_battery(panel_id, rnode))
|
||||||
|
|
||||||
|
|
|
||||||
47
bundles/smartd/files/telegraf_plugin
Normal file
47
bundles/smartd/files/telegraf_plugin
Normal file
|
|
@ -0,0 +1,47 @@
|
||||||
|
#!/usr/bin/env python
|
||||||
|
|
||||||
|
from subprocess import check_output
|
||||||
|
from json import loads
|
||||||
|
from sys import stderr
|
||||||
|
|
||||||
|
devices = check_output(['smartctl', '--scan']).decode().splitlines()
|
||||||
|
|
||||||
|
for device in devices:
|
||||||
|
device = device.split(' ')[0]
|
||||||
|
|
||||||
|
try:
|
||||||
|
json = loads(check_output(['smartctl', '-n', 'standby', '-A', '--json=c', device]))
|
||||||
|
|
||||||
|
telegraf_output = set()
|
||||||
|
|
||||||
|
if 'power_on_time' in json:
|
||||||
|
telegraf_output.add('power_on_hours={}'.format(json['power_on_time']['hours']))
|
||||||
|
|
||||||
|
if 'temperature' in json:
|
||||||
|
telegraf_output.add('temperature={}'.format(json['temperature']['current']))
|
||||||
|
|
||||||
|
print('smartd_stats,device={device} {values}'.format(
|
||||||
|
device=device,
|
||||||
|
values=','.join(sorted(telegraf_output)),
|
||||||
|
))
|
||||||
|
|
||||||
|
telegraf_output = set()
|
||||||
|
|
||||||
|
if 'nvme_smart_health_information_log' in json:
|
||||||
|
for k, v in json['nvme_smart_health_information_log'].items():
|
||||||
|
telegraf_output.add(f'{k}={v}')
|
||||||
|
|
||||||
|
if 'ata_smart_attributes' in json:
|
||||||
|
for entry in json['ata_smart_attributes']['table']:
|
||||||
|
telegraf_output.add('{}={}'.format(
|
||||||
|
entry['name'],
|
||||||
|
entry['raw']['value'],
|
||||||
|
))
|
||||||
|
|
||||||
|
print('smartd_health,device={device},type={type} {values}'.format(
|
||||||
|
device=device,
|
||||||
|
type=json['device']['type'],
|
||||||
|
values=','.join(sorted(telegraf_output)),
|
||||||
|
))
|
||||||
|
except Exception as e:
|
||||||
|
print(f'{device} {repr(e)}', file=stderr)
|
||||||
|
|
@ -8,6 +8,10 @@ files = {
|
||||||
'/usr/local/share/icinga/plugins/check_smart': {
|
'/usr/local/share/icinga/plugins/check_smart': {
|
||||||
'mode': '0755',
|
'mode': '0755',
|
||||||
},
|
},
|
||||||
|
'/usr/local/sbin/telegraf-smartd': {
|
||||||
|
'source': 'telegraf_plugin',
|
||||||
|
'mode': '0755',
|
||||||
|
},
|
||||||
}
|
}
|
||||||
|
|
||||||
svc_systemd = {
|
svc_systemd = {
|
||||||
|
|
|
||||||
|
|
@ -24,6 +24,22 @@ defaults = {
|
||||||
},
|
},
|
||||||
}
|
}
|
||||||
|
|
||||||
|
if node.has_bundle('telegraf'):
|
||||||
|
defaults['telegraf'] = {
|
||||||
|
'input_plugins': {
|
||||||
|
'exec': {
|
||||||
|
'smartd': {
|
||||||
|
'commands': ['sudo /usr/local/sbin/telegraf-smartd'],
|
||||||
|
'data_format': 'influx',
|
||||||
|
'timeout': '5s',
|
||||||
|
},
|
||||||
|
},
|
||||||
|
},
|
||||||
|
'sudo_commands': {
|
||||||
|
'/usr/local/sbin/telegraf-smartd',
|
||||||
|
},
|
||||||
|
}
|
||||||
|
|
||||||
|
|
||||||
@metadata_reactor.provides(
|
@metadata_reactor.provides(
|
||||||
'smartd/disks',
|
'smartd/disks',
|
||||||
|
|
@ -67,29 +83,6 @@ def icinga(metadata):
|
||||||
}
|
}
|
||||||
|
|
||||||
|
|
||||||
@metadata_reactor.provides(
|
|
||||||
'telegraf/input_plugins/builtin/smart',
|
|
||||||
)
|
|
||||||
def telegraf(metadata):
|
|
||||||
if not node.has_bundle('telegraf'):
|
|
||||||
raise DoNotRunAgain
|
|
||||||
|
|
||||||
if metadata.get('smartd/disks', set()):
|
|
||||||
return {
|
|
||||||
'telegraf': {
|
|
||||||
'input_plugins': {
|
|
||||||
'builtin': {
|
|
||||||
'smart': [{
|
|
||||||
'devices': list(sorted(metadata.get('smartd/disks'))),
|
|
||||||
}],
|
|
||||||
},
|
|
||||||
},
|
|
||||||
},
|
|
||||||
}
|
|
||||||
|
|
||||||
return {}
|
|
||||||
|
|
||||||
|
|
||||||
@metadata_reactor.provides(
|
@metadata_reactor.provides(
|
||||||
'cron/jobs/smartd',
|
'cron/jobs/smartd',
|
||||||
)
|
)
|
||||||
|
|
|
||||||
Loading…
Reference in a new issue