Alertmanager: кому и сколько раз

Плановые работы известны заранее: уведомления о них глушат на нужный срок, не трогая конфигурацию.

Тишина (silence) — условие на метки и срок: пока срок не вышел, об алертах с такими метками уведомлений нет. Сами алерты остаются в Alertmanager, но amtool alert их не показывает — только amtool alert query --silenced. Тишину заводят amtool — клиентом Alertmanager; адрес службы он берёт из /etc/amtool/config.yml:

amtool silence add alertname=InstanceDown \
  instance=db01:9100 --duration=30m \
  --comment='disk replacement on db01'
# активные тишины и их ID
amtool silence query
# заглушённые алерты
amtool alert query --silenced
# снять тишину раньше срока
amtool silence expire <ID>

Условие — метки через пробел, совпасть должны все. Чем точнее условие, тем меньше лишнего заглушится: alertname=InstanceDown без хоста заглушил бы все 50 серверов.