Ceph - штука мощная. Пока работает - все счастливы. Как только начинает деградировать OSD, заполняться пул или сеть внезапно превращается в тыкву - начинается классический инфраструктурный квест:
«А что вообще происходит?»
Именно поэтому мониторинг Ceph - не роскошь, а средство сохранения нервной системы DevOps-инженера.