>а у люстры recovery это несколько другая вещь - апаратную целостность данных она не контролирует

это я то путаю? :D странный вы какой-то. вот несколько пунктов для усваивания:
1. OSDs usually store data on raw block devices, using a custom storage format called EBOFS
2. Internally, Btrfs bears some resemblance to Ebofs, the userland object file system developed for use in Ceph
3. The storage daemons rely on btrfs for storing data (and take advantage of btrfs' internal transactions to keep the local data set in a consistent state). This makes the storage cluster simple to deploy, while providing scalability not currently available from block-based Linux cluster file systems.
4. Ceph может работать поверх блочных устройств, внутри одного файла или через размещение данных в существующих ФС (например, XFS).
т.е. поверх чего бы ceph не работал, он сохраняет данные в EBOFS.
вот теперь можете рассказывать как 2-а режима... бороздят просторы большого театра :D