Сетевые файловые хранилища для дома
Хозяйке на заметку
Занимательная дисковая арифметика для ZFS
1 Сентябрь
Некоторое время назад я сокрушался, что от двух дисков по терабайту, после построения из них программного RAID 1, на UFS, осталось всего 830Gb места, доступного для хранения файлов.
После перехода на ZFS, зеркалирование данных теперь осуществляется файловой системой, картина довольно существенно изменилась:
> df -h /mnt/storage/ Filesystem Size Used Avail Capacity Mounted on storage 916G 600G 317G 65% /mnt/storage
Т.е. объём доступного файловому хранилищу места увеличился на 86Gb, с 830Gb до 916Gb. И этот показатель не уменьшается с заполнением диска, в отличии от предыдущей конфигурации хранилища, программный RAID 1 и UFS.
Таким образом, ZFS со всех сторон выглядит отличной файловой системой для домашнего сетевого хранилища. К предыдущим достоинствам добавился и больший объём доступного места.
Занимательная дисковая арифметика
19 Март
Вот вы купили два терабайтных винчестера и хотите построить из них дисковый массив RAID 1. Сколько места вы ожидаете получить в итоге?
Теория RAID 1 говорит, что в итоге вы получите объём массива, равный одному терабайту. Однако реальность несколько отличается от этой теории.
Первым делом, не забывайте, что терабайтные винчестеры традиционно не терабайтные, а триллионбайтные. Таким образом, изготовители винчестеров бесплатно «увеличивают» маркетинговый объём. Поэтому мы уже имеем всего 931Gb вместо 1Tb.
Дальше интереснее. При постройке из двух терабайтных винчестеров программного RAID1 на FreeBSD получаем 902Gb свободного пространства. Т.е. 30Gb сразу съелось на служебную информацию.
Ну и уж вообще забавно получается после заполнения половины диска:
Filesystem Size Used Avail Capacity Mounted on /dev/mirror/Storage1 902G 442G 388G 53% /mnt/storage
Т.е. указано, что общий размер диска — 902Gb, занято — 442Gb, свободно — 388Gb. Ничего не настораживает?
442+388=830, а не 902. Куда, спрашивается ещ` 72Gb делось?
Таким образом вместо терабайта получили 830Gb. Из них 69Gb повисло на совести Western Digital — изготовителя дисков, а еще 100Gb съел программный RAID1.
Мне тут интересны три вопроса:
- С железным RAID1 такая же беда?
- Реализация программного RAID 1 на других операционных системах столь же прожорлива?
- 830GB — это окончательный объём или потом ещё пропадёт?
Не забывайте бекапить бекапы!
14 Март
Вчера случайно выяснил с какой дикой скоростью FreeBSD удаляет файлы с UFS. Разбирал фотографии прямо на сервере и, как герой многих сисадминских анекдотов, напустил rm -rf Photos""...
Как показал осмотр разрушений, за те несколько секунд, что я осознавал, что я сделал и жал на отмену, сервер успел снести половину из почти сотни гигабайт фотографий. И если утерю фотографий с моего дня рождения восьмилетней давности ещё как-то можно пережить, то за потерю фотографий наших девочек, только что приехавших из роддома, жена бы меня точно убила.
Поиск по интернету способов восстановления удалённых файлов на UFS показал наличие нескольких специализированных программ. Но говорилось, что они восстанавливают всего около 40% удалённых файлов, что неприемлимо мало. Второй проблемой оказалось, что все найденные программы работали почему-то под Windows.
Спасла же меня найденная ещё одна копия фотографий на моём компьютере, забытая при переносе на NAS.
Мораль сей сказки проста: не забывайте бекапить бекапы! Держите несколько копий, синхронизируйте их регулярно rsync'ом, unison'ом или ещё чем-нибудь. Наличие ещё одной копии в каком-нибудь онлайновом хранилище не блажь, а суровая необходимость.
Нужно будет поисследовать журналируемые файловые системы с возможностью отката во времени...