хранение данных, выбор файловой системы и способа хранения.

Любые разговоры которые хоть как-то связаны с тематикой форума

Модератор: Модераторы разделов

mimos
Сообщения: 4

хранение данных, выбор файловой системы и способа хранения.

Сообщение mimos »

Задача:
осуществить хранение данных объемом около 300Gb. Файлы разного размера: примерно 20% размером до 5Mb, остальные 4GB-10Gb. Данные постоянно обновляются, т.е примерно раз в месяц надо делать либо обновление либо добавление в архив. Дело осложняется тем, что файлы имеют определенную структуру каталогов, которую хотелось бы сохранить при создании хранилища.

Вопросы:
1. Что выбрать в качестве носителя: HDD или DVD?
HDD - преимущества: быстрая скорость (обновление, запись), легко создать необходимую структуру каталогов. недостаток - невысокая надежность... (или нет?), но дороже.

2. Если выбор падет в сторону HDD, то какую ФС лучше выбрать для хранилища: ext3, RaiserFS, NTFS или что-то еще? На компе 2 ОС: ASPLinux 12.0 и Windows XP Prof, работаю преимущественно в Linux.

3. У какой ФС больше надежность и удобство восстановления файлов в случае случайного удаления/сбоя ФС?

4. Существуют ли программы/способы востановления утерянных данных в Linux? Или не париться: HDD + NTFS + Windows + простое копирование?

HDD + NTFS + Linux +ntfs-3g + простое копирование также надежно?

5. Если выбор падет на создание хранилища под Linux на HDD - что лучше: пользоваться программами backup или простое копирование?


Спасибо за ответы.

Одновременно рою инфу в гуглях, но ответы и мнения - хотелось бы собрать в одном месте.
Спасибо сказали:
Sleeping Daemon
Сообщения: 1450

Re: хранение данных, выбор файловой системы и способа хранения.

Сообщение Sleeping Daemon »

mimos писал(а): ↑
16.05.2008 10:19
Задача:
осуществить хранение данных объемом около 300Gb. Файлы разного размера: примерно 20% размером до 5Mb, остальные 4GB-10Gb. Данные постоянно обновляются, т.е примерно раз в месяц надо делать либо обновление либо добавление в архив. Дело осложняется тем, что файлы имеют определенную структуру каталогов, которую хотелось бы сохранить при создании хранилища.

Вопросы:
1. Что выбрать в качестве носителя: HDD или DVD?
HDD - преимущества: быстрая скорость (обновление, запись), легко создать необходимую структуру каталогов. недостаток - невысокая надежность... (или нет?), но дороже.

2. Если выбор падет в сторону HDD, то какую ФС лучше выбрать для хранилища: ext3, RaiserFS, NTFS или что-то еще? На компе 2 ОС: ASPLinux 12.0 и Windows XP Prof, работаю преимущественно в Linux.

3. У какой ФС больше надежность и удобство восстановления файлов в случае случайного удаления/сбоя ФС?

4. Существуют ли программы/способы востановления утерянных данных в Linux? Или не париться: HDD + NTFS + Windows + простое копирование?

HDD + NTFS + Linux +ntfs-3g + простое копирование также надежно?

5. Если выбор падет на создание хранилища под Linux на HDD - что лучше: пользоваться программами backup или простое копирование?


Спасибо за ответы.

Одновременно рою инфу в гуглях, но ответы и мнения - хотелось бы собрать в одном месте.

Очень неплохая программа для создания бэкапов - fsbackup. Посмотрите, не поленитесь.

Имеет смысл выбрать HDD для храенения и переодически писать на DVD. Хотя архивы всегда лучше делать на ленты.
ФС я бы посоветовал - ReiserFS. Таки лучше(как показала практика) восстанавливается после сбоев. Хотя нужно УПС ставить, что бы не рисковать.
Если писать из-под линукса на NTFS(да же с ntfs-3g), есть вероятность потери целосности данных. Опять же из опыта.
Спасибо сказали:
mafaka
Сообщения: 5
ОС: Ubuntu

Re: хранение данных, выбор файловой системы и способа хранения.

Сообщение mafaka »

Я для бэкапа использую rsync. Он на автомате добавляет изменённые и новые файлы , а также сохраняет права на папки и файлы. В общем 1 к1!
Спасибо сказали:
Аватара пользователя
Juliette
Сообщения: 5058
Статус: ROSA Lab
ОС: Ubuntu LTS, Mandriva 2011

Re: хранение данных, выбор файловой системы и способа хранения.

Сообщение Juliette »

mimos писал(а): ↑
16.05.2008 10:19
2. Если выбор падет в сторону HDD, то какую ФС лучше выбрать для хранилища: ext3, RaiserFS, NTFS или что-то еще? На компе 2 ОС: ASPLinux 12.0 и Windows XP Prof, работаю преимущественно в Linux.

3. У какой ФС больше надежность и удобство восстановления файлов в случае случайного удаления/сбоя ФС?
...

Очень флеймовые и затёртые до дыр вопросы. Переношу для начала во "флейм", а там посмотрим.
mimos писал(а): ↑
16.05.2008 10:19
Одновременно рою инфу в гуглях, но ответы и мнения - хотелось бы собрать в одном месте.

Конечно, свойство человеческой природы таково, что всё, что отвечали на такие же точно вопросы, но не ему -- игнорируется, а вот если те же самые ответы лично ему в тему напишут -- то труъ, без сомнения. Так что тут дело не в поиске или Гугле, на том же ЛОРе завалы инфы по вашим вопросам, и собранные в одном месте, в принципе. Да и у нас тоже.
Спасибо сказали:
_Gleb_
Сообщения: 467
ОС: Kubuntu 12.04 LTS

Re: хранение данных, выбор файловой системы и способа хранения.

Сообщение _Gleb_ »

Главное -- не ReiserFS, т.к. часто падает при неожиданном отключении питания.
Изображение
Спасибо сказали:
Аватара пользователя
SLEDopit
Модератор
Сообщения: 4824
Статус: фанат консоли (=
ОС: GNU/Debian, RHEL

Re: хранение данных, выбор файловой системы и способа хранения.

Сообщение SLEDopit »

_Gleb_ писал(а): ↑
17.05.2008 17:09
Главное -- не ReiserFS, т.к. часто падает при неожиданном отключении питания.
ext3 у меня один раз тож так упала, что пришлось систему восстанавливать из сторонних источников (рутовый раздел упал). благо за день до ӕтого dd root был сделан.
UNIX is basically a simple operating system, but you have to be a genius to understand the simplicity. © Dennis Ritchie
The more you believe you don't do mistakes, the more bugs are in your code.
Спасибо сказали:
Аватара пользователя
B4rr4cuda
Сообщения: 82
ОС: SlackWare

Re: хранение данных, выбор файловой системы и способа хранения.

Сообщение B4rr4cuda »

_Gleb_ писал(а): ↑
17.05.2008 17:09
Главное -- не ReiserFS, т.к. часто падает при неожиданном отключении питания.

Таки да, лучше не рейзер. У меня как-то период был - сварщики в районе работали. А ИБП нет.
Пришлось несколько раз перебивать винт - слетала фс. Жестко слетала. Очень, знаете ли, поучительно оказалось.
Результаты такие:
Reiserfs - умирает после второго "выключения". Без возможности восстановления.
ext3 - держалась на пару "выключений" дольше. Успешно восстанавливается в половине случаев.
xfs - умирает быстро и надежно.
jfs - восстанавливается всегда. На ней и живу с тех пор.
Спасибо сказали:
_Gleb_
Сообщения: 467
ОС: Kubuntu 12.04 LTS

Re: хранение данных, выбор файловой системы и способа хранения.

Сообщение _Gleb_ »

B4rr4cuda писал(а): ↑
18.05.2008 01:50
jfs - восстанавливается всегда. На ней и живу с тех пор.

А падает как часто?
Изображение
Спасибо сказали:
Аватара пользователя
Чучок
Сообщения: 390
ОС: Debian 4.0 etch

Re: хранение данных, выбор файловой системы и способа хранения.

Сообщение Чучок »

_Gleb_ писал(а): ↑
17.05.2008 17:09
Главное -- не ReiserFS, т.к. часто падает при неожиданном отключении питания.

Лучше взять ИБП и не париться. При проблемах с питанием не то, что ФС портятся, но и порой само железо страдает. Данные ещё можно спасти из резервов, а вот железо в худшем случае придётся новое покупать, а это всё стоит денег порой и не так уж и малых. Так что не стоит рисковать без ИБП, и тем более они щас не так уж и дороги. И пишу это из собственного печального опыта.
Спасибо сказали:
Аватара пользователя
drag0n
Сообщения: 156
Статус: Дракон-линуксоид
ОС: Slackware Linux

Re: хранение данных, выбор файловой системы и способа хранения.

Сообщение drag0n »

Главное -- не ReiserFS, т.к. часто падает при неожиданном отключении питания.

Хм, а вы не путаете ее с чем то другим?? По-моему ReiserFS как раз и предназначена для подобных ситуаций.
Дома хреновые пробки, выбивает хотя бы раз в день. ReiserFS стоит вот уже больше полгода - и ничего. Ни разу ничего не потерял после внезапного отключения электричества.

умирает после второго "выключения". Без возможности восстановления.

А вот это уже напоминает ext2. Слетала только так.....
После каталога /etc понимаешь, что реестр - место, откуда нормальными не возвращаются.
Спасибо сказали:
_Gleb_
Сообщения: 467
ОС: Kubuntu 12.04 LTS

Re: хранение данных, выбор файловой системы и способа хранения.

Сообщение _Gleb_ »

drag0n писал(а): ↑
19.05.2008 20:38
А вот это уже напоминает ext2. Слетала только так.....

Дык правильно: она нежурналируемая.
Изображение
Спасибо сказали:
tempx77
Сообщения: 7

Re: хранение данных, выбор файловой системы и способа хранения.

Сообщение tempx77 »

reiserfs везде, ни разу сбоев не было, только один раз пришлось сделать rebuild-tree (данные не пострадали).
Спасибо сказали:
Аватара пользователя
B4rr4cuda
Сообщения: 82
ОС: SlackWare

Re: хранение данных, выбор файловой системы и способа хранения.

Сообщение B4rr4cuda »

_Gleb_ писал(а): ↑
19.05.2008 14:02
А падает как часто?

Само не падает. А после горячего ребута - восстанавливается при загрузке.
Выбирал фс опытным путем - просто jfs выдержала постоянные ребуты, без слетов. Остальные не смогли....
Спасибо сказали: