Re: Файловая система для для Debian

2018-09-25 Пенетрантность Коротаев Руслан
В сообщении от [Вт 2018-09-25 11:36 +0600]
Сергей С.  пишет:

> Добрый день, всем!
> Имеем СХД на базе HDD и несколько серверов, которые необходимо использовать 
> для
> организации архивного хранилища. 
> Основные требования:
> 1) Записывать необходимо небольшие порции данных очень много и очень часто 
> (изменений не будет).
> 2) Объем хранимых данных может достигать 1-2 петабай (примерный прогноз).
> 3) Доступ к любому сохраненному элементу не должен превышать 5-10 минут.
> 
> Прошу совета в выборе файловой системы или возможно есть какое-то техническое
> решение (не очень дорогое :).
> Присматриваюсь к ScoutFS, но не уверен, что она подойдет.


Если у вас уже есть СХД на HDD, то эта рекомендация наверное запоздала,
но под эти параметры подходят стримеры [1], они сейчас довольно
продвинутые их можно монтировать как файловую систему. Ещё можно
попробовать облачные решения типа Amazon Glacier [2]. Вполне возможно
что на ленте выйдет дешевле.

[1]: https://ru.wikipedia.org/wiki/Стример
[2]: https://ru.wikipedia.org/wiki/Amazon_Glacier

-- 
Коротаев Руслан
https://blog.kr.pp.ru


smime.p7s
Description: S/MIME cryptographic signature


Re: Файловая система для для Debian

2018-09-25 Пенетрантность Igor Savluk

Поговаривают что OrangeFS не плохая такая для такова рода вещей.

On 25/09/2018 08.36, Сергей С. wrote:

Добрый день, всем!
Имеем СХД на базе HDD и несколько серверов, которые необходимо 
использовать для организации архивного хранилища.

Основные требования:
1) Записывать необходимо небольшие порции данных *очень много и очень 
часто *(изменений не будет).

2) Объем хранимых данных может достигать 1-2 петабай (примерный прогноз).
3) Доступ к любому сохраненному элементу не должен превышать 5-10 минут.

Прошу совета в выборе файловой системы или возможно есть какое-то 
техническое решение (не очень дорогое :).

Присматриваюсь к *ScoutFS*, но не уверен, что она подойдет.




Re: Файловая система для для Debian

2018-09-25 Пенетрантность Павел Марченко
Добрый день.
Возможно CephFS подойдёт.
https://ceph.com/ceph-storage/file-system/
вт, 25 сент. 2018 г. в 8:37, Сергей С. :
>
> Добрый день, всем!
> Имеем СХД на базе HDD и несколько серверов, которые необходимо использовать 
> для организации архивного хранилища.
> Основные требования:
> 1) Записывать необходимо небольшие порции данных очень много и очень часто 
> (изменений не будет).
> 2) Объем хранимых данных может достигать 1-2 петабай (примерный прогноз).
> 3) Доступ к любому сохраненному элементу не должен превышать 5-10 минут.
>
> Прошу совета в выборе файловой системы или возможно есть какое-то техническое 
> решение (не очень дорогое :).
> Присматриваюсь к ScoutFS, но не уверен, что она подойдет.



-- 
Regards, Pavel.


Файловая система для для Debian

2018-09-24 Пенетрантность Сергей С .
Добрый день, всем!
Имеем СХД на базе HDD и несколько серверов, которые необходимо использовать
для организации архивного хранилища.
Основные требования:
1) Записывать необходимо небольшие порции данных *очень много и очень часто
*(изменений не будет).
2) Объем хранимых данных может достигать 1-2 петабай (примерный прогноз).
3) Доступ к любому сохраненному элементу не должен превышать 5-10 минут.

Прошу совета в выборе файловой системы или возможно есть какое-то
техническое решение (не очень дорогое :).
Присматриваюсь к *ScoutFS*, но не уверен, что она подойдет.