Re: Затык в UFS на отдаче большого кол-ва файлов
Романов Алексей
gliug at yandex.ru
Tue Aug 11 14:30:48 MSD 2009
извиняюсь если был оффтоп
всем спасибо за ответы
Вопрос состоял в том, можно ли, и правильно ли хранить такое кол-во файлов на одном сервере используя приведенную выше конфигурацию, с возможностью какого то роста. Если кто то сталкивался с подобным, был бы признателен за советы. Текущая схема с 2-мя серверами устраивает, посто хотелось бы не размазывать фотки по большому кол-ву дисков и серверов, а свести это к минимуму
еще раз спасибо за ответы !
10.08.09, 22:25, "Михаил Монашёв" <postmaster at softsearch.ru>:
> Здравствуйте, Алексей.
> Надо разделять 2 задачи: раздачу и хранение. Описанная Вами
> конфигурация хорошо реализует лишь хранение. Для раздачи нужно перед
> этим сервером поставить сервер(ы) с любым процессором, 32 и более
> гигами памяти и 3 SAS дисками 15000rpm, на которых будет 3 независимых
> кэша для nginx-а. Тогда Вы сможете их раздавать со скоростью 200
> мегабит с одного кэширующего сервера. Возможно чуть больше.
> Если хотите реализовать раздачу на 5 SATA дисках, то постарайтесь
> воткнуть в сервер побольше оперативки. Разберите рэйд, он вреден.
> Разбейте все файла на 5 равных групп и положите каждую группу на свой
> диск.
> РА> Доброго времени суток !
> РА> Собственно в чем суть. Есть FreeBSD 7.2 amd64, raid
> РА> controller adaptec 5805, собрано raid 5ee из 8 wd500abys. На него
> РА> залито примерно 550G фоток(около 70 миллионов) разложенные с двух
> РА> уровневой вложенностью, dir/dir/file, размеры фоток от 1.5Kb до
> РА> 100. При отдаче примерно 500-600 в сек. UFS начинает дико
> РА> тормозить и не отдает вообще ничего практически. В предыдущем
> РА> варианте, объем фоток был разбит на 2 сервера и 4 scsi винтами
> РА> каждый и memory диском для наиболее хитовых фоток. Решено было
> РА> сделать отдачу с одного сервера, проводились тесты, правда не на
> РА> актуальном объеме(ошибка!) больше скорее тестировался контроллер,
> РА> которые показали что все нормально и будет работать. Ну вот и на
> РА> реальной нагрузке все стало. Посоветуйте кто знает, куда двигаться
> РА> дальше, смена fs, тюнинг ufs, или куда еще.
> РА> заранее благодарность !
> РА> Алексей
>
> --
> С уважением,
> Михаил Монашёв, SoftSearch.ru
> mailto:postmaster at softsearch.ru
> ICQ# 166233339
> http://michael.mindmix.ru/
> Без бэкапа по жизни.
More information about the nginx-ru
mailing list