Re: Медленная отдача при видеостриминге

[Maxim Boguk]

On 25.04.2010 23:50, Alexey V. Karagodov wrote:
>
> On 25.04.2010, at 15:45, Андрей Василишин wrote:
>
>> squirl пишет:
>>> Безусловно, тест не в "боевой обстановке". Но я, почему-то, наблюдал схожую картину и в боевых условиях. Опять же картина зависит - аппаратный/программный RAID, контроллер и т. п.
>>>
>>> Впрочем. у меня есть свободная машина:
>>> Intel(R) Xeon(TM) CPU 2.40GHz
>>> 4 GB RAM
>>> Adaptec SCSI RAID 2120S, как раз  2 диска в RAID-0
>>> Машина сейчас простаивает и ждет апгрейда до 8.0-RELEASE.
>>>
>>> Предлагайте методику тестирования, я накачу чистую систему, проведем измерения и опубликуем. Думаю, это будет конструктивнее
>>
>> Методика просто, сначала делаете рейд0, заливаете на него 100 файлов, делаете 1000 рандомных конектов к файлам, смотрите на скорости отдачи файлов
>> И потом разбираете свой рейд и записываете по 50 файлов на каждый диск и делаете тех же 1000 рандомных конектов.
>>
> и повторите тоже самое например на Sun StorageTek
> в любой позе отдаст вам 4, 8 и более Гбит (смотря чем, как и к чему подключите)

Ну зачем же так сразу то... из пушек по воробьям... тогда видео и на RamSan каком нибудь можно держать.

Автору же топика я бы посоветовал следующее относительно недорогое решение.

Покупаете sata flash диск на 128-256Gb+ поприличнее (на сколько денег не жалко) и делаете на нем программный кеш наиболее популярных файлов.
(на том же fcenter есть неплохие и не очень устаревшие обзоры).
В итоге сначал nginx смотрит на ssd... если nginx не находит файл на ssd идет fallback на основной storage.

В фоне висит какой то процесс который парсит access_log nginx и на основе того что там насчитывает
удаляет непопулярные файлы c ssd или добавляет наиболее популярные файлы на ssd.

Подход работает если у вас неравномерное распределение файлов по популярности (т.е. есть очень популярные файлы
но их небольшое количество и есть много редко запрашиваемых файлов), как правило обычно ситуация именно такая.

Цена вопроса на 256gb 25.000-30.000рублей насколько я себе Московские цены представляю.
Как правило этот подход оказывается выгоднее и быстрее быстрого массива sas дисков с хорошим контроллером.


-- 
SY, Maxim Boguk