|
Подбор оптимального железа
|
|||
---|---|---|---|
#18+
Доброго дня. Какое нужно железо, чтобы справлялось с 300 000 одновременными уникальными обращениями? Каждое обращение - просмотр видео. ... |
|||
:
Нравится:
Не нравится:
|
|||
29.06.2012, 12:49 |
|
Подбор оптимального железа
|
|||
---|---|---|---|
#18+
Вам не осилить! ... |
|||
:
Нравится:
Не нравится:
|
|||
29.06.2012, 12:54 |
|
Подбор оптимального железа
|
|||
---|---|---|---|
#18+
300000Вам не осилить! во-во, сдается что под такую нагрузку надо уже выстраивать многоузловой многоуровневый(back-end front-end) кластер. При таком раскладе только система хранения данных по стоимости перевалит за 100 тыщ долларов ... |
|||
:
Нравится:
Не нравится:
|
|||
29.06.2012, 17:07 |
|
Подбор оптимального железа
|
|||
---|---|---|---|
#18+
bga83При таком раскладе только система хранения данных по стоимости перевалит за 100 тыщ долларов300 000 одновременных просмотров видео, каждый мегабайт в секунду - это 300 гигабайт в секунду. Система хранения данных за 100 тыщ такое не потянет. По теме - нужно просто посчитать. Тот, кто в состоянии разработать такую систему, должен быть в состоянии посчитать все параметры нагрузки и прикинуть требуемое железо, ещё и скорректировав расчёты по аналогии с уже разработанными и успешно эксплуатируемымиим системами. Если расчётов сделать не поллучается, да и работающих систем в портфолио нет - лучьше обратиться к специалистам. ... |
|||
:
Нравится:
Не нравится:
|
|||
29.06.2012, 22:26 |
|
Подбор оптимального железа
|
|||
---|---|---|---|
#18+
bga83под такую нагрузку надо уже выстраивать многоузловой многоуровневый(back-end front-end) кластер.Это понятно - хотя бы потому, что ни один датацентр такой канал предоставить не сможет :-) ... |
|||
:
Нравится:
Не нравится:
|
|||
29.06.2012, 22:30 |
|
Подбор оптимального железа
|
|||
---|---|---|---|
#18+
Александр52Доброго дня. Какое нужно железо, чтобы справлялось с 300 000 одновременными уникальными обращениями? Каждое обращение - просмотр видео. Канал передачи кмакой средний и максимальный? Объём хранения данных какой? Тип передачи обычный или торрентовый? ... |
|||
:
Нравится:
Не нравится:
|
|||
02.07.2012, 09:40 |
|
Подбор оптимального железа
|
|||
---|---|---|---|
#18+
Khod Канал передачи какой средний и максимальный? Объём хранения данных какой? Тип передачи обычный или торрентовый? 1 гигабит/сек 8-10 терабайт тип передачи обычный ... |
|||
:
Нравится:
Не нравится:
|
|||
02.07.2012, 11:55 |
|
Подбор оптимального железа
|
|||
---|---|---|---|
#18+
Александр52KhodКанал передачи какой средний и максимальный? Объём хранения данных какой? Тип передачи обычный или торрентовый? 1 гигабит/сек 8-10 терабайт тип передачи обычный 1 Гигабит не вяжется с 300 000 одновременных уникальных подключений. Это порядка 3 Кбит\сек на клиента. И какое видео можно передавать по такому каналу? Надо раз в 40 больше канал иметь надо под такую нагрузку ... |
|||
:
Нравится:
Не нравится:
|
|||
02.07.2012, 14:14 |
|
Подбор оптимального железа
|
|||
---|---|---|---|
#18+
Александр52с 300 000 одновременными уникальными обращениями? Каждое обращение - просмотр видео.это всего 1/14 от средней нагрузки Ютуба. Сдается мне, прожект не выгорит. ... |
|||
:
Нравится:
Не нравится:
|
|||
02.07.2012, 17:43 |
|
Подбор оптимального железа
|
|||
---|---|---|---|
#18+
miksoftСдается мне, прожект не выгорит. конечно не выгорит. потому что параметры железяки для этой задачи, имея исходные цифры, можно вычислить. Взять, допустим, 10 уникальных обращений, и соответственно, перемножить. А дальше уже искать на соответствующих сайтах. А не спрашивать здесь, при всем моем уважении к этому форуму. Если вопрос такого масштаба задается здесь (или вообще задается), это значит что автор о задаче практически ничего не представляет (опять же, извиняюсь за прямоту). Впрочем, возможно автор просто интересуется, вообще. Типа, сколько до Луны километров, и так далее. ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2012, 00:24 |
|
Подбор оптимального железа
|
|||
---|---|---|---|
#18+
kdv, Что верно- то верно. Нужно хотя бы какую-то статистику в зачаточном состоянии иметь. А так - пальцем в небо. ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2012, 09:11 |
|
Подбор оптимального железа
|
|||
---|---|---|---|
#18+
А сколько подключений потянет один виндовый сервер? И сколько ресурсов ему для этого понадобится? Условно сам трафик мал, только очень много подключений. ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2012, 10:00 |
|
Подбор оптимального железа
|
|||
---|---|---|---|
#18+
сколько до Луны километров, А какой сервер? Какой объём трафика? По какому протоколу? И т.д.? ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2012, 10:05 |
|
Подбор оптимального железа
|
|||
---|---|---|---|
#18+
Khodсколько до Луны километров, А какой сервер? Какой объём трафика? По какому протоколу? И т.д.? Вопрос не столько про железо. Вы знаете пределы виндового TCP стека? И кстати комедия. Вот если Вам дадут ответы на указанные вопросы, то прям дадите точный ответ. ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2012, 10:16 |
|
Подбор оптимального железа
|
|||
---|---|---|---|
#18+
kdvВпрочем, возможно автор просто интересуется, вообще. Типа, сколько до Луны километров , и так далее. Кстати, да. Вопрос подходит для раздела Hardware :) ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2012, 11:00 |
|
Подбор оптимального железа
|
|||
---|---|---|---|
#18+
сколько до Луны километровГотовые задать кучу уточняющих вопросов, а дальше пшик. уточняющие вопросы тут так, практически не нужны, потому что с автором вопроса уже сразу все понятно. В других разделах форума иногда задают совершенно аналогичные вопросы. Например, у меня в секунду в базу записывается миллион записей, какое железо нужно? Т.е. автор вопроса не способен посчитать, что даже если одна запись это 10 байт, то в минуту это будет 600 мегабайт, в час 36 гиг, а в сутки 864 гига, т.е. почти терабайт. А если запись будет размером не 10 байт, а 100, то все это умножается еще на 10. И тут выясняется, что это какой-то пшик, потому что 8 терабайт данных в сутки - с этим же что-то надо делать. Так и у вас. 1 гигабит на 300к подключений, да и вообще, уже сказали, что 300к подключений с просмотром видео - это 1/14 часть youtube. А youtube, понятно, работает не на одной железяке. Это целая инфраструктура из тучи компов и софта. http://www.insight-it.ru/masshtabiruemost/arkhitektura-youtube/ Представьте себе, что rutube как раз и есть 1 ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2012, 11:36 |
|
Подбор оптимального железа
|
|||
---|---|---|---|
#18+
... как раз и есть 1/10 от youtube. Вы пришли сюда с вопросом, какую железку нужно купить, чтобы создать аналог rutube? Поздравляю вас с вопросом. ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2012, 11:37 |
|
Подбор оптимального железа
|
|||
---|---|---|---|
#18+
сколько до Луны километровА сколько подключений потянет один виндовый сервер? Это очень простой вопрос: столько, сколько к нему куплено лицензий. Posted via ActualForum NNTP Server 1.5 ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2012, 12:39 |
|
Подбор оптимального железа
|
|||
---|---|---|---|
#18+
Dimitry Sibiryakovсколько до Луны километровА сколько подключений потянет один виндовый сервер? Это очень простой вопрос: столько, сколько к нему куплено лицензий. А если процессорные лицензии? kdv , Вы спутали меня с ТС. А я спрашивал вот почему. Мне кажется ресурсы одной ноды исчерпаются гораздо быстрее, чем создастся 300000 подсоединений. И хотелось бы иметь представление сколько потянут виндовые сервера, хотя бы в предельно синтетическом тесте. ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2012, 13:02 |
|
Подбор оптимального железа
|
|||
---|---|---|---|
#18+
сколько до Луны километровМне кажется ресурсы одной ноды исчерпаются гораздо быстрее, чем создастся 300000 подсоединений. И хотелось бы иметь представление сколько потянут виндовые сервера, хотя бы в предельно синтетическом тесте. гугл в руку. я нашел что люди открывали до 70к коннектов (сокетов) под Win2003 Server. Другие люди от 50к до 100к коннектов. вот интересное http://www.lenholgate.com/blog/2005/11/windows-tcpip-server-performance.html там и как тестить. а тут http://www.serverframework.com/asynchronousevents/2010/12/one-million-tcp-connections.html даже есть вопрос - "почему МС говорит что вот такая машина будет поддерживать 500к соединений tcp, а у нас получается только 100к?" Так что я бы поставил на 70-100к коннектов, но, понятно что 300к обращений за видео это не 300к коннектов. Это намного больше, причем к контентным серверам, и т.п. если же речь только про передачу видео по одному сокету - то да, 300к обращений это 300к сокетов. ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2012, 14:16 |
|
Подбор оптимального железа
|
|||
---|---|---|---|
#18+
кстати, в последней ссылке есть совершенно шикарная цитата: "Люди, задающие подобные вопросы, игнорируют факт, что с современной ОС Windows, достаточным количеством RAM и CPU, скорее всего именно ВАШЕ ПО будет ограничивающим фактором. Предположим, что даже если главные сетевые шаманы в Микрософте могут определить максимальное количество "активных" TCP-соединений для заданного аппаратного обеспечения, я верю, что это количество будет зависеть от конкретного сервис-пака операционной системы И сетевых драйверов, но также будет сильно зависеть и от того, как разработан конкретный кусок серверного ПО, которое будет обслуживать эти соединения. Сколько у вас используется под non-paged pool? Сколько страниц ваше ПО заблокировало в памяти для I/O? Если вы не учитываете в вычисления свое ПО, то числа не имеют смысла. В одном можно быть уверенным - что вы не откроете более 16 миллионов соединений, потому что это максимальное значение, которое может быть установлено в реестре для стека TCP." Вот я об этом и говорил. И в моем примере про "8 терабайт в сутки" тоже были вопросы - не только ГДЕ это все хранить, но и ЧТО с этими терабайтами вообще делать. Впрочем, я дал ссылку на "как устроен ютуб", там совершенно ясно, что под 300к смотрящих видео нужна охрененная инфраструктура, состоящая не просто из железа, но и из тонны обслуживающего все это дело софта. ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2012, 14:28 |
|
Подбор оптимального железа
|
|||
---|---|---|---|
#18+
kdvВот я об этом и говорил. И в моем примере про "8 терабайт в сутки" тоже были вопросы - не только ГДЕ это все хранить, но и ЧТО с этими терабайтами вообще делать. Впрочем, я дал ссылку на "как устроен ютуб", там совершенно ясно, что под 300к смотрящих видео нужна охрененная инфраструктура, состоящая не просто из железа, но и из тонны обслуживающего все это дело софта. Спасибо за ссылки! А ТС сразу же очень точно и ёмко ответили. ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2012, 14:58 |
|
Подбор оптимального железа
|
|||
---|---|---|---|
#18+
alexeyvgbga83При таком раскладе только система хранения данных по стоимости перевалит за 100 тыщ долларов300 000 одновременных просмотров видео, каждый мегабайт в секунду - это 300 гигабайт в секунду. Система хранения данных за 100 тыщ такое не потянет. По теме - нужно просто посчитать. Тот, кто в состоянии разработать такую систему, должен быть в состоянии посчитать все параметры нагрузки и прикинуть требуемое железо, ещё и скорректировав расчёты по аналогии с уже разработанными и успешно эксплуатируемымиим системами. Если расчётов сделать не поллучается, да и работающих систем в портфолио нет - лучьше обратиться к специалистам. 1 HDD примерно тянет до 100 MB/sec. Всего-то от 3000 HDD надо :) Массив на 10 дисков самый дешевый стоит 10 000$, т.е. за все от 3 000 000 $. Плюс ко всему ещё нужны сервера, сетевое оборудование, ПО специализированное что будет стоить столько же. Итого по самой нижней кромке от 6 000 000 $. ... |
|||
:
Нравится:
Не нравится:
|
|||
04.07.2012, 09:31 |
|
Подбор оптимального железа
|
|||
---|---|---|---|
#18+
сколько до Луны километровЗдесь я новичок, но подобные персонажи на каждом форуме рунета есть. Готовые задать кучу уточняющих вопросов, а дальше пшикБез уточнящих вопросов в любом случае буде пшик. Вопрос "какой сервер мне нужен" слишком лаконичен, на него ответа не будет. ТС вообще не представил никакой информации. С уточняющими вопросами часто находится ответ, пусть и не всегда - ну так форум не техподдержка, может и не получится помочь. Причём на такой вопрос ответ не даст какой то конкретный человек, так не бывает. Такие сложные решния нужно принимать самому, видя систему, и коллективный разум в этом поможет, только поможет, а не решит за ТС! сколько до Луны километровВ форумах по железу у таких советы всегда максимум на чём заканчиваются, так это попробовать другой БП, попробовать на другом ПК или вынуть батарейку и обязательно час подождать.Неправда, не всегда. сколько до Луны километровМне кажется ресурсы одной ноды исчерпаются гораздо быстрее, чем создастся 300000 подсоединений. И хотелось бы иметь представление сколько потянут виндовые сервера, хотя бы в предельно синтетическом тесте.Это лучьше спросить в разделе Windows, там форум специализированный, а не такой общий, как этот. Вот, правда, kdv оказывается знает :-) ... |
|||
:
Нравится:
Не нравится:
|
|||
04.07.2012, 10:38 |
|
Подбор оптимального железа
|
|||
---|---|---|---|
#18+
6 000 000 $alexeyvgпропущено... 300 000 одновременных просмотров видео, каждый мегабайт в секунду - это 300 гигабайт в секунду. Система хранения данных за 100 тыщ такое не потянет. По теме - нужно просто посчитать. Тот, кто в состоянии разработать такую систему, должен быть в состоянии посчитать все параметры нагрузки и прикинуть требуемое железо, ещё и скорректировав расчёты по аналогии с уже разработанными и успешно эксплуатируемымиим системами. Если расчётов сделать не поллучается, да и работающих систем в портфолио нет - лучьше обратиться к специалистам. 1 HDD примерно тянет до 100 MB/sec. Всего-то от 3000 HDD надо :) Массив на 10 дисков самый дешевый стоит 10 000$, т.е. за все от 3 000 000 $. Плюс ко всему ещё нужны сервера, сетевое оборудование, ПО специализированное что будет стоить столько же. Итого по самой нижней кромке от 6 000 000 $.Расчёт по дискам не совсем правильный. Дело в том, что люди читают одни и те же файлы, так что небольшой кеш, допустим, на несколько терабайт, сильно уменьшит требования к дискам... Хотя с общей стоимостью готов согласиться, речь всё таки о системе-монстре, по типу топовых видео-сервисов. Да и ПО как обычно будет несравнимо дороже железа. ... |
|||
:
Нравится:
Не нравится:
|
|||
04.07.2012, 10:41 |
|
|
start [/forum/topic.php?fid=30&fpage=35&tid=1530134]: |
0ms |
get settings: |
8ms |
get forum list: |
13ms |
check forum access: |
4ms |
check topic access: |
4ms |
track hit: |
41ms |
get topic data: |
13ms |
get forum data: |
3ms |
get page messages: |
60ms |
get tp. blocked users: |
2ms |
others: | 305ms |
total: | 453ms |
0 / 0 |