powered by simpleCommunicator - 2.0.51     © 2025 Programmizd 02
Форумы / Hardware [игнор отключен] [закрыт для гостей] / Подбор оптимального железа
25 сообщений из 26, страница 1 из 2
Подбор оптимального железа
    #37860131
Александр52
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Доброго дня.
Какое нужно железо, чтобы справлялось с 300 000 одновременными уникальными обращениями? Каждое обращение - просмотр видео.
...
Рейтинг: 0 / 0
Подбор оптимального железа
    #37860145
300000
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
Вам не осилить!
...
Рейтинг: 0 / 0
Подбор оптимального железа
    #37860850
Фотография bga83
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
300000Вам не осилить!
во-во, сдается что под такую нагрузку надо уже выстраивать многоузловой многоуровневый(back-end front-end) кластер. При таком раскладе только система хранения данных по стоимости перевалит за 100 тыщ долларов
...
Рейтинг: 0 / 0
Подбор оптимального железа
    #37861249
Фотография alexeyvg
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
bga83При таком раскладе только система хранения данных по стоимости перевалит за 100 тыщ долларов300 000 одновременных просмотров видео, каждый мегабайт в секунду - это 300 гигабайт в секунду.
Система хранения данных за 100 тыщ такое не потянет.

По теме - нужно просто посчитать. Тот, кто в состоянии разработать такую систему, должен быть в состоянии посчитать все параметры нагрузки и прикинуть требуемое железо, ещё и скорректировав расчёты по аналогии с уже разработанными и успешно эксплуатируемымиим системами.

Если расчётов сделать не поллучается, да и работающих систем в портфолио нет - лучьше обратиться к специалистам.
...
Рейтинг: 0 / 0
Подбор оптимального железа
    #37861250
Фотография alexeyvg
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
bga83под такую нагрузку надо уже выстраивать многоузловой многоуровневый(back-end front-end) кластер.Это понятно - хотя бы потому, что ни один датацентр такой канал предоставить не сможет :-)
...
Рейтинг: 0 / 0
Подбор оптимального железа
    #37862398
Khod
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Александр52Доброго дня.
Какое нужно железо, чтобы справлялось с 300 000 одновременными уникальными обращениями? Каждое обращение - просмотр видео.

Канал передачи кмакой средний и максимальный?
Объём хранения данных какой?
Тип передачи обычный или торрентовый?
...
Рейтинг: 0 / 0
Подбор оптимального железа
    #37862646
Александр52
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Khod
Канал передачи какой средний и максимальный?
Объём хранения данных какой?
Тип передачи обычный или торрентовый?
1 гигабит/сек
8-10 терабайт
тип передачи обычный
...
Рейтинг: 0 / 0
Подбор оптимального железа
    #37862947
Фотография bga83
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Александр52KhodКанал передачи какой средний и максимальный?
Объём хранения данных какой?
Тип передачи обычный или торрентовый?
1 гигабит/сек
8-10 терабайт
тип передачи обычный
1 Гигабит не вяжется с 300 000 одновременных уникальных подключений. Это порядка 3 Кбит\сек на клиента. И какое видео можно передавать по такому каналу? Надо раз в 40 больше канал иметь надо под такую нагрузку
...
Рейтинг: 0 / 0
Подбор оптимального железа
    #37863397
miksoft
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Александр52с 300 000 одновременными уникальными обращениями? Каждое обращение - просмотр видео.это всего 1/14 от средней нагрузки Ютуба.
Сдается мне, прожект не выгорит.
...
Рейтинг: 0 / 0
Подбор оптимального железа
    #37863763
Фотография kdv
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
miksoftСдается мне, прожект не выгорит.
конечно не выгорит. потому что параметры железяки для этой задачи, имея исходные цифры, можно вычислить. Взять, допустим, 10 уникальных обращений, и соответственно, перемножить. А дальше уже искать на соответствующих сайтах. А не спрашивать здесь, при всем моем уважении к этому форуму. Если вопрос такого масштаба задается здесь (или вообще задается), это значит что автор о задаче практически ничего не представляет (опять же, извиняюсь за прямоту).

Впрочем, возможно автор просто интересуется, вообще. Типа, сколько до Луны километров, и так далее.
...
Рейтинг: 0 / 0
Подбор оптимального железа
    #37863911
Khod
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
kdv,

Что верно- то верно.
Нужно хотя бы какую-то статистику в зачаточном состоянии иметь.
А так - пальцем в небо.
...
Рейтинг: 0 / 0
Подбор оптимального железа
    #37863971
А сколько подключений потянет один виндовый сервер? И сколько ресурсов ему для этого понадобится? Условно сам трафик мал, только очень много подключений.
...
Рейтинг: 0 / 0
Подбор оптимального железа
    #37863972
Khod
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
сколько до Луны километров,

А какой сервер?
Какой объём трафика?
По какому протоколу?
И т.д.?
...
Рейтинг: 0 / 0
Подбор оптимального железа
    #37863990
Khodсколько до Луны километров,

А какой сервер?
Какой объём трафика?
По какому протоколу?
И т.д.?
Вопрос не столько про железо. Вы знаете пределы виндового TCP стека?
И кстати комедия. Вот если Вам дадут ответы на указанные вопросы, то прям дадите точный ответ.
...
Рейтинг: 0 / 0
Подбор оптимального железа
    #37864055
Фотография S.G.
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
kdvВпрочем, возможно автор просто интересуется, вообще. Типа, сколько до Луны километров , и так далее.
Кстати, да. Вопрос подходит для раздела Hardware :)
...
Рейтинг: 0 / 0
Подбор оптимального железа
    #37864124
Фотография kdv
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
сколько до Луны километровГотовые задать кучу уточняющих вопросов, а дальше пшик.
уточняющие вопросы тут так, практически не нужны, потому что с автором вопроса уже сразу все понятно.
В других разделах форума иногда задают совершенно аналогичные вопросы. Например, у меня в секунду в базу записывается миллион записей, какое железо нужно?
Т.е. автор вопроса не способен посчитать, что даже если одна запись это 10 байт, то в минуту это будет 600 мегабайт, в час 36 гиг, а в сутки 864 гига, т.е. почти терабайт. А если запись будет размером не 10 байт, а 100, то все это умножается еще на 10.
И тут выясняется, что это какой-то пшик, потому что 8 терабайт данных в сутки - с этим же что-то надо делать.

Так и у вас. 1 гигабит на 300к подключений, да и вообще, уже сказали, что 300к подключений с просмотром видео - это 1/14 часть youtube. А youtube, понятно, работает не на одной железяке. Это целая инфраструктура из тучи компов и софта.
http://www.insight-it.ru/masshtabiruemost/arkhitektura-youtube/

Представьте себе, что rutube как раз и есть 1
...
Рейтинг: 0 / 0
Подбор оптимального железа
    #37864127
Фотография kdv
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
... как раз и есть 1/10 от youtube. Вы пришли сюда с вопросом, какую железку нужно купить, чтобы создать аналог rutube? Поздравляю вас с вопросом.
...
Рейтинг: 0 / 0
Подбор оптимального железа
    #37864238
Dimitry Sibiryakov
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
сколько до Луны километровА сколько подключений потянет один виндовый сервер?

Это очень простой вопрос: столько, сколько к нему куплено лицензий.
Posted via ActualForum NNTP Server 1.5
...
Рейтинг: 0 / 0
Подбор оптимального железа
    #37864285
Dimitry Sibiryakovсколько до Луны километровА сколько подключений потянет один виндовый сервер?

Это очень простой вопрос: столько, сколько к нему куплено лицензий.

А если процессорные лицензии?

kdv , Вы спутали меня с ТС. А я спрашивал вот почему. Мне кажется ресурсы одной ноды исчерпаются гораздо быстрее, чем создастся 300000 подсоединений. И хотелось бы иметь представление сколько потянут виндовые сервера, хотя бы в предельно синтетическом тесте.
...
Рейтинг: 0 / 0
Подбор оптимального железа
    #37864442
Фотография kdv
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
сколько до Луны километровМне кажется ресурсы одной ноды исчерпаются гораздо быстрее, чем создастся 300000 подсоединений. И хотелось бы иметь представление сколько потянут виндовые сервера, хотя бы в предельно синтетическом тесте.
гугл в руку. я нашел что люди открывали до 70к коннектов (сокетов) под Win2003 Server. Другие люди от 50к до 100к коннектов.
вот интересное
http://www.lenholgate.com/blog/2005/11/windows-tcpip-server-performance.html
там и как тестить.

а тут
http://www.serverframework.com/asynchronousevents/2010/12/one-million-tcp-connections.html
даже есть вопрос - "почему МС говорит что вот такая машина будет поддерживать 500к соединений tcp, а у нас получается только 100к?"

Так что я бы поставил на 70-100к коннектов, но, понятно что 300к обращений за видео это не 300к коннектов. Это намного больше, причем к контентным серверам, и т.п. если же речь только про передачу видео по одному сокету - то да, 300к обращений это 300к сокетов.
...
Рейтинг: 0 / 0
Подбор оптимального железа
    #37864475
Фотография kdv
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
кстати, в последней ссылке есть совершенно шикарная цитата:

"Люди, задающие подобные вопросы, игнорируют факт, что с современной ОС Windows, достаточным количеством RAM и CPU, скорее всего именно ВАШЕ ПО будет ограничивающим фактором.

Предположим, что даже если главные сетевые шаманы в Микрософте могут определить максимальное количество "активных" TCP-соединений для заданного аппаратного обеспечения, я верю, что это количество будет зависеть от конкретного сервис-пака операционной системы И сетевых драйверов, но также будет сильно зависеть и от того, как разработан конкретный кусок серверного ПО, которое будет обслуживать эти соединения. Сколько у вас используется под non-paged pool? Сколько страниц ваше ПО заблокировало в памяти для I/O? Если вы не учитываете в вычисления свое ПО, то числа не имеют смысла.

В одном можно быть уверенным - что вы не откроете более 16 миллионов соединений, потому что это максимальное значение, которое может быть установлено в реестре для стека TCP."

Вот я об этом и говорил. И в моем примере про "8 терабайт в сутки" тоже были вопросы - не только ГДЕ это все хранить, но и ЧТО с этими терабайтами вообще делать. Впрочем, я дал ссылку на "как устроен ютуб", там совершенно ясно, что под 300к смотрящих видео нужна охрененная инфраструктура, состоящая не просто из железа, но и из тонны обслуживающего все это дело софта.
...
Рейтинг: 0 / 0
Подбор оптимального железа
    #37864573
kdvВот я об этом и говорил. И в моем примере про "8 терабайт в сутки" тоже были вопросы - не только ГДЕ это все хранить, но и ЧТО с этими терабайтами вообще делать. Впрочем, я дал ссылку на "как устроен ютуб", там совершенно ясно, что под 300к смотрящих видео нужна охрененная инфраструктура, состоящая не просто из железа, но и из тонны обслуживающего все это дело софта.
Спасибо за ссылки! А ТС сразу же очень точно и ёмко ответили.
...
Рейтинг: 0 / 0
Подбор оптимального железа
    #37865435
6 000 000 $
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
alexeyvgbga83При таком раскладе только система хранения данных по стоимости перевалит за 100 тыщ долларов300 000 одновременных просмотров видео, каждый мегабайт в секунду - это 300 гигабайт в секунду.
Система хранения данных за 100 тыщ такое не потянет.

По теме - нужно просто посчитать. Тот, кто в состоянии разработать такую систему, должен быть в состоянии посчитать все параметры нагрузки и прикинуть требуемое железо, ещё и скорректировав расчёты по аналогии с уже разработанными и успешно эксплуатируемымиим системами.

Если расчётов сделать не поллучается, да и работающих систем в портфолио нет - лучьше обратиться к специалистам.
1 HDD примерно тянет до 100 MB/sec. Всего-то от 3000 HDD надо :)
Массив на 10 дисков самый дешевый стоит 10 000$, т.е. за все от 3 000 000 $.
Плюс ко всему ещё нужны сервера, сетевое оборудование, ПО специализированное что будет стоить столько же.
Итого по самой нижней кромке от 6 000 000 $.
...
Рейтинг: 0 / 0
Подбор оптимального железа
    #37865573
Фотография alexeyvg
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
сколько до Луны километровЗдесь я новичок, но подобные персонажи на каждом форуме рунета есть. Готовые задать кучу уточняющих вопросов, а дальше пшикБез уточнящих вопросов в любом случае буде пшик. Вопрос "какой сервер мне нужен" слишком лаконичен, на него ответа не будет. ТС вообще не представил никакой информации.

С уточняющими вопросами часто находится ответ, пусть и не всегда - ну так форум не техподдержка, может и не получится помочь.

Причём на такой вопрос ответ не даст какой то конкретный человек, так не бывает. Такие сложные решния нужно принимать самому, видя систему, и коллективный разум в этом поможет, только поможет, а не решит за ТС!

сколько до Луны километровВ форумах по железу у таких советы всегда максимум на чём заканчиваются, так это попробовать другой БП, попробовать на другом ПК или вынуть батарейку и обязательно час подождать.Неправда, не всегда.
сколько до Луны километровМне кажется ресурсы одной ноды исчерпаются гораздо быстрее, чем создастся 300000 подсоединений. И хотелось бы иметь представление сколько потянут виндовые сервера, хотя бы в предельно синтетическом тесте.Это лучьше спросить в разделе Windows, там форум специализированный, а не такой общий, как этот. Вот, правда, kdv оказывается знает :-)
...
Рейтинг: 0 / 0
Подбор оптимального железа
    #37865584
Фотография alexeyvg
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
6 000 000 $alexeyvgпропущено...
300 000 одновременных просмотров видео, каждый мегабайт в секунду - это 300 гигабайт в секунду.
Система хранения данных за 100 тыщ такое не потянет.

По теме - нужно просто посчитать. Тот, кто в состоянии разработать такую систему, должен быть в состоянии посчитать все параметры нагрузки и прикинуть требуемое железо, ещё и скорректировав расчёты по аналогии с уже разработанными и успешно эксплуатируемымиим системами.

Если расчётов сделать не поллучается, да и работающих систем в портфолио нет - лучьше обратиться к специалистам.
1 HDD примерно тянет до 100 MB/sec. Всего-то от 3000 HDD надо :)
Массив на 10 дисков самый дешевый стоит 10 000$, т.е. за все от 3 000 000 $.
Плюс ко всему ещё нужны сервера, сетевое оборудование, ПО специализированное что будет стоить столько же.
Итого по самой нижней кромке от 6 000 000 $.Расчёт по дискам не совсем правильный.

Дело в том, что люди читают одни и те же файлы, так что небольшой кеш, допустим, на несколько терабайт, сильно уменьшит требования к дискам...

Хотя с общей стоимостью готов согласиться, речь всё таки о системе-монстре, по типу топовых видео-сервисов. Да и ПО как обычно будет несравнимо дороже железа.
...
Рейтинг: 0 / 0
25 сообщений из 26, страница 1 из 2
Форумы / Hardware [игнор отключен] [закрыт для гостей] / Подбор оптимального железа
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Найденые пользователи ...
Разблокировать пользователей ...
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]