рынок "тяжелых" вычислений

← →
StriderMan © (2009-09-22 17:39) [0]

Не знаю подходящего термина, имеются ввиду вычисления, требующие больших ресурсов, например суперкомпов или кластеров.
Так вот интересует насколько востребованы такие вычислительные системы, большой ли спрос на тяжелые вычисления. Сколько стоит, скажем, час работы на терафлопном компьютере? Может статьи какие-то посоветуете или сами в теме?
Внятной инфы в инете не нарулил, может потому что не владею терминологией. Кстати как правильно эта сфера называется?

← →
TUser © (2009-09-22 17:53) [1]

Продажа процессорного времени, наверное.

А что ты считать хочешь?

← →
StriderMan © (2009-09-22 17:55) [2]

Я не считать, я продавать хочу ;)

← →
AlexDan © (2009-09-22 18:03) [3]

а у тебя что, есть..? и как думаешь продавать..?

← →
TUser © (2009-09-22 18:03) [4]

http://www.upmark.ru/mnews_ni-15842.html

$1/час*процессор, но это у них. У нас тоже наверняка продают.

← →
StriderMan © (2009-09-22 18:05) [5]

> а у тебя что, есть..? и как думаешь продавать..?

Есть одна идейка, собссно ничего нового.... Но сначала надо решить надо ли это кому, будет ли спрос.

← →
cwl © (2009-09-22 18:39) [6]

думаю, щто не будет - сейчас это почти никому (из российских предприятий) не нужно

← →
StriderMan © (2009-09-22 18:41) [7]

> думаю, щто не будет - сейчас это почти никому (из российских предприятий) не нужно

а за бугор?

← →
Jeer © (2009-09-22 18:46) [8]

> StriderMan © (22.09.09 18:41) [7]
>
>
> > думаю, щто не будет - сейчас это почти никому (из российских
> предприятий) не нужно
>
> а за бугор?

Смешной человек - там этого добра..

← →
StriderMan © (2009-09-22 18:50) [9]

> Смешной человек - там этого добра..

ну прям уж на каждом углу продают терафлопсы за копейки... А потом забугор разный бывает. Та же прижимистая Европа, в которой не всем по карману арендовать Blue Gene на пару суток

← →
Pavia © (2009-09-22 20:09) [10]

> ну прям уж на каждом углу продают терафлопсы за копейки.

Видео карты до терафлопсов добрались. Так что это копейки. А вот пентафлопсы это уже интереснее. Как то несколько лет назад видил тему кто-то искал где подешевле купить час супер компьютера.

← →
AlexDan © (2009-09-22 20:13) [11]

> StriderMan © (22.09.09 17:39)
ну допустим мне надо.. только как это будет выглядеть? есть програмка, которая требует значительного камп. времени, я что, тебе её передаю (exe), а ты мне результат..?
но конечно вряд-ли у тебя будет спрос большой..

← →
AlexDan © (2009-09-22 21:40) [12]

> StriderMan © (22.09.09 17:39)
нет, мне действительно нужно, ну может не сейчас, примерно через год, я действительно провожу некоторые исследования и вычислительной способности моего компьютера на данный момент не хватает..

← →
Омлет (2009-09-22 21:44) [13]

Скидки местным не? Мне надо пароль вспомнить к архиву ))

← →
Styx (2009-09-22 22:34) [14]

> Та же прижимистая Европа

А та прижимистая Европа давно подсуетилась. Вон дубненцы знают - CERN считает но кластере в ОИЯИ.

← →
StriderMan © (2009-09-22 22:47) [15]

> AlexDan © (22.09.09 20:13) [11]
> ну допустим мне надо.. только как это будет выглядеть? есть
> програмка, которая требует значительного камп. времени,
> я что, тебе её передаю (exe), а ты мне результат..?

нет, я выдаю тебе удаленный доступ к кластеру, на котором можно запускать любой код по желанию.

← →
StriderMan © (2009-09-22 22:49) [16]

> CERN считает но кластере в ОИЯИ.

насколько я знаю ЦЕРН и ОИЯИ активно используют GRID, это имеет ввиду?

← →
stas © (2009-09-22 22:57) [17]

StriderMan © (22.09.09 18:41) [0]
Удаленно с широким каналом для брутфорса покатит ,создание словарей для него, таблиц с хэшами...

← →
StriderMan © (2009-09-22 23:03) [18]

> Удаленно с широким каналом для брутфорса покатит ,создание словарей для него, таблиц с хэшами...

да конечно. Но и не только.

← →
Styx (2009-09-22 23:15) [19]

> насколько я знаю ЦЕРН и ОИЯИ активно используют GRID, это
> имеет ввиду?

Типа того. Только из общения с ЛИТ ОИЯИ я понял, что GRIDовский кластер у них стоит, но сами они его не используют практически, а считают там ЦЕРНовцы. Это, правда, два года назад было, может, с тех пор что и поменялось.

← →
TUser © (2009-09-22 23:47) [20]

> AlexDan © (22.09.09 21:40) [12]
>
> > StriderMan © (22.09.09 17:39)
> нет, мне действительно нужно, ну может не сейчас, примерно
> через год, я действительно провожу некоторые исследования
> и вычислительной способности моего компьютера на данный
> момент не хватает..

Програмка должна быть написана специально для параллельного исполнения. А как это сделать - это целая наука (мне неизвестная).

← →
AlexDan © (2009-09-23 01:13) [21]

> StriderMan © (22.09.09 22:47) [15]
> нет, я выдаю тебе удаленный доступ к кластеру, на котором
> можно запускать любой код по желанию.
так я и думал..

> TUser © (22.09.09 23:47) [20]
> Програмка должна быть написана специально для параллельного
> исполнения.
надо будет наверно хоть почитать про это

← →
cwl © (2009-09-23 01:20) [22]

AlexDan © (23.09.09 01:13) [21]
> надо будет наверно хоть почитать про это
про MPI, например

← →
cwl © (2009-09-23 01:20) [23]

AlexDan © (23.09.09 01:13) [21]
> надо будет наверно хоть почитать про это
про MPI, например

← →
StriderMan © (2009-09-23 10:52) [24]

> Styx (22.09.09 23:15) [19]
> Типа того. Только из общения с ЛИТ ОИЯИ я понял, что GRIDовский кластер у них стоит, но сами они его не используют практически

подтверждаются опасения, что в России это никому не нужно, и рынка собственно просто не существует

← →
TUser © (2009-09-23 11:03) [25]

> в России это никому не нужно

Те, кому нужно, - у них есть свой кластер.

← →
StriderMan © (2009-09-23 11:09) [26]

> Програмка должна быть написана специально для параллельного
> исполнения. А как это сделать - это целая наука (мне неизвестная).

Мне пока тоже :) Но вот тот же OpenMosix(http://ru.wikipedia.org/wiki/Openmosix) обещает все распараллеливать автоматом

← →
@!!ex © (2009-09-23 11:14) [27]

> [9] StriderMan © (22.09.09 18:50)
> ну прям уж на каждом углу продают терафлопсы за копейки...
> А потом забугор разный бывает. Та же прижимистая Европа,
> в которой не всем по карману арендовать Blue Gene на пару
> суток

терафлоп ничего не стоит. сейчас видеокарты дают 2.4терафлопа. За счет OpenCL можно что угодно считать.

← →
StriderMan © (2009-09-23 11:22) [28]

> терафлоп ничего не стоит. сейчас видеокарты дают 2.4терафлопа. За счет OpenCL можно что угодно считать.

да мне уже должили. пусть будут петафлопы:)

> [28] StriderMan © (23.09.09 11:22)

А такие мощности нужны очень ограниченному количеству организаций/людей, и они в большинстве случаев знают где их найти.
^^ИМХО^^

Я имею ввиду, просто так выставлять на продажу нет смысла. Имеет смысл искать клиентов и с ними работать.

> А такие мощности нужны очень ограниченному количеству организаций/людей, и они в большинстве случаев знают где их найти.

Да, но если предложить этим организациям те же мощности дешевле? Или опираться на организации, нуждающиеся в мощностях среднего уровня?

Итак, кто это может быть:

1. Государственные научные центры. У них либо нет денег, либо есть деньги и собственные мощности. Рынка там нет, деньги распиливаются по "тендерам" среди приближенных.
2. Частные исследовательские компании, в т.ч. медицинские. их в России очень мало.
3. Энтузиасты - одиночки. Их много ну у них нет денег.
Кто еще?

> Имеет смысл искать клиентов и с ними работать

вот в том и вопрос. Где их искать и есть ли они вообще в России. Если их нет то и заморачиваться смысла нет.

← →
Styx (2009-09-23 23:00) [33]

> подтверждаются опасения, что в России это никому не нужно,
> и рынка собственно просто не существует

Ну, не совсем так. Скорее

> Те, кому нужно, - у них есть свой кластер.

В том же ОИЯИ есть кластер для себя и есть кластер для ЦЕРНа (GRIDовский, свои проги под GRID переделывать неохота - проще для себя ещё машинок купить, а GRIDовский держать для престижа).
МГУшный http://www.parallel.ru/ (только сайт чего-то не открывается) вполне университет обслуживает, не сказать, чтобы был сильно перегружен... Хотя и не простаивает.
В РАНе, наверное, также.

А вообще - каждый такой ВЦ имеет свои особенностями, под которые надо адаптировать софт... Поэтому народ хочет или иметь своё, или, если заказывать на стороне - то с уверенностью в долговременности таких... отношений. Поэтому так просто на рынок, наверное, нелегко выйти, особенно при учёте того, что терафлопы и правда дешевеют на глазах.

← →
Суслик_ (2009-09-23 23:11) [34]

я в соседнем кабинете сижу с лабораторией, занимающейся МГУушным кластером.

еще один строят.

Если есть что тестировать, требующее внушительные вычислительные ресурсы, а тестировать хочется нахаляву, добро пожаловать в IBM Innovation Center в Москве

> есть програмка, которая требует значительного камп. времени,
> я что, тебе её передаю (exe), а ты мне результат..?

Всё проще. Облачные вычисления - это как раз оно самое и есть. Размещаем свои продукты на серверах облачного провайдера, используем его ресурсы, оплачиваем затраченное нашей программой процессорное время, интернет-трафик...

Сейчас, кстати, самый интересный период: облачная эпоха только начинается, поэтому большинство крупных игроков предоставляют её для тестов абсолютно бесплатно.

> Всё проще. Облачные вычисления - это как раз оно самое и
> есть.

??? Можно подробнее т.е есть exe и ваша облачная ос его параллелит ? Или надо самому паралелить ?

> ваша облачная ос

В смысле "наша"? Наше только программа и данные, не наше - ресурсы, которые она использует

> облачная ос его параллелит? Или надо самому паралелить?

Эмм... Про параллельность я как-то не думал, я имел в виду лишь сам факт использования "процессорного времени другого компьютера"

"Параллелить", по-моему, надо самому. По крайней мере у Microsoft-а дело обстоит так: есть специальный SDK для разработчиков, чтобы создавать приложения для работы под Windows Azure

Наверняка в SDK заложен какой-то функционал, чтобы приложение работало как можно быстрее и производительнее

PS: про SDK
http://habrahabr.ru/blogs/Azure/49389/
PPS:
> IBM Innovation Center в Москве

IBM ещё предоставляет Virtual Loaner Program - виртуальную аренду высокопроизводительного оборудования (удалённый вариант, возможностей конечно поменьше будет). Загружаем свои данные, программы и работаем. Вот в этих случаях уж точно надо распараллеливание производить самому, подстраиваться под аппаратуру

> StriderMan © (23.09.09 11:31) [32]
>
>
> > Имеет смысл искать клиентов и с ними работать
>
> вот в том и вопрос. Где их искать и есть ли они вообще в
> России. Если их нет то и заморачиваться смысла нет.

Например, сейчас есть увлечение ветроэнергетикой, но при российских слабых ветрах нужны эффективные извлекатели энергии ветра.
Вот тут, я знаю точно, считают по взрослому.
1 мин реальной работы - несколько суток счета на кластере.

> Например, сейчас есть увлечение ветроэнергетикой, но при российских слабых ветрах нужны эффективные извлекатели энергии ветра. Вот тут, я знаю точно, считают по взрослому.

А не логичнее ли при Российских слабых ветрах развивать другие направления энергетики?

← →
Мимопроходящий (2009-09-24 12:32) [40]

Вообще-то на территории России есть места где можно прекрасно использовать энергию ветра, правда она пока будет дороговата в производстве.
Но в любом случае энергетика - одно из направлений, где можно было б данную идею реализовать.

рынок "тяжелых" вычислений Найти похожие ветки