От Alpaka
К All
Дата 28.10.2010 18:37:15
Рубрики Современность;

топичная новость-


ибо не погоды они считают там в первую очередь. : )

Китайцы собрали самый мощный в мире суперкомпьютер

Китайский университет оборонных технологий разработал вычислительную машину Tianhe-1A, мощность которой составляет 2,5 петафлопс, что эквивалентно двум квадрильонам вычислений за секунду. Такой же мощностью обладают 175 тыс ноутбуков.
Об этом сообщает Bloomberg со ссылкой на компанию Nvidia, которая поставляла компоненты для суперкомпьютера. В машине Tianhe-1A использовано 7168 графических чипов Nvidia Tesla M2050 и 14336 чипов Intel. Предполагается, что устройство будут использовать для моделирования климата, исследования генома, прогнозирования сейсмической активности.

Подробнее: http://news.mail.ru/economics/4678448/

Cейчас в десятке самых мощных суперкомпьютеров находятся две китайские машины и семь американских. Первую строчку рейтинга с 2002 года постоянно занимают американцы, сейчас это машина Jaguar мощностью 1,75 петафлопс. Самый мощный российский суперкомпьютер «Ломоносов» исследовательского центра МГУ занимает 13-ую строчку рейтинга. Он был спроектирован российской компанией «Т-Платформы», его производительность— 0,35 петафлопс.

Алпака
От oleg100
К Alpaka (28.10.2010 18:37:15)
Дата 30.10.2010 12:49:30

а что это за шум из года в год - "моделирование погоды". Кто это пользует реаль

а что это за шум из года в год - "моделирование погоды" - ну какие суперкомпьютеры? Где ЭТО работает? Кто это пользует реально? Как ошибались синоптики каждый второй раз - так и ошибаются, какие суперкомьютеры?
От sergе ts
К oleg100 (30.10.2010 12:49:30)
Дата 30.10.2010 13:45:53

Экспоненциальный рост ошибки

Как ошибались синоптики каждый второй раз - так и ошибаются, какие суперкомьютеры?

Есть такой термин в математике "экспоненциальное разбегание траекторий". Это означает что для линейного роста срока предсказания вычислительные мощности должны расти экспоненциально, и с этим ничего нельзя сделать. Так что на короткий срок на крупной шкале (типа повернуть циклон на 10 градусов) вполне себе предсказывают. Тем не менее локальное предсказание погоды в городе - это ещё более сложный вопрос, поскольку попросту трудно получить начальне данные - точную карту скростей ветра и давлений. Со временем наверно научатся, какими нибудь доплеровкими радарами высокого разрешения. Понемного, полегоньку двигается наука в этом направлении. "Дорога в тысячу ли.." ну вы понимаете
От Ktulu
К Alpaka (28.10.2010 18:37:15)
Дата 28.10.2010 23:28:55

Х-ня, применён чисто экстенсивный способ

>Китайский университет оборонных технологий разработал вычислительную машину Tianhe-1A, мощность которой составляет 2,5 петафлопс, что эквивалентно двум квадрильонам вычислений за секунду. Такой же мощностью обладают 175 тыс ноутбуков.

Эквивалентно только для хорошо распараллеливаемых задач. А в реальном мире таковые
далеко не все. В принципе, ничто не мешает и 1 млн. ядер объединить таким способом, только
вот производительность межпроцессорных связей, нужную для практических задач, обеспечить
даже с помощью десятигигабитных свитчей не удастся. В общем чисто формальный рекорд. Остальные то же
самое могли бы сделать, только смысла в этом не находили.

--
Алексей
От sergе ts
К Ktulu (28.10.2010 23:28:55)
Дата 30.10.2010 13:56:37

Разным практическим задчам подходит разная скорость (Folding@Home)

ДЛя некоторых задач подходит связь через интернет
Для больших embarrassingly parallel задач вполне может работать иерархическое соединение где связь между крупными блоками поисходит раз в день (например для некоторых дифуров с частными производнымин гиганстких сетках)
Эта система судя по GPGPU как раз для задач такого типа.
От Грозный
К Ktulu (28.10.2010 23:28:55)
Дата 29.10.2010 00:26:01

...такие, как обсчёт ЯО и погоды

А также очень многие задачи матфизики - они все решаются на сетках и хорошо параллелятся.

>Такой же мощностью обладают 175 тыс ноутбуков.

Очень доступное сравнение :-). Ноутбук - это записная книжка? А если имеется в виду переносной компьютер - так они в сотни раз могут отличаться по выч. мощности. Написано же в терафлопах....

>
>Эквивалентно только для хорошо распараллеливаемых задач. А в реальном мире таковые
>далеко не все.

Хорошо вам в вашем мире - ни ЯО, ни ураганов.

>В принципе, ничто не мешает и 1 млн. ядер объединить таким способом, только
>вот производительность межпроцессорных связей, нужную для практических задач, обеспечить
>даже с помощью десятигигабитных свитчей не удастся. В общем чисто формальный рекорд.

---
Сделать эффективный ввод-вывод и балансировку для тыщ вычислительных узлов без тормозов - это know-how и никак не "х-ня".

===> dic duc fac <===
От Фигурант
К Грозный (29.10.2010 00:26:01)
Дата 29.10.2010 00:51:03

Погода - да, и то на скорую руку, ЯО - нет

>А также очень многие задачи матфизики - они все решаются на сетках и хорошо параллелятся.
Вопрос не в этом - вопрос в анализе.

>Хорошо вам в вашем мире - ни ЯО, ни ураганов.
Ураганы кстати моделируются именно грубой силой, как не странно. Поэтому сразу и написал о метео.

>Сделать эффективный ввод-вывод и балансировку для тыщ вычислительных узлов без тормозов - это know-how и никак не "х-ня".
Именно это и есть главная фича сего комплекса, а то бы им не занимался военный универ НОАК. А освоение этой фичи важно совсем не для ураганов и даже не для ЯО, а для совсем других целей. Но пока они платят баксы капиталистам, которые с удовольствием продают им веревку прошлогодней системы :))
От Грозный
К Фигурант (29.10.2010 00:51:03)
Дата 29.10.2010 01:39:50

нет уж, позвольте

Не знаю, что вы имеете в виду под "ЯО - нет", но вот ссылочки о моделировании подземного подрыва ядерных зарядов малой мощности на массивно параллельных суперкомпьютерах:

http://oai.dtic.mil/oai/oai?verb=getRecord&metadataPrefix=html&identifier=ADA524732
http://www.osti.gov/energycitations/product.biblio.jsp?osti_id=970168

Используется система моделирования ударных волн GEODYN (в гидродинамическом пределе) , к-рый реализован на массивно параллельных суперкомпьютерах в Ливерморе (т.е. того же класса, что и китайский). Решатель в конечных разностях методом Эйлера-Годунова (если правильно перевёл Eulerian Godunov finite-difference code).

GEODYN is a code for modeling hydrodynamic (shock-wave) motions in a wide variety of materials

http://docs.google.com/viewer?a=v&q=cache:ulwImoXbT54J:www.dtic.mil/cgi-bin/GetTRDoc%3FAD%3DADA516106%26Location%3DU2%26doc%3DGetTRDoc.pdf+GEODYN+hydrodynamic+code+parallel&hl=en&gl=us&pid=bl&srcid=ADGEEShiTZ_yFuV6sdDZXtoTYRi0J6coSzAwQWQQQ5xssvyNH2kiXGuDvW3oZIh6PLpKQJ6BTZAhDrWsWsZplnzkMqb7nJ3oLbECRmE109QmHuBj5djlEHXGpERpA7Uq9fMgBLi3RsSP&sig=AHIEtbQ7CTA7E-3ClzlycJNUOpQiC5WEPg

Помимо подрыва ЯО, распространение ударных волн после землетрясения тоже считается GEODYN-ом. Для Китая задачка поважнее даже, чем для России.

===> dic duc fac <===
От Фигурант
К Грозный (29.10.2010 01:39:50)
Дата 29.10.2010 14:16:54

ЯО означает именно ЯО. Моделизация взрыва - это еще не моделизация оружия ;)

>Помимо подрыва ЯО, распространение ударных волн после землетрясения тоже считается GEODYN-ом. Для Китая задачка поважнее даже, чем для России.
В том-то и дело, что такие задачи решаются именно грубой силой.
Для моделизации не просто взрыва, а именно процессов, суперкомп сам по себе ничего не дает. Дает анализ, и исходные данные, которые наиболее похожи на сам процесс. Для этого и делают французы и амеры не только суперкомпы, а такие вещи как сверхмощные лазеры.
От Грозный
К Фигурант (29.10.2010 14:16:54)
Дата 30.10.2010 00:45:08

ну так я имел в виду моделирование именно подрыва ЯО и его последствий

>Для моделизации не просто взрыва, а именно процессов,
---

А не каких-то там "процессов". Эффекты долговременного хранения тоже моделируются на параллельных машинах.

===> dic duc fac <===
От Ktulu
К Грозный (29.10.2010 00:26:01)
Дата 29.10.2010 00:42:06

Re: ...такие, как...

>Хорошо вам в вашем мире - ни ЯО, ни ураганов.

В нашем мире ни ЯО ни ураганы не относятся к хорошо распараллеливаемым задачам,
когда речь идёт о миллионах вычислительных узлов. Идеальной вычислительной
задачей в этом случае являются задачи, не требующие обмена данными между узлами
вообще, такие, как вскрытие грубой силой шифрованных сообщений. Любые разностные схемы,
будь то ЯО или ураганы, требуют огромного количества данных для обмена между узлами,
и объём этих данных растёт далеко не линейно при росте числа узлов.

>Сделать эффективный ввод-вывод и балансировку для тыщ вычислительных узлов без тормозов - это know-how и никак не "х-ня".

Никакое это уже давно не ноу-хау. Китайцы наверняка применили готовые решения, скорее всего на основе Linux,
которых более чем достаточно.

--
Алексей
От Грозный
К Ktulu (29.10.2010 00:42:06)
Дата 29.10.2010 07:45:48

читайте по ссылочке


>Никакое это уже давно не ноу-хау. Китайцы наверняка применили готовые решения, скорее всего на основе Linux,

----

угу - только вот мужики из Окридж лаб и из Крэя не в курсе - они почему-то уверены, что главное - это внутренняя магистраль собственно китайской разработки, к-рая существенно быстрее InfiniBand (используемый в штатовских суперкомпьютерах)

http://news.cnet.com/8301-13924_3-20021122-64.html

What makes the Chinese supercomputer so fast?
Dongarra: The Chinese designed their own interconnect. It's not commodity. It's based on chips, based on a router, based on a switch that they produce.

Is that in essence the secret sauce?
Dongarra: It's similar to Cray. Cray's contribution, besides the integration and software, is the interconnect network. They have a very fast interconnect that makes that machine perform very well. Though [the Chinese] project is based on U.S. processors, it uses a Chinese interconnect. That's the interesting part. They've put something together that is roughly twice the bandwidth of an InfiniBand interconnect [which is used widely in the U.S.]

>которых более чем достаточно.

Недостаточно. Может, остановитесь и перестанете вещать о том, в чём не разбираетесь?

===> dic duc fac <===
От Ktulu
К Грозный (29.10.2010 07:45:48)
Дата 29.10.2010 08:22:25

Re: читайте по...

>угу - только вот мужики из Окридж лаб и из Крэя не в курсе - они почему-то уверены, что главное - это внутренняя магистраль собственно китайской разработки, к-рая существенно быстрее InfiniBand (используемый в штатовских суперкомпьютерах)
> http://news.cnet.com/8301-13924_3-20021122-64.html

Эти, как вы их называете, мужики не знают точно, что там внутри. А InfiniBand -- это индустриальный стандарт,
доступен всем.

>What makes the Chinese supercomputer so fast?
>Dongarra: The Chinese designed their own interconnect. It's not commodity. It's based on chips, based on a router, based on a switch that they produce.

В том числе и китайским компаниям.

>Is that in essence the secret sauce?
>Dongarra: It's similar to Cray. Cray's contribution, besides the integration and software, is the interconnect network. They have a very fast interconnect that makes that machine perform very well. Though [the Chinese] project is based on U.S. processors, it uses a Chinese interconnect. That's the interesting part. They've put something together that is roughly twice the bandwidth of an InfiniBand interconnect [which is used widely in the U.S.]

Опять же, без упоминания того, какой именно InfiniBand имеется в виду, эта информация бессмыслена.
Статья эта вообще не несёт никакой технической информации, написана на понятном для публики языке,
цель статьи -- алармистская, дайте бабла на противодействие китайской угрозе.

>>которых более чем достаточно.
>Недостаточно. Может, остановитесь и перестанете вещать о том, в чём не разбираетесь?

А вы кто такой, чтобы такие утверждения делать?

Повторяю вопрос, вы понимаете, что с ростом количества узлов необходимая пропускная способность
растёт нелинейно? А в китайском кластере мало того, что применено 14 тыс. Зеонов с несколькими ядрами
каждый, так ещё и 7 тыс. массивно параллельных изделий от NVidia с несколькими сотнями вычислительных
ядер каждый. И то, что китайцы якобы сделали интерконнект вдвое быстрее непонятно какой версии InfiniBand,
совершенно им не поможет, потому что общая вычислительная мощность узлов у них выросла гораздо более
чем вдвое.

Суперкомпьютерные вычисления уже давно в тупике, потому-что производительность отдельных ядер растёт
медленно, количество ядер можно растить без ограничений, а вот соединения между ядрами давно упёрлись в потолок
(который растёт, конечно, но медленно). И с какого-то количества ядер добавлять новые становится бессмысленно --
интерконнект не справляется. Это количество ядер зависит от конкретной задачи, для вскрытия шифров методом грубой
силы взаимодействие между узлами вообще не нужно (как не нужен и суперкомпьютер, прекрасно справляется
распределённая вычислительная сеть), так что предельное количество ядер для этой задачи огромно, для некоторых
плохо распараллеливаемых задач, типа аэродинамики, предельное количество ядер измеряется в штуках.

--
Алексей
От Грозный
К Ktulu (29.10.2010 08:22:25)
Дата 29.10.2010 09:51:10

Re: читайте по...

>Эти, как вы их называете, мужики не знают точно, что там внутри.

Донгарра - автор Линпак, если чо (далее "переход на личности" по поводу вашей неосведомлённости) -

The LINPACK Benchmark was introduced by Jack Dongarra.
http://www.top500.org/project/linpack

Кто ж Донгарру к китайским потрошкам пустит? Но "принципиальную схему" всем желающим китайцы рисуют (найдёте, коли захотите). Саму систему Тяньхэ Донгарра видел вживую да и тестовые прогоны проверялись.

>А InfiniBand -- это индустриальный стандарт,
---

Ягуар (нынешний топ и скоро - номер 2) не использует ИнфиниБэнд, там Джемини внутри (от Крэя).


>Опять же, без упоминания того, какой именно InfiniBand имеется в виду, эта информация бессмыслена.Статья эта вообще не несёт никакой технической информации, написана на понятном для публики языке,
---

Вам зачем техническая информация, если вы и так "в курсе"? :-)

Человек, которого спрашивают, хорошо известен (ещё раз - отец теста Линпак и один из отцов нынешнего топа - Ягуара), C|Net издание достаточно серьёзное.

>цель статьи -- алармистская, дайте бабла на противодействие китайской угрозе.
---

Само собой. А вы считаете, что штатам можно "спать спокойно", после того как их в 2 раза сделали по тестам?

>А вы кто такой, чтобы такие утверждения делать?
---

Ладно, переходы на личности замнём, погорячился. Трясти бумажками и зарываться в оффтопик не собираюсь, я вам не скажу, "кто я такой" :-).

Достаточно близко работаю с железом в этой области, чтоб засомневаться в вашей компетентности. Тогда как вы, похоже, не в курсе проблем даже на уровне софта - "простой" Линукс дохнет на системах с несколькими сотнями узлов. А тут - ещё и гибридная система, ЦПУ+несколько ГПУ в модуле. С виртуальной памятью тоже всё непросто. Так что ваша снисходительность по отношению к китайцам выглядит неуместной.

>Повторяю вопрос, вы понимаете, что с ростом количества узлов необходимая пропускная способность растёт нелинейно?
---

я-то понимаю - именно поэтому считаю, что отъём первого места с таким кол-вом узлов - это достижение.

>совершенно им не поможет, потому что общая вычислительная мощность узлов у них выросла гораздо более чем вдвое.
---

Помогло побить Ягуар в Линпаке. Если слепить наивную системку из готового (на что вы намекнули) - Тяньхэ близко б не подошла к Ягуару.

>Суперкомпьютерные вычисления уже давно в тупике, потому-что производительность отдельных ядер растёт
----

Тупик мнимый, т.к. существенная часть HPC-приложений параллелизуема и масштабируется с ростом ядер. Большой гемор писать, но преодолимо.

>(который растёт, конечно, но медленно). И с какого-то количества ядер добавлять новые становится бессмысленно -- интерконнект не справляется.
---

О том и речь - создание "интерконнекта", который не тормозит вычисления и обмен - это большое достижение.

>плохо распараллеливаемых задач, типа аэродинамики, предельное количество ядер измеряется в штуках.
----

Не отрицая существования плохо распараллеливаемых задач, отмечу, что задач под массивно параллельные системы столько, что существующие параллельные суперкомпьютеры не простаивают и простаивать в ближайшем будущем не будут. Целые классы задач матфизики отлично ложатся и на однородные, и на гибридные параллельные системы.

===> dic duc fac <===
От Ktulu
К Грозный (29.10.2010 09:51:10)
Дата 29.10.2010 10:38:37

Re: читайте по...

>Человек, которого спрашивают, хорошо известен (ещё раз - отец теста Линпак и один из отцов нынешнего топа - Ягуара), C|Net издание достаточно серьёзное.

Человек -- известный, с этим никто не спорил.

>>цель статьи -- алармистская, дайте бабла на противодействие китайской угрозе.
>Само собой. А вы считаете, что штатам можно "спать спокойно", после того как их в 2 раза сделали по тестам?

Когда появится в списке -- тогда сделают. Пока не появился.

>Помогло побить Ягуар в Линпаке. Если слепить наивную системку из готового (на что вы намекнули) - Тяньхэ близко б не подошла к Ягуару.

2 петафлопс в линпаке -- проблема, элементарно решаемая экстенсивным подходом.
Такую производительность и в России могут сделать, вон, разработчики упомянутого в этой ветке Скифа
обещают 2 петафлопс простым увеличением количества стоек до 50. Только, видимо, необходимости в этом
нет, или денег нет, или того и другого.

>Тупик мнимый, т.к. существенная часть HPC-приложений параллелизуема и масштабируется с ростом ядер. Большой гемор писать, но преодолимо.

Только часто масштабируется медленней чем линейно.

>О том и речь - создание "интерконнекта", который не тормозит вычисления и обмен - это большое достижение.

Достижение, много кому доступное.

>Не отрицая существования плохо распараллеливаемых задач, отмечу, что задач под массивно параллельные системы столько, что существующие параллельные суперкомпьютеры не простаивают и простаивать в ближайшем будущем не будут. Целые классы задач матфизики отлично ложатся и на однородные, и на гибридные параллельные системы.

А другие целые классы -- не ложатся.

--
Алексей
От Грозный
К Ktulu (29.10.2010 10:38:37)
Дата 29.10.2010 13:17:17

Re: читайте по...

>Когда появится в списке -- тогда сделают. Пока не появился.
---
Ноябрь не за горами.

>2 петафлопс в линпаке -- проблема, элементарно решаемая экстенсивным подходом.
---
Вы упускаете несколько "мелочей"

1. Без правильного интерконнекта "экстенсивный" подход с увеличением стоек заткнётся.

2. Разработка правильного интерконнекта для нескольких тыщ узлов не есть тривиальная задача

3. Сборка гибридной системы ЦП+ГП нетривиальна (даже с коммерчески доступным интерконнектом)

4. Затачивание ОС под несколько тыщ узлов нетривиальна

Таким образом, "экстенсивная х-ня" превращается в "передовое технологическое достижение".

>Такую производительность и в России могут сделать, вон, разработчики упомянутого в этой ветке Скифа
---

могут != сделали

>обещают 2 петафлопс простым увеличением количества стоек до 50. >Только, видимо, необходимости в этом
---

Необходимости нету? Действительно, ну зачем нам ударные волны, протеины и прочие глупости?

Обещают - а китайцы сделали. Китайцы вообще такие смешные - последние годы только и делают, что деньги на ветер выбрасывают, строя всё новые суперкомпьютеры.

Лучший российский суперкомпьютер - на 13-м месте (на июнь), с ИнфиниБэндом QDR - не гибрид и без своего интерконнекта.

>Достижение, много кому доступное.
---
Вы посмотрите на список Топ500 и посмотрите, какие фирмы и откуда делали интерконнект. Список стран-авторов интерконнекта очень мал.

>Только часто масштабируется медленней чем линейно.

Есть закон Амдала для частично параллелизуемых задач. Ну и что.

>А другие целые классы -- не ложатся.
---

И поэтому надо сидеть в "тупике"?

===> dic duc fac <===
От Фигурант
К Ktulu (28.10.2010 23:28:55)
Дата 28.10.2010 23:58:19

Re: Х-ня, применён...

>самое могли бы сделать, только смысла в этом не находили.
Ну почему же, хедлайны обеспечены, боевые блоггеры очередной аргумент о Чайна-Райзинг (тм) получили, ну и чисто для метео и массивно-нелинейных это неплохо. Для всего остального - неясно, но кто это понимает.
От kegres
К Alpaka (28.10.2010 18:37:15)
Дата 28.10.2010 20:30:13

Re: топичная


>ибо не погоды они считают там в первую очередь.

Есть другой топичный аксепт - вроде бы на них не действует Джексон с Веником.

А тут изворачивайся...

> 7168 графических чипов Nvidia Tesla M2050 и 14336 чипов Intel.

Интересно мне, во сколько шкафов они все уместились. А то могут всплыть нюансы.
Напр Скиф 4В,в составе 50ти шкапов даёт 2 петафлопса.
Шкаф - 8 блоков по 40 тфлопс.

А в 12м годе, обещают превзойти 10 петафлопс силой 50ти шкафов.
От Фигурант
К kegres (28.10.2010 20:30:13)
Дата 28.10.2010 23:21:58

Посмотрите сколько мегаваттов (официально) это чудо-юдо жрет...

>Интересно мне, во сколько шкафов они все уместились.
... и многое станет ясно.
В том числе и уровень китаевидной пропаганды и степени ее хавания западными СМИ широкого потребления. Ну и о количестве терафлопов итд. ходят интересные слухи.
Тут у меня просто местные подрядчики с этим монстриком на брудершафт пили, знают что к чему и о Закате Запада (тм) ныть не спешат, а скорее тихо хихикуют и считают баксы :)
От digger
К Фигурант (28.10.2010 23:21:58)
Дата 28.10.2010 23:58:09

Re: Посмотрите сколько

>Интересно мне, во сколько шкафов они все уместились.

Это очередной анекдот про китайцев, из серии про эбонитовые палочки и запуск спутника из рогатки ;)?
От Фигурант
К digger (28.10.2010 23:58:09)
Дата 29.10.2010 00:14:48

Re: Посмотрите сколько

> Это очередной анекдот про китайцев, из серии про эбонитовые палочки и запуск спутника из рогатки ;)?
Анекдот не знаю, честно, но рогатку построили они здоровую, могут на весь мир гордится (что и делают, и мир делает вид что гордится тоже). Спутники конечно запускать не получится, но выглядит внушительно, и это самое главное. Не первая мега-ГЭС, чай.