Распределенные вычисления BOINC

[Squee]

Есть кто-нибудь, кто участвует в программе распределенных вычислений на платформе BOINC? Если "да", то что считаете?
Мои лошадки трудятся над SETI@home, Einstein@home, LHC@home, XtremLab и SZTAKI Desktop Grid. Хотя последний я, наверно, заброшу. Во всех проектах организовал команду BOINC@Odessa. Все желающие - добро пожаловать!
Для тех, кто не в курсе - вот небольшая статья о распределенных вычислениях.

[MUSIC_S]

Я участвовал в проекте Folding@home пока клиент не заглючил и не перестал получать задания.. после этого я его забросил!

[fin]

Я принимал участие в составе www.overclockers.ru/TSC/ в двух проектах. Но сейчас у меня процессор AMD с поддержкой Cool & Quiet и мне неудобно нагружать его на 100%, вместо того чтобы он "отдыхал" .

Вообще, конечно, вещь нужная и полезная, но несколько неудобная и электричество жрет .

[Toddy]

Сорри, возможно, ответ есть на приведенном выше сайте ("статья о распределенных вычислениях") есть ответ на мой вопрос, но я его не нашел..
собственно вопрос(ы) -
1. это только под ЛИНУКС или под окнами тоже можно ? (года 3 назад, работая в клубе, учавствовал в чем-то подобном, но уже не помню, чем это все закончилось)
2. Сколько траффика съедает отправка результатов/получение нового задания ? (вопрос актуален - сижу на платном траффике, без вариантов ( )

[MUSIC_S]

под окнами тоже можно "распределённо вычислять"
получение задания в Folding@home трафика занимает порядка полуметра.... а отправка уже обработанного поряда 1 мегабайта.

[Squee]

1) В настоящий момент на официальном сайте BOINC доступны к загрузке следующие версии ПО BOINC:

• 5.4.11 для Windows (9.30 МБайт)
• 5.4.9 для Mac OS X (3.60 МБайт)
• 5.4.9 для Linux/x86 (3.79 МБайт)

Кроме того на неофициальных сайтах доступны версии для Solaris/Opteron, Linux/Opteron, Linux/PPC, HP-UX, FreeBSD, а также других платформ.
Что касается конкретных научных проектов распределенных вычислений, то наличие клиентского ПО для того или иного проекта нужно смотреть на его сайте.
Список существующих проектов с указанием их новостей, активности в настоящий момент и ссылками на домашние страницы лучше всего, наверно, смотреть на сайте команды BOINC Synergy.Там же можно сделать себе "визитку" подобного рода:


2) По проектам, в которых участвую я:
SETI@home (поиск радиосигналов от "зеленых человечков" ): Одноразово скачивается клиентская программа весом ~2М (более точно не скажу, т.к. пользуюсь оптимизированными клиентами - под винду 7М, под линух - 2М). Расчетное задание весит ~362-372 кб, на моих машинах считается от 1,5 до 9 (чаще всего - порядка 5) часов. Результат зависит от времени расчета, чаще всего - 10-20 кб.
Einstein@home (обнаружение гравитационных волн): Одноразово скачивается клиентская программа ~4,5М и файлы с данными орбит Солнца и Земли (~3М). Расчетные задания поступают от трех интерферометров и состоят из нескольких файлов: блок с данными (может весить от ~4М до ~15М), закачивается раз в 1-2 месяца и блок с параметрами расчетов (весит от ~50 до ~400 кб, зависит фиг знает от чего), закачивается по мере выполнения предыдущих заданий. Размеры результатов точно не скажу, но задания у меня расчитываются либо около 1,5 часов, либо 13-15 часов. Прямо сейчас на одной из машинок 15-часовый результат, посчитанный на ~47%, занимает ~4М, на другой 15-часовый результат, посчитанный на ~58%, занимает ~1,8М, на третьей 15-часовый результат, посчитанный на ~21%, занимает ~1,3М.
XtremLab (анализ времени работы и загруженности компа): Клиентская программа занимает ~1,8М. За один раз закачивается 10 заданий, на размер никогда не обращал внимания (килобайты), "расчет" одного задания <10 минут, размер результата <3кб. Через какое-то время все повторяется...
LHC@home (анализ вариантов размещения управляющих магнитов строящегося в ЦЕРНе коллайдера): Одноразово загружаются клиентская программа (~2,7М) с картинками для скринсейвера (еще ~3,8М). Размеры расчетного задания и файлов результата не помню - уже месяца 1,5-2 новых заданий не рассылалось.
SZTAKI Desktop Grid (поиск генерализованных двоичных числовых систем): Клиентская программа ~1,2М. Расчетные задания и файлы результатов раньше были маленькие и считались очень быстро (~1-1,5 часа), в настоящее время очень большие и считаются очень долго (у меня - до 1,5 недель). Обещают через некоторое время уменьшить размер заданий до приемлемого. В ожидании обещанного пока отключился и не считаю.

При наличии более новой версии все клиентские программы автоматически обновляются по команде с сервера. Может случаться довольно часто (у SZTAKI DG был период, когда обновления происходили несколько раз в неделю), могут не обновляться по году и больше.

[Erg Noor]

Вообще, конечно, вещь нужная и полезная, но несколько неудобная и электричество жрет .

Электричества жрет совсем не много. Когда-то на сайте BOINC был расчет для Штатов - на какую сумму в месяц дополнительно съедается электричества. Помню пытался пересчитать на наши цены - получил что-то около 5 грн./мес. на один комп. Сейчас цены подросли, ну будет 10 грн.

Насчет неудобства - есть проекты, клиенты которых требуют немало памяти, например, последний клиент SETI@Home - около 60 Мб. Так что на машине с 256 и меньше начинает ощущаться при интесивной работе. Но если ОЗУ 512 Мб и больше - клиента вообще не заметно. Клиенты Einstein и uFluids требуют гораздо меньше памяти, их можно запускать на весьма пожилой машинке. Ну а трафик - конечно есть, но у кого анлимитед, это вообще не проблема.

[Erg Noor]

Для интересующихся форум украинской команды распределенных вычислений

[Squee]

Wikipedia станет еще и поисковиком

Компания "Wikia" сообщила о приобретении уникального поискового механизма "Grub" у фирмы "LookSmart", заявив также о намерении полностью открыть его исходный код, сообщает "ITC Online".

Уникальность "Grub" заключается в том, что этот поисковый робот построен на основе модели распределенных вычислений. Индексированием страниц занимаются сотни тысяч персональных компьютеров отдельных пользователей, установивших специальную программу-клиент. Таким образом, "Grub" принципиально отличается от поисковых механизмов "Google" и "Yahoo!", но обладает концептуальной схожестью с популярной интернет-энциклопедией "Wikipedia".

Объединив "Grub" с проверенной временем wiki-моделью, Джимми Уэльс - один из основателей "Wikipedia" - планирует дать пользователям возможность коллективно обрабатывать результаты поиска, что, по его мнению, обеспечит высочайшую эффективность сервиса. При этом модульная конструкция "Grub" позволит разработчикам легко и быстро наращивать функциональность поисковой машины, улучшая ее качество и производительность.

Взаимодействие участников проекта на всех уровнях (как социальном, так и техническом) должно стать основой нового поискового сервиса "Search Wikia", обладающего максимальной открытостью и прозрачностью. Джимми Уэльс отметил, что интерес к разработке уже проявили ведущие компании, работающие в сфере поисковых технологий.

[Squee]

Сегодня - ровно 7 лет с начала моего участия в проектах распределенных вычислений



Вот результаты семилетней работы

[Squee]

Появился первый украинский проект распределенных вычислений - Magnetism@home.

Автор о проекте:

Запустил BOINC проект по расчету (равновесных, метастабильных и переходных) магнитных конфигураций цилиндрических нано-элементов (и, в перспективе, их массивов, поскольку программа легко обобщается и на этот случай). Основывается это дело на моей старой аналитической теории, но, надеюсь, сочетание ее с современными численными методами приведет к существенному кумулятивному эффекту.

Действовать будем при помощи грубой силы. ;-) Магнитные конфигурации элементов описываются простыми аналитическими (в прямом и фигуральном смысле ;-) функциями, зависящими от небольшого числа скалярных параметров. Возьмем, и протабулируем энергии состояний, задаваемых этими функциями, во всей их области определения. Полученные таблицы (точнее, построенные на их основе интерполяции) позволят легко решать задачи статики (строить карты равновесных и метастабильных состояний), динамики и даже термодинамики для магнитных нано-элементов различной формы.

Проект называется Magnetism@home. Вы тоже можете в нем участвовать. Для этого достаточно установить программу BOINC (расшифровывается как Berkeley Open Infrastructure for Network Computing) и подключиться к Magnetism@home, введя (когда программа покажет список проектов) следующий URL:

http://kinetic.dnsalias.org/magnetism/

Поддерживаются компьютеры операционными системами Linux и Windows, с 1Gb RAM или более (в дальнейшем, когда подключится больше людей, я сделаю программу менее требовательной к памяти, ценой немного более низкой производительности).

Программу я выложу в открытый доступ на условиях GNU GPL когда вернусь в Донецк. До страничек, иконок, красивых слайдов, скринсейвера, бегущих процентов (программа сейчас показывает либо 0% либо 100%, когда рассчет закончен) руки будут доходить тоже, скоре всего, на протяжении лета. Тем не менее, программа уже работает, и выложенная для расчета задача не тестовая, а вполне реальная (хоть, может, и не очень высокого полета, не уровня PRL, но реальная вполне).

[Crouni]

Сижу на http://distributed.org.ua/ добрался до 154 места по Украине =)

[Squee]

А чего так затормозил? За последние 2 недели - всего два сброса результатов?

[Squee]

12:52 18/08/2008

МОСКВА, 18 авг - РИА Новости.

Биохимики из университета Огайо создали на основе куркумы, одной из восточных пряностей, средство, которое может убивать раковые клетки, почти не нанося вреда здоровым, говорится в сообщении университета.
Глава исследовательской группы Джеймс Фукс (James Fuchs) представил разработку накануне встречи Американского химического общества в Филадельфии.
Куркума - растение из семейства имбирных. Из него получают одноименную пряность - порошок желтого цвета, который широко используется в индийской, азиатской, кавказской кухнях и традиционной медицине. Свидетельства о противораковых свойствах куркумина - красителя, который получают из куркумы, существовали и ранее. Однако это вещество плохо усваивается с пищей, не попадает в кровь и ткани и, следовательно, не может оказать серьезного лечебного действия.
Исследователи с помощью методов компьютерного моделирования создали из куркумина синтетические молекулы, которые способны помочь в лечении рака груди и рака простаты.
"Новейшие данные описывают, как куркумин взаимодействует с определенными белками, производя противораковую активность в теле. Мы... попытались усилить эти свойства", - говорит Фукс, слова которого приводятся в сообщении университета.
Ученые использовали относительно новый метод для разработки лекарств - компьютерное моделирование молекул. Прежде чем работать с веществом в лаборатории, биохимики исследуют взаимодействие молекул с помощью компьютерной симуляции, выбирая наилучшие типы реакций.
Биологи создавали вещества, обладающие лучшей структурой для взаимодействия с белками, которые связаны с активностью раковых клеток. Блокирование этих белков может приводить к гибели раковых клеток или прекращению распространения болезни.
Некоторые из наиболее эффективных веществ тестировались на токсичность как на раковых клетках человека, так и на здоровых. В результате было получено вещество в 100 раз более токсичное для раковых клеток, чем для здоровых. Это означает, что при его воздействии на ткани на каждые 100 погибших раковых клеток придется всего одна погибшая здоровая клетка.
Данные компьютерного моделирования показывают, что полученное биологами вещество может быть эффективно при лечении около 50% разновидностей рака груди и простаты.
В настоящее время ученые продолжают исследования для повышения эффективности полученных веществ, затем они намерены перейти к экспериментам на животных, а после этого - к клиническим испытаниям.

[Squee]

Моделирование эволюции Млечного Пути, проведённое американскими учёными на суперкомпьютере, показало, что значительная часть звёзд в нашей Галактике образовалась за тысячи световых лет от текущих круговых орбит. И Солнце – среди них.Ранее большинство астрофизиков полагало, что светила, возникшие в какой-то определённой части галактики, там же и остаются – вплоть до своей смерти.
Однако эта теория не могла объяснить, почему химический состав Солнца значительно отличается от состава ближайших к нему звёзд сопоставимого возраста. В частности, повышенным содержанием тяжёлых элементов, например железа.
Группа исследователей из Научного института космического телескопа (Space Telescope Science Institute) во главе с Роком Рошкаром (Rok Roškar) из университета Вашингтона (University of Washington) утверждает, что им удалось найти объяснение этому феномену.
Учёные провели моделирование эволюции галактического диска за последние 9 миллиардов лет – с момента, когда Млечный Путь существовал ещё в виде гигантского газопылевого облака, а спираль не сформировалась.
Полученные результаты подтвердили другую, не столь популярную гипотезу звездообразования, согласно которой существует радиальная миграция молодых звёзд – перемещение их на внешние или внутренние по отношению к текущему положению орбиты вследствие взаимного притяжения.
Симуляция показала, что такому воздействию могли подвергнуться около половины всех звёзд Млечного Пути. Авторы исследования полагают, что Солнце тоже было в их числе – именно это может объяснить "химическую аномалию".
Подробности — в журнале Astrophysical Journal Letters.

© MEMBRANA 2008.09.18 18:54

Схожей тематике посвящены два проекта распределенных вычислений: Milkyway@home и Cosmology@home.

Целью Milkyway@home является моделирование и определение путей эволюции галактики Млечный Путь.

В частности в этом проекте изучается вопрос слияния галактик на примере присоединения карликовой эллиптической галактики в созвездии Стрельца к Нашей Галактике Млечный Путь. Так как Наша Галактика во много раз больше, то она, посредством своей гравитации, растягивает и разрывает карликовую эллиптическую галактику и "втягивает" её в себя несколькими приливными потоками. Этот процесс будет длится несколько миллиардов лет. В очень примитивном виде раньше его можно было увидеть на сайте Wesleyan University, но после реорганизации сайта ролик остался только в памяти Internet Wayback Machine.
Изучение этого процесса имеет большое значение для прогнозирования вида Млечного Пути в далёком будущем. Кроме того изучение таких галактических слияний помогает оценить гравитационный потенциал Млечного Пути, который больше чем на 90% связан с так называемой "тёмной материей" и её распределением в Нашей Галактике. В далёком будущем Наша Галактика также станет "жертвой" такого слияния. Нас поглотит галактика М31 (Туманность Андромеды). Новой галактике,которая при этом образуется уже и название придумали - Млечномеда. Так что неплохо бы знать к чему готовиться ... Проект также может помочь построению модели распределения плотности пространства Вселенной.
Помимо слияния галактик в проекте изучается взаимодействие звёзд и спиральных рукавов Млечного Пути. Это поможет в моделировании будущего Нашей Галактики.
Если кому-нибудь кажется, что проект "не очень-то и насущен", напомню, что Земля, вместе с Солнечной системой, вращается вокруг галактического центра и во время своего вращения может проходить мимо других звёзд, туманностей и прочих галактических объектов. Существует много теорий, которые обьясняют исчезновение динозавров, ледниковые периоды, "обстрел" Земли астероидными и кометными дождями и прочие катастрофические события именно прохождением Солнечной системой в близи массивных звёзд или через пылевые туманности...
Ну и, наконец, некоторые ученые полагают, что наша солнечная система когда-то была частью этой карликовой галактики и была захвачена галактикой Млечный Путь в ходе исследуемого процесса.


На рисунке - звездная карта, показывающая процесс поглощения галактикой Млечный Путь (показана голубым цветом) карликовой галактики (красный цвет). Желтым кружком обозначено месторасположение нашей солнечной системы.

Проект использует данные специального 2,5 метрового телескопа Apache Point (USA).Там имеется огромное количество данных для изучения, которые непрерывно пополняются. Так что закончится проект явно не скоро.

Целью проекта Cosmology@home является поиск модели, которая лучше всего описывает нашу Вселенную, а также определение диапазона моделей, которые согласуются с современными астрономическими данными и данными физики элементарных частиц.
Для этого рассчитываются миллионы теоретических моделей Вселенной с различными комбинациями параметров. Каждый пакет работы моделирует Вселенную со специфической геометрией, определённым содержанием частиц, и "физикой начала", рассматривая каждую теоретическую вселенную с момента Большого Взрыва до наших дней.
Это позволит предсказать и объяснить наблюдаемые свойства Вселенной, такие как колебания в космическом микроволновом фоне (наблюдаемые спутником WMAP, а в скором будущем спутником "Макс Планк"), крупномасштабное распределение галактик и групп галактик во Вселенной, величину текущей скорости расширения Вселенной (по данным орбитального телескопа "Хаббл"), ускорение Вселенной по результатам измерений наблюдаемых взрывов сверхновых звёзд, распространённость различных химических элементов в удалённых газовых облаках.
Кроме этого проект должен способствовать достижению более глубокого понимания ранних стадий возникновения Вселенной, так называемых космических "тёмных веков" (когда первые звёзды ещё не зародились).
В ходе выполнения проекта также должны решаться задачи адаптации математики, статистики и расчёта применительно к космологии.

В качестве дополнительного стимула для участников проекта рассматривается вопрос о премии для владельца компьютера, который рассчитает модель максимально отвечающую нашей Вселенной по состоянию на 31 декабря 2008 года. Имя этого владельца будет записано в научной работе, которая выйдет в свет по окончанию проекта.

Команда BOINC@Odessa принимает участие в обоих проектах.

[Squee]

Первые результаты проекта SETI@Home
Среда, 01 Апрель 2009

Несмотря на недавние заверения российских астрономов что в ближайшие 15 лет внеземной разум не будет найден, американский космологический проект SETI@HOME (от англ. Search for Extra-Terrestrial Intelligence at Home — поиск внеземного разума на дому), занимающийся поиском сигналов внеземного разума, получил первые обнадёживающие (в обоих смыслах) результаты исследований.

Проект заключается в обработке данных радиотелескопа обсерватории Аресибо на предмет поиска сигналов, которые можно интерпретировать как искусственные. Данные, получаемые с облучателя радиотелескопа, записываются с высокой плотностью на магнитную ленту (заполняя примерно одну 35-гигабайтную DLT плёнку в день). При обработке данные с каждой ленты разбиваются на 33000 блоков по 1049600 байт, что составляет 1,7 с времени записи с телескопа. Затем, 48 блоков конвертируются в 256 заданий на расчёт, которые рассылаются не менее чем на 1024 компьютера участников проекта (одновременно одно задание обрабатывается не менее чем на 4-х компьютерах). После обработки результаты передаются компьютером участника проекта в Space Sciences Laboratory (SSL) Калифорнийского университета, Беркли (США), с помощью программного обеспечения BOINC.

В последние месяцы телескоп Аресибо направлял свой взор на ближайшую к нам планетную систему Проксима Центавра. Альфа Центавра — ближайшая к Солнцу звёздная система в созвездии Центавра. Состоит из трёх компонентов: тесная двойная система Альфа Центавра А и Альфа Центавра B и невидимый невооружённым глазом красный карлик Проксима Центавра. Последнюю звезду обычно рассматривают отдельно ввиду ее особых климатофизических свойств, а так же очень близкого (в галактических масштабах) расположения к Солнечной Системе - всего 4,22 световых года. Планеты, вращающиеся вокруг этой двойной звезды содержат в атмосфере крайне мало кислорода, поэтому там точно не может быть развита гуманоидная белково-жировая форма жизни, да и жизнь скорее всего протекает по другим физико-химическим законам. Учёные предполагают, что возможно существующие там формы жизни скорее всего имеют в своей основе не кислород, как на Земле, а углерод, железо или кремний.


Звездная система Центавра

Итак, компьютер участника Cory Workman (его имя вывешено на главной странице проекта) в блоке данных с телескопа Аресибо обнаружил среди белого шума осмысленную последовательность сигналов. Тройное преобразование Фурье над блоком сигналов выявило повторяющиеся участки данных. Дальнейший анализ этого сигнала на компьютерах других участников проекта подтвердил, что это была стартовая последовательность, после которой следовало само сообщение.


Неопознанные данные среди белого шума

Учитывая беспрецедентную важность полученных результатов для человечества, SETI@HOME использует очень большую избыточность по сравнению с другими проектами. Данный блок был перепроверен также на трех компьютерах других участников проекта, и правильность сигнала была подтверждена с вероятностью 99,942%.

Вот эта последовательность двоичных данных, переведенная в общепринятую ISO ASCII нотацию:
UZ3RvcBER391TIS91ciBnYWxheHksIHlvdSBzdHVwaWQgDcE6A JDvdGVpbi1iRyIkLdIfAgNqEesaWZlZm9ybSE=

Пока расшифровкой полученного сигнала занимаются специалисты по контактам с внеземными цивилизациями, военные ведомства G20 собирают внеочередное заседание по изучению возможных последствий контакта, а также гипотетической возможности обороны человечества от инопланетных атак. Правительства уверены что ничего подобного конечно не случится, поэтому пожалуйста не поддавайтесь беспричинной панике. Заседание проходит за закрытыми дверями, но предварительно было решено не предавать новость огласке, чтобы не вызвать панику среди мирного населения, а также враждебно настроенных антиинопланетных сообществ.

[glyph]

Вы меня, конечно, извините, но какой в этом прикол, кроме ощущения сопричастности к? Покрутил с месяц folding@home, как-то не проникся - крутилось на 5 серверах круглосуточно, без вмешательства, без проблем, короче, вообще без всего, реальный солиптический философ какой-то, вроде как и нет его. Ваше личное удовольствие в чем вообще?

[Squee]

Причины могут быть совершенно разными.
Для "спортсменов" - статистика, желание оказаться на первых строках.
Многие участвуют по идейным, личным причинам. Я знаю, например, что у многих украинских участников проекта folding@home кто-либо из родных умер от рака. Более того, я знаю об участниках подобных проектов, которые сами умерли от рака.
Мне интересна сама идея распределенных вычислений.
Когда-то я занимался математическим моделированием. На моей машине один расчет занимал больше суток. А делать их нужно было десятками. Еще можно было заказывать машинное время на большой машине. Но к тому времени ее мощность была сравнима с мощностью моей персоналки, да и оперативность была никакущая - заказ делался на неделю вперед, и не более, чем на час-полтора времени. И когда модель оказывалась ошибочной, приходилось ждать еще неделю, чтобы проверить новый вариант. Но были друзья с машинами, на которых расчет делался не сутки, а два-три часа - вполне достаточно, чтобы выпить пива. Потому что никаких компьютерных сетей тогда еще не было и задания я разносил и забирал лично, совмещая полезное с приятным.
Вот такой вот прообраз проекта РВ.
Так что я очень хорошо понимаю чувства людей, у которых появляется возможность получить для дальнейшей работы результаты не через полгода-год, а через неделю, максимум две.
И еще мне доставляет большое моральное удовлетворение то, что, благодаря моим усилиям, восьмичасовое раскладывание офисным планктоном пасьянсов может принести хоть какую-то реальную пользу. Пусть даже и не мне.

[glyph]

Причины могут быть совершенно разными.
Для "спортсменов" - статистика, желание оказаться на первых строках.
Многие участвуют по идейным, личным причинам. Я знаю, например, что у многих украинских участников проекта folding@home кто-либо из родных умер от рака. Более того, я знаю об участниках подобных проектов, которые сами умерли от рака.
Мне интересна сама идея распределенных вычислений.

Все мои знакомые распределенщики - именно "спортсмены". Я было грешным делом подумал, что они все такие, собирался громогласно заявить о профанации великих идей.

Распределенные вычисления - это интересно, совершенно согласен. Когда-то очень давно даже писал свой фреймворк, очень хотел john the ripper распараллелить, как раз работал админом в одной непыльной конторе с сетью из десятка персоналок.

[Squee]

Все мои знакомые распределенщики - именно "спортсмены". Я было грешным делом подумал, что они все такие, собирался громогласно заявить о профанации великих идей.

Не вижу в этом ничего плохого. Каждый участвует в меру своей заинтересованности и возможностей. В самом элементарном случае для этого необходимо только желание и полчаса времени: 20 минут для того, чтобы разобраться - что и как делать, и 10 минут - чтобы установить программу и подключиться к проекту(-ам).

Кто-то просто установил менеджер на личную машину и считает только во времы простоя компьютера. У кого-то несколько компьютеров, работающих над расчетами 24/7. Кто-то подключает компьютеры друзей. Кто-то, пользуясь правами хозяина, облегчает эту задачу другим:



А кто-то тратит деньги (иногда - очень большие деньги!) покупая "железо" и и придумывая сложные компьютерные "фермы" для расчетов.

Вот так:


Расчетный модуль на базе шести видеокарт (ASUS P6T6 WS Revolution Motherboard, Intel I7 920 CPU, 6 Gig DDR3 Memory, 6 9800GX2 dual GPU Video Cards)

Или даже вот так:






Стойка на базе 30 видеокарт 9800GX2 (и 10 процессоров, естественно)

За что же их упрекать? За то, что делая полезное дело, они хотят добиться широкой известности в узком круге энтузиастов РВ?