Причём в первых реализациях таких гибридных суперкомпьютеров могут потребоваться квантовые сопроцессоры на различных физических платформах для различных алгоритмов. К своим атомным бомбам, лазерам и плазме ядерный центр в Сарове добавил суперкомпьютер, работающий на новых физических принципах. Одним из предназначений суперкомпьютера российского Министерства обороны является моделирование и прогнозирование развития военных конфликтов. В России разработали первый в мире суперкомпьютер с «интуитивным» процессором на базе отечественной архитектуры «Леонард Эйлер» — он называется «Тераграф».
Суперкомпьютер МГУ поможет повысить уровень кибербезопасности
| О конференции | Суперкомпьютерные дни в России | В отличие от обычных компьютеров, суперкомпьютеры могут использовать продвинутые методы моделирования с высокой точностью прогноза. |
| В МГТУ им. Н. Э. Баумана разработали российский суперкомпьютер Тераграф | И о перспективах ближайших: Российская академия наук намерена вплотную приступить к созданию суперкомпьютера мощностью 1 петафлопс. |
| Сделано в России | В России действует и помогает решать серьёзные задачи один из самых мощных суперкомпьютеров в мире. |
| Суперкомпьютер Сколтеха войдет в десятку самых мощных в РФ | «Проскочило в новостях, что его мощность 400 петафлопс, и это был бы действительно второй-третий суперкомпьютер в мире по производительности, но это не так. |
| Путин поручил нарастить мощности суперкомпьютеров не менее чем на порядок | Математика в эпоху суперкомпьютеров. |
В России разработан первый в мире суперкомпьютер для цифрового «клонирования» людей и городов.
ФВМ могут быть востребованы в медицине, а также в других областях. Ранее сотрудники Курчатовского института создали двумерный материал для суперкомпьютеров. Им удалось объединить кремниевые технологии и спинтронику.
Здесь разрабатывались и внедрялись передовые вычислительные машины.
Московский университет и сегодня остается отечественным лидером в области современных вычислительных технологий. Ввод нового супервычислителя позволит конкурировать с мировыми лидерами, даст новый импульс для решения задач по разработке отечественного программного обеспечения, подготовке высококвалифицированных кадров в области суперкомпьютерных технологий и проведения научных исследований в области искусственного интеллекта». Компьютер с новой архитектурой, основанной на активном использовании графических процессоров, составит единый вычислительный кластер с суперкомпьютером «Ломоносов-2».
Суммарная производительность нового суперкомпьютера составит 400 AI Петафлопс. Архитектура компьютерной системы была «вдохновлена» передовыми образцами реализованных проектов суперкомпьютеров в лучших университетах мира, а используемые технологии основаны на практиках и существующих разработках ведущих производителей. Сеть обладает высокой надежностью и характеризуется минимальными задержками.
Регистрация Тематика Cуперкомпьютерные технологии во всем многообразии: параллельные и распределенные вычисления, высокопроизводительные программные и аппаратные решения, масштабируемые алгоритмы, большие данные, машинное обучение, суперкомпьютерное образование и многое другое. Важные даты Рабочие дни конференции и выставки 23 - 24 сентября 2024 г. Для авторов докладов 26 февраля 2024 г. Конференция пройдет в смешанном формате, предполагающем как очное участие, так и онлайн-трансляции и возможности заочного участия.
Это один из ключевых проектов вуза в рамках участия в программе «Приоритет 2030». Просмотров 865.
В России создан суперкомпьютер в 100 терафлопс
- Наши проекты
- Сейчас на главной
- Вот это прорыв: Россия попала в мировой топ самых мощных суперкомпьютеров
- В МГУ открыли новый суперкомпьютер, решающий задачи ИИ
Microsoft и OpenAI построят ИИ-суперкомпьютер Stargate за $100 миллиардов
Ну, чтобы создать самый мощный суперкомпьютер в России, нужно было всего лишь подольше не увозить новый айфон. Фотонный суперкомпьютер, создаваемый учеными Научно-исследовательского центра супер ЭВМ и нейрокомпьютеров в Таганроге в рамках научной программы НЦФМ, будет работать на частоте в 1 ТГц, или триллион герц. Составители авторитетного рейтинга суперкомпьютеров включили нашу страну в топ, причем Россия попала сразу на 19 место списка. Минпромторг решил вложить 7,6 млрд руб. в создание российского суперкомпьютера на базе российской архитектуры NeuroMatrix, разработанной АО НТЦ «Модуль». Президент РФ Владимир Путин поручил правительству разработать и реализовать комплекс мер, направленный на увеличение вычислительных мощностей суперкомпьютеров в России. В России создают суперкомпьютер, работающий на частоте 1 трлн герц.
В России создан уникальный мобильный суперкомпьютер
Сеть «Ангара» успешно решает эти задачи, позволяя сравнительно дешево и в сжатые сроки формировать суперкомпьютеры на основе отдельных вычислительных узлов. Его вычислительные мощности оказались настолько востребованы учеными, что было принято решение о создании «младшего брата» этого суперкомпьютера уже на базе нового поколения коммутационной сети. Его производительность рассчитана под конкретные задачи, но при необходимости возможности «Фишера» могут быть существенно расширены», — отметил исполнительный директор Госкорпорации Ростех Олег Евтушенко. Суперкомпьютер «Фишер» состоит из 24 вычислительных узлов с 16-ядерными процессорами.
На «Зеленодольском заводе» спущено на воду два лоцмейстерских судна для Севморпути. Впервые в России проведено одновременное эндопротезирование двух коленных суставов с помощью робота. Пензенский станкостроительный завод открыл третий производственный корпус. В Кабардино-Балкарии открыто пищевое производство. Ещё одно — в Ставропольском крае. В Калужской области — молочная ферма. В Ингушетии — новый птицекомплекс.
Российские школьники взяли две золотые и две серебряные медали на Международной географической олимпиаде. Наша система Компьютер всего лишь обрабатывает поступающую к нему информацию и строит прогнозы. Поэтому важно, как устроена сама система сбора информации. Какие бы мощности ни лежали в основе суперкомпьютера, если он получает неверные, неполные и несвоевременные данные, то он бесполезен. Пример фиаско американцев в Афганистане — яркое тому подтверждение: Пентагон годами получал с мест искажённую информацию, преувеличивающую боеспособность афганской армии и преуменьшающую силу их противников. Это и не только говорит о том, что американская система управления не функциональна, и даже кратный рост вычислительной мощности машин дело не исправит. В России т. Широко внедряться в войска она начала с 2005 года на среднем оперативно-тактическом уровне. В 2014 году у неё появился и стратегический уровень, известный нам как Национальный центр управления обороной. Успешно функционирует система и на тактическом звене.
Всё это вместе позволяет снабжать наш суперкомпьютер всесторонней и качественной информацией, а уж людям принимать на её основе решения. Практика доказала, что схема работает.
Провести физический эксперимент и смоделировать климат на ближайшие 50 лет не представляется возможным. Зато вполне реально это сделать с помощью вычислительного эксперимента. Ломоносова был самым мощным в России, вокруг него формировалось национальное вычислительное сообщество. Сегодня ситуация изменилась. В Научно-исследовательском вычислительном центре МГУ мы ведем рейтинг 50 самых мощных суперкомпьютеров России.
Посмотрев списки на top50. Мы все, ученые и ИТ-специалисты, кто так или иначе вовлечен в деятельность с применением возможностей суперкомпьютеров, понимаем, что для повышения их производительности необходимы новые технологии. Современные технологии уже близки к пределу, который определен законом Мура, нужно переходить к иным принципам построения электроники. Такие варианты в нашем научном сообществе рассматриваются. Например, построение квантового компьютера, который основан на внутреннем параллелизме, двойственной природе квантового мира. Квантовый компьютер имеет огромную степень параллельности, и отдельные алгоритмы будут просчитываться быстро. Но для этого компьютера и алгоритмы должны проектироваться специальным образом, чтобы соответствовать архитектуре.
Фотонные вычислительные машины также имеют свои особенности. Они разрабатываются на основе оптики, процесс вычисления идет благодаря взаимодействию световых импульсов лазерного излучения, которыми представлена информация. Такой специальный вычислитель будет быстро решать задачи определенного класса. В частности, то, что связано с линейной алгеброй, на фотонных устройствах будет считаться очень быстро.
ФВМ могут быть востребованы в медицине, а также в других областях. Ранее сотрудники Курчатовского института создали двумерный материал для суперкомпьютеров. Им удалось объединить кремниевые технологии и спинтронику.
В России разработан первый в мире суперкомпьютер для цифрового «клонирования» людей и городов.
Например, самый мощный суперкомпьютер в России «Червоненкис» за полгода (с июля по ноябрь) опустился в мировом рейтинге на 3 пункта (еще в июле 2022 года он занимал 22 место). Минпромторг решил вложить 7,6 млрд руб. в создание российского суперкомпьютера на базе российской архитектуры NeuroMatrix, разработанной АО НТЦ «Модуль». Сегодня специалисты в мире работают над увеличением производительности суперкомпьютеров, создавая высокопроизводительные вычислительные машины на новых физических принципах. Посмотрев списки на , можно сравнить состояние отрасли суперкомпьютеров в России и в мире.
Один из самых мощных суперкомпьютеров в России работает в СевГУ
К своим атомным бомбам, лазерам и плазме ядерный центр в Сарове добавил суперкомпьютер, работающий на новых физических принципах. На сегодняшний день в России всего семь суперкомпьютеров из мирового списка топ-500. Курчатовский вычислительный комплекс входит в число самых мощных суперкомпьютеров в России и является объединяющим звеном цепочки.
В МГУ открыли новый суперкомпьютер, решающий задачи ИИ
Как объясняет специалист-исследователь в области машинного обучения компании «Криптонит» Георгий Поляков, графы — это совокупность объектов и связей между ними на основе параметров этих объектов. В математике объекты называются вершинами, а связи между ними — ребрами. Например, схема перелетов авиакомпании между городами — это граф. В качестве вершин выступают аэропорты в городах, а в качестве ребер — факт наличия прямого авиационного маршрута между городами», — сказал Поляков. Заместитель генерального директора по науке и развитию компании ИВК, кандидат физических и математических наук Валерий Андреев добавил, что вычисления с использованием графов позволяют делать качественные прогнозы относительно тех или иных объектов в сложных системах: будь то человек и влияние лекарств на его здоровье, или зерно и влияние его цены на стоимость металлов. Например, о том, как связаны между собой несколько людей, о том, как одни банковские транзакции отразились на динамике других и т. Построение жестких связей между объектами и их параметрами позволяют сделать качественный прогноз. Это ценная возможность для любой области деятельности — от банковской сферы и оптовой торговли до криминалистики», — сказал Андреев.
Алексей Попов, генеральный конструктор проекта, говорит, что особенность работы «Тераграфа» c графами в долгосрочной перспективе позволит создавать цифровые двойники людей и проводить на них эксперименты с разными курсами лечения, чтобы подобрать самый эффективный. Процессор, анализируя исходные данные, будет предлагать для курса лечения разные решения. Это свойство устройства он называет «интуицией». В программе можно проследить влияние разных препаратов на них, не подвергая опасности пациента. Подобрав оптимальное решение в программе, лечение можно применить к человеку», — сказал Попов. На чем сделан компьютер «Тераграф» представляет собой систему на базе центрального процессора Intel под управлением Linux, к которой подключены три вспомогательных вычислительных модуля — процессоры «Леонард Эйлер». Последние визуально выглядят как видеокарты, подключенные к материнской плате.
Помимо прочего новая инициатива предполагает разработку программы по созданию и закупке комплектующих, а также созданию суперкомпьютеров на территории России. Также суперкомпьютер включает 1152 процессора Intel Xeon Platinum 8480C, каждый из которых предлагает 56 ядер. Источник изображения: nvidia. Компания анонсировала его почти год назад и рассказывала подробнее о нём на выставке Supercomputing 2023 в ноябре минувшего года — теперь он готов начать работу. Разработчик отмечает, что Eos способен справиться с самыми большими рабочими нагрузками в области ИИ для обучения больших языковых моделей, рекомендательных алгоритмов, квантового моделирования и многого другого. Суперкомпьютер занимает девятое место в рейтинге TOP500.
В то время как корпорации и разработчики по всему миру стремятся задействовать возможности ИИ, Eos становится основным ресурсом, который обещает ускорить путь к приложениям на базе ИИ для каждой организации», — отметила NVIDIA. Производитель обещает, что новинка обеспечит выдающийся уровень производительности и сможет потягаться с самыми мощными ускорителями вычислений NVIDIA. Источник изображения: Tachyum Разработчик заявляет, что её 192-ядерный чип, выполненный на основе 5-нм технологического процесса, обеспечивает в 4,5 раза более высокую производительность, чем любой другой процессор, предназначенный для вычислительных нагрузок в облачной среде. Кроме того, он до трёх раз быстрее любого GPU, предназначенного для высокопроизводительных вычислений и до шести раз энергетически эффективнее специализированных GPU для ИИ-задач. Tachyum анонсировала чип Prodigy Universal Processor в 2022 году и пообещала с его помощью трансформировать узкоспециализированные ЦОДы в универсальные компьютерные центры, способные обеспечить необходимую вычислительную мощность и эффективность для различных ИИ-нагрузок. В декабре 2023 года компания выпустила видео, показывающее способность Prodigy эмулировать работу в x86-совместимых приложениях.
Однако есть одно существенное «но»: несмотря на внушительные цифры производительности и заявления Tachyum, процессоры Prodigy существуют только на бумаге и в виде эмулируемой с помощью FPGA платформы с небольшим количеством ядер. Мы с нетерпением ждём возможности выполнить наше обещание и обязательство по преобразованию обычных центров обработки данных в универсальные вычислительные центры в ближайшем будущем», — заявил генеральный директор и основатель Tachyum Радослав Данилак Radoslav Danilak. Поскольку в составе Prodigy Universal Processor используются функциональные компоненты, предназначенные для разных типов нагрузок, он может динамически переключаться между вычислительными кластерами, исключая необходимость в использовании разнонаправленного и дорогостоящего аппаратного обеспечения для отдельных типов ИИ-нагрузок в составе вычислительной системы. По крайней мере, так говорится в свежем пресс-релизе компании. Компания заявила, что стоимость такого количества графических процессоров в составе семи серверов Supermicro GPU составит 2 349 028 долларов или в 100 раз больше, чем одна система с Prodigy Universal Processor и 2 Тбайт оперативной памяти DDR5. Tachyum также заявила, что уже планирует разработку более передового универсального процессора Prodigy 2 на базе 3-нм техпроцесса, который получит поддержку интерфейсов PCIe 6.
Его планируется выпустить где-то в 2026 году. Источник изображения: westernsydney. Но ему требуются колоссальные вычислительные мощности, и при сохранении нынешней тенденции, когда NVIDIA является единственным поставщиком ИИ-ускорителей, отрасль рискует выйти на энергопотребление, сравнимое с нуждами небольших стран. При этом человеческий мозг так и остаётся самым совершенным компьютером, потребляющим всего 20 Вт энергии. Это побудило учёных из Университета Западного Сиднея Австралия запустить проект по созданию нейроморфного суперкомпьютера DeepSouth — первой в мире машины, моделирующей импульсные нейронные сети в масштабах человеческого мозга. Смоделированные импульсные нейросети на стандартных компьютерах с использованием графических GPU и многоядерных центральных процессоров CPU слишком медленны и энергоёмки.
Наша система это изменит. Как ожидается, DeepSouth будет запущен в апреле 2024 года. Он сможет обрабатывать большие объёмы данных с высокой скоростью, оставаясь меньше других суперкомпьютеров и потребляя гораздо меньше энергии благодаря архитектуре импульсной нейронной сети, говорят учёные. Система является модульной и масштабируемой — она содержит доступное на рынке оборудование, а значит, в будущем её можно будет расширять или, напротив, сокращать для решения конкретных задач. Цель проекта — приблизить системы ИИ к механизмам работы человеческого мозга, изучить механизмы работы мозга и при благополучном исходе добиться успехов, актуальных в других областях. Примечательно, что другие исследователи подошли к той же проблеме с диаметрально противоположной стороны: недавно американские учёные вырастили ткань человеческого мозга, подключили её к компьютеру и добились впечатляющих результатов.
Суперкомпьютер Dojo разрабатывается для обработки больших массивов данных для обучения автопилота для электромобилей Tesla. Источник изображения: Tesla Венкатараманан, возглавлявший проект Dojo в течение последних пяти лет, уволился из компании в прошлом месяце. Питер Бэннон прежде занимал руководящую должность в Apple, а также работал в других технологических компаниях. До нового назначения в Tesla он в течение последних семи лет также занимал руководящие должности. Суперкомпьютер Dojo предназначен для обработки огромных массивов данных, включая видеофайлы, получаемые с камер автомобилей Tesla. Данные необходимы для обучения специализированного программного обеспечения для автономного вождения.
Устройство назвали в честь первого клиента Сберкассы Николая Кристофари. С 12 декабря его смогут арендовать сторонние компании, стоимость минуты использования составит 5750 рублей. Суперкомпьютер разработали SberCloud и компания Nvidia. Производительность устройства достигает 6,7 петафлопс. Для сравнения, производительность самого мощного суперкомпьютера в мире корпорации IBM составляет 200 петафлопс.
На нем проводятся исследования в области наносистем и новых материалов, информационно-телекоммуникационных систем, энергетики и др. Мощность: Lomonosov-2 241 место — 2,478 Пф. МТС использует суперкомпьютер для развития собственной цифровой экосистемы и искусственного интеллекта. В компании уверены, что система сможет ускорить создание продуктов в области машинного зрения и промышленной аналитики, обработки естественного языка, интеллектуального видеонаблюдения, а также будет полезна в вузах и научных центрах. Мощность: Grom 294 место — 2,258 Пф.
Почему развитие суперкомпьютеров важно? Введение новых машин «Яндекса» в несколько раз улучшило показатели вычислительной мощности России, отмечает сокоординатор Национальной суперкомпьютерной технологической платформы Сергей Абрамов. Тем не менее говорить о полноценной государственной суперкомпьютерной инфраструктуре пока нельзя, так как большинство машин принадлежит компаниям, и работают они в коммерческих интересах, отмечает Абрамов. Эксперты уверены , что технология продолжит стремительно развиваться: в 1994 году суперкомпьютер работал с такой же скоростью, как современный смартфон сегодня. С годами производительность суперкомпьютеров будет только увеличиваться, а размеры, напротив, уменьшаться.
По мнению специалистов, в будущем суперкомпьютеры отойдут от симуляций в пользу глубокой аналитики и будут разрабатывать бесконечные аккумуляторы и лекарства от неизлечимых болезней.
Первый суперкомпьютер с «интуицией» создали в России. Как он работает и на что способен
Реклама Наивысшая производительность фотонного процессора достигает 50 петафлопсов, а пиковая мощность такого процессора составляет только лишь 100 ватт. При этом производительность ФВМ можно резко повысить, уменьшая длину световой волны. ФВМ могут быть востребованы в медицине, а также в других областях.
Таким образом, новый суперкомпьютер должен стать третьим по мощности в России и войти в мировой топ-500, сообщает C-News.
Упомянутый 1 Пфлопс — это планируемая пиковая производительность системы, ее реальная мощность будет установлена в ходе тестирования. Суперкомпьютер состоит из двух частей. Первая часть сформирована из модулей, которые были созданы российской компанией РСК на базе процессоров Intel.
В модулях используется жидкостное, а не воздушное охлаждение, что позволяет системе работать интенсивнее за счет более эффективного отвода тепла. В суперкомпьютере использованы две модели процессоров Intel — всего насчитывается 40 серверов по два процессора Intel Skylake и 20 серверов с Intel Xeon Phi, отмечает ученый секретарь ЛИТ Дмитрий Подгайный. В случае, если ЛИТ решит увеличить количество модулей, сделать это будет возможно, поскольку место для дополнительных модулей есть, отмечает инженер ЛИТ Алексей Воронцов.
Монтажом инфраструктуры для суперкомпьютера занимается РСК. Вторая часть суперкомпьютера состоит из графических процессоров Nvidia Volta. По словам директора ЛИТ Владимира Коренькова, с помощью этой части системы будут решаться задачи, связанные с искусственным интеллектом и машинным обучением.
По мнению Дмитрия Подгайного, уникальность нового суперкомпьютера в том, что это гетерогенная система, в то время как в мире преимущественно используются гомогенные, то есть состоящие только из центральных процессоров без ускорителей или из процессоров с ускорителями, но одного вида.
Построение жестких связей между объектами и их параметрами позволяют сделать качественный прогноз. Это ценная возможность для любой области деятельности — от банковской сферы и оптовой торговли до криминалистики. Валерий Андреев заместитель гендиректора по науке и развитию компании ИВК, кандидат физических и математических наук Источник фото: Pixabay По словам генерального конструктора проекта, в долгосрочной перспективе такая особенность суперкомпьютера позволит создать цифрового двойника человека, чтобы проводить на нем эксперименты с разными курсами лечения. То есть процессор «Тераграфа» будет предлагать разные решения для решения проблемы — это свойство можно назвать «интуицией», добавил Попов. Представьте, что у вас на компьютере отображаются разные параметры человеческого организма. В программе можно проследить влияние разных препаратов на них, не подвергая опасности пациента. Подобрав оптимальное решение в программе, лечение можно применить к человеку. Алексей Попов генеральный конструктор проекта Из чего сделан «Тераграф» «Тераграф» является системой на базе центрального процессора Intel под управлением Linux, к которой подключены три вспомогательных вычислительных модуля — процессоры «Леонард Эйлер» — они выглядят как видеокарты, подключенные к материнской плате.
Попов отметил, что для их создания были использованы пустые «болванки» чипов AMD, на которые записали инструкции архитектуры как прошивку, а также ПЛИСы программируемые логические интегральные схемы. Процессоры работают по уникальным алгоритмам, созданным российскими учеными, без них чип нельзя назвать процессором. При необходимости можно создать и российский чип, но пока такой задачи не стоит. Каждый модуль «Леонард Эйлер» имеет 24 ядра с тактовой частотой в 200 МГц.
Заместитель генерального директора по науке и развитию компании ИВК, кандидат физических и математических наук Валерий Андреев добавил, что вычисления с использованием графов позволяют делать качественные прогнозы относительно тех или иных объектов в сложных системах: будь то человек и влияние лекарств на его здоровье, или зерно и влияние его цены на стоимость металлов. Например, о том, как связаны между собой несколько людей, о том, как одни банковские транзакции отразились на динамике других и т. Построение жестких связей между объектами и их параметрами позволяют сделать качественный прогноз. Это ценная возможность для любой области деятельности — от банковской сферы и оптовой торговли до криминалистики», — сказал Андреев. Алексей Попов, генеральный конструктор проекта, говорит, что особенность работы «Тераграфа» c графами в долгосрочной перспективе позволит создавать цифровые двойники людей и проводить на них эксперименты с разными курсами лечения, чтобы подобрать самый эффективный. Процессор, анализируя исходные данные, будет предлагать для курса лечения разные решения.
Это свойство устройства он называет «интуицией». В программе можно проследить влияние разных препаратов на них, не подвергая опасности пациента. Подобрав оптимальное решение в программе, лечение можно применить к человеку», — сказал Попов. На чем сделан компьютер «Тераграф» представляет собой систему на базе центрального процессора Intel под управлением Linux, к которой подключены три вспомогательных вычислительных модуля — процессоры «Леонард Эйлер». Последние визуально выглядят как видеокарты, подключенные к материнской плате. Ru»], пустые «болванки» чипов AMD, на которые мы записали инструкции нашей архитектуры как прошивку», — говорит Попов. Он уточняет, что на уровне железа процессоры университета имени Баумана основаны на чипах AMD, однако работают по уникальным алгоритмам, созданным российскими учеными. Чип без таких алгоритмов нельзя называть процессором. Процессором его делает низкоуровневое ПО, в качестве которого выступает архитектура «Леонард Эйлер».
Сбербанк сообщил о создании мощнейшего суперкомпьютера в России
| В Новосибирске запустили мощный суперкомпьютер - | Интересные новости о суперкомпьютерах и ИИ. |
| Созданный в МГУ суперкомпьютер вернет России лидерство в этой сфере - Российская газета | В рейтинге Тор500 самых мощных мировых суперкомпьютеров проект «Яндекс» под названием «Червоненкис» занял 19 место в общемировом зачёте, и, таким образом, стал самым мощным решением в России и Восточной Европе. |
| Топ суперкомпьютеров России | 1 сентября в МГУ открыт новый суперкомпьютер, который поможет в проведении научных исследований в области ИИ, решении задач по разработке отечественного ПО и подготовке высококвалифицированных специалистов. |
| Самый мощный суперкомпьютер в России (Влад Лесной) / Проза.ру | Президент России Владимир Путин поручил российскому правительству проработать меры, направленные на наращивание вычислительных мощностей суперкомпьютеров в стране. |
В России разработан первый в мире суперкомпьютер для цифрового «клонирования» людей и городов.
На сегодняшний день в России всего семь суперкомпьютеров из мирового списка топ-500. По количеству суперкомпьютеров в Top-500 Россия вышла на 9 место в мире — в РФ столько же систем, сколько в Южной Корее. Другие интересные новости читайте в нашем Telegram-канале. Президент России Владимир Путин заявил, что в стране необходимо многократно увеличить мощности суперкомпьютеров.
В МГУ открыли новый суперкомпьютер, решающий задачи ИИ
Московский университет и сегодня остается отечественным лидером в области современных вычислительных технологий. Ввод нового супервычислителя позволит конкурировать с мировыми лидерами, даст новый импульс для решения задач по разработке отечественного программного обеспечения, подготовке высококвалифицированных кадров в области суперкомпьютерных технологий и проведения научных исследований в области искусственного интеллекта». Компьютер с новой архитектурой, основанной на активном использовании графических процессоров, составит единый вычислительный кластер с суперкомпьютером «Ломоносов-2». Суммарная производительность нового суперкомпьютера составит 400 AI Петафлопс. Архитектура компьютерной системы была «вдохновлена» передовыми образцами реализованных проектов суперкомпьютеров в лучших университетах мира, а используемые технологии основаны на практиках и существующих разработках ведущих производителей. Сеть обладает высокой надежностью и характеризуется минимальными задержками. Сеть хранения имеет аналогичные показатели.
Задач всегда больше возможности вычислений», - добавляет Николай Суетин. По одежке протягивать ножки Вопрос в том, сможет ли Сколтех содержать одну из самых мощных машин в стране. В 2016 году бразильцы закупили во Франции суперкомпьютер производительностью 1,1 петафлопс. Но едва машина начала работать, ее пришлось остановить: оказалось, что дата-центру просто не по карману оплачивать счета за электричество. Энергии вполне хватит для реализации с помощью суперкомпьютера тех практических задач, которые ставит перед собой наш инженерный университет Сколтех». Во-первых, энергоэффективность суперкомпьютера в 2016-м и в 2018-м годах — это разные вещи. Ну, и во-вторых, предварительные расчеты показывают, что эксплуатация большого суперкомпьютера Сколтеха сможет выйти на безубыточность: «Все наши проекты ориентированы на создание новых технологий, на взаимодействие с индустрией, поэтому уж затраты на электричество мы точно окупим. Я перешел в Сколтех из Глазго, где был директором вычислительного центра Западной Шотландии. У нас было несколько сотен пользователей, которые за несколько лет получили грантов и контрактов на сумму в двадцать с лишним раз большую, чем изначальные вложения в суперкомпьютерную инфраструктуру. Мы работали в консорциуме с пятью университетами и десятками компаний, и электричество окупали. Думаю, то же самое будет и здесь. Идея заключается в том, что мы активно взаимодействуем с компаниями, как внутри периметра «Сколково» — это наш первый приоритет, - так и за его пределами», - комментирует он. При этом Максим Федоров не склонен абсолютизировать возможности суперкомпьютера. По его мнению, человечество еще бесконечно далеко от создания машины, которая приблизилась бы по интеллектуальным способностям к мозгу человека. Полуслепой Кеплер смог на основании наблюдений Тихо Браге вывести законы движения планет, которых сам никогда не видел. В этом отношении возможности машины не превышают способностей насекомого, правда, — «очень специализированного насекомого», как выражается профессор. Такого, например, как стрекоза. До сих пор непонятно, как стрекозам удается достигать такой точности перехвата более 95 процентов при небольшом объеме мозга. Эволюция этого вида насекомых привела к созданию уникальной комбинации эффективного зрительного аппарата большие фасеточные глаза и специализированного «бортового компьютера» мозг стрекозы управляющего полетом стрекозы и предугадывающим движения ее добычи; современные технологии еще далеки от такого совершенства. Вообще насекомые — специалисты, они свои задачи выполняют очень хорошо. Только сейчас мы начинаем понимать механизмы полета насекомых. Посмотрите, насколько мало они тратят энергии на достаточно дальние пролеты! Если бы мы могли достигать такой же энергоэффективности, как у насекомого, у нас давно бы уже летали микродроны в огромном количестве; но пока нам о такой энергоэффективности остается только мечтать. Более того, до самого последнего времени загадкой являлось то, как многим насекомым например, шмелям вообще удается отрываться от земли: маленькие крылышки, небольшие мускулы… А все дело в том что у них крылья движутся по весьма нелинейной траектории, которая позволяет увеличить подъемную силу крыла по сравнению с прямым махом почти на порядок. И опять здесь большую роль играет «бортовой компьютер» насекомого, его мозг, который адаптивно рассчитывает требуемую траекторию взмаха крыла с потрясающей быстротой порядка миллисекунды. Так что нам есть еще чему поучиться у насекомых в плане специализированных вычислений и создания автоматизированных систем управления …» «Всё — яд, и всё — лекарство» Мощный суперкомпьютер нужен, чтобы заглянуть туда, куда иначе заглянуть невозможно, утверждает профессор Федоров: «Мы знаем о недрах Земли меньше, чем мы знаем о космосе. А все потому, что пока? Нашим «телескопом» является математическое моделирование. То же касается и глубин океанов. Директор Центра Сколтеха по научным и инженерным вычислительным технологиям для задач с большими массивами данных Максим Федоров. И то же можно сказать о различных исторических событиях. Например, когда в Глазго я заведовал суперкомпьютерным центром, мы участвовали в проекте Школы Искусств Глазго по детальной реконструкции известной битвы англичан и шотландцев при Бэннокбёрне 1314 года. Сейчас детальная компьютерная анимация этой битвы, созданная с помощью нашего суперкомпьютера, является частью экспозиции в историческом музее, расположенном неподалеку от места событий. В ходе проекта выяснилось, что решения, которые принимал вождь шотландцев во время сражения, были единственно верными; не получилось найти другой стратегии, которая привела бы к победе, - это к вопросу о мощи человеческого интеллекта. С помощью суперкомпьютера можно реконструировать исторические события, исторические здания — как они выглядели пятьсот, тысячу лет назад. Можно реконструировать всевозможные тектонические явления». Это, прежде всего, нефтегазовая область, в частности решение обратных задач сейсмологии — фактически, разведка полезных ископаемых здесь как раз уместна аналогия с телескопом, позволяющим заглянуть внутрь Земли.
В связи с этим мы приняли решение временно приостановить публикацию новых редакций рейтинга. При этом все сервисы продолжат работать, в т. Более того, мы просим всех держателей систем, входивших в список, присылать данные о любых изменениях, как если бы списки публиковались.
В общем, именно трансформеры сейчас определяют качество основных продуктов Яндекса. Если вам интересны детали, коллеги уже рассказывали на Хабре о внедрении этой архитектуры в нашем поиске. Но проблема была в том, что обучение таких моделей требует огромных вычислительных мощностей. Например, если обучать модель с нуля на обычном сервере, на это потребуется 40 лет, а если на одном GPU-ускорителе V100 — 10 лет. Но хорошая новость в том, что задача обучения легко параллелится, и если задействовать хотя бы 256 тех же самых V100, соединить их быстрым интерконнектом, то задачу можно решить всего за две недели. Сейчас мы такую задачу можем решить за несколько часов, но об этом позже. Мы попробовали собрать «нулевой» кластер буквально из того, что было под рукой. Результаты замеров показали низкий КПД масштабирования. В попытках понять причину придумали методику оценки, которая не требовала глубокого понимания алгоритма работы конкретного обучения. Достаточно построить график потребления энергии и обмена трафиком в одном масштабе. Обучение идет повторяющимися итерациями: 1. Каждый GPU получает свой batch и обсчитывает его синяя ступенька 2. Затем GPU обменивается по сети с соседями посчитанными результатами зелёная ступенька 3. GOTO 1 На графике сразу же виден корень проблемы. Не самый эффективный способ использовать железо, согласитесь. Эксперименты на таком кластере проводить можно, но считать что-то серьёзное — нереально. Поэтому стали собирать новое решение, «расшивая» все узкие места интерконнекта. Попутно столкнулись и с другими сложностями. Яндекс, в свою очередь, уже много лет живёт в дата-центрах IPv6-only. Фиксы, кстати, выкладываем в опенсорс. Первые кластеры Первый мини-кластер GPU, созданный специально под задачи применения трансформеров c учётом описанных выше узких мест, появился у нас во владимирском дата-центре летом 2020 года. В кластере было 62 узла по 8 GPU в каждом — всего 496 видеокарт. Казалось бы, сотни видеокарт! Но этого по-прежнему было мало для наших задач, хотя кластер и помог нам начать внедрять трансформеры для улучшения Поиска. Затем в другом нашем ДЦ, в городе Сасово в Рязанской области, появился первый большой кластер. Мы назвали его в честь Алексея Ляпунова — знаменитого математика, чьи работы лежат в основе кибернетики и теории машинного обучения. Пришлось искать причины и оптимизировать. Коллеги из локального офиса NVIDIA посоветовали потратить ещё несколько дней на замеры производительности, чтобы зарегистрировать кластер в списке Top500. Но в тот момент мы от этого отказались: торопились отдать кластер нашим ML-инженерам, чтобы загрузить его работой уже на новогодние праздники. Тем более, что тогда мы ещё не осознавали никакой практической пользы от замеров. Логично было распространить этот опыт и на GPU. Для размещения кластеров выбрали недавно переданные в эксплуатацию модули в дата-центрах Сасово и Владимира. Сами кластеры назвали соответственно «Червоненкис» в честь Алексея Червоненкиса, одного из крупнейших теоретиков машинного обучения и «Галушкин» Александр Галушкин — один из главных исследователей теории нейронных сетей. Размер обусловлен встроенной системой охлаждения. Они связывают GPU для вычислений. Это продиктовано энергопотреблением — до 20 кВт. Cloud, но об этом поговорим в другой раз. Обратите внимание на отсутствие любых декоративных пластиковых элементов. Зато есть много свободного места, чтобы воздух мог обдувать огромные радиаторы GPU в центре, именно за счёт этого получается экономить электричество на охлаждении. В кластере 199 серверов с GPU — такое количество обусловлено экономической целесообразностью сборки ядра Infiniband по стандартной схеме на 800 портов с использованием 40-портовых 1U HDR-коммутаторов. Двухсотый сервер не имеет GPU в своем составе и используется для управления сетью Infiniband. Это позволило создавать кластеры в два раза большего размера по сравнению с коробочным решением SuperPod. Например, вот так выглядят типичные итерации обучения. О г—Замеры После успешного решения этих и других проблем мы наконец-то получили заветное линейное масштабирование на 152 хостах, доступных на тот момент. Получилось 15,2 петафлопса. Но была одна проблема: пока мы настраивали кластер, закрылось окно подачи в июньский рейтинг.