Национальная вычислительная инфраструктура
Национальная вычислительная инфраструктура (также известная как NCI или NCI Australia ) — это высокопроизводительный вычислительный и сервисный центр данных, расположенный в Австралийском национальном университете (ANU) в Канберре , Австралийская столичная территория . NCI поддерживается Национальной стратегией совместной исследовательской инфраструктуры правительства Австралии (NCRIS), с операционным финансированием, предоставляемым через официальное сотрудничество, включающее CSIRO , Бюро метеорологии , Австралийский национальный университет , Geoscience Australia , Австралийский исследовательский совет и ряд университетов с интенсивной исследовательской деятельностью и медицинских научно-исследовательских институтов. [ необходима ссылка ]
Доступ к вычислительным ресурсам предоставляется финансирующим партнерам, а также исследователям, получившим гранты в рамках Национальной схемы распределения вычислительных заслуг (NCMAS). [1] [2]
Нынешний директор — Шон Смит . [3] [4]
Известный персонал
- Линдси Боттен - бывший директор [5]
- Крис Пиграм — бывший генеральный директор Geoscience Australia и исполняющий обязанности директора после выхода на пенсию Линдси Боттен. [3]
- Шон Смит – нынешний директор [3]
Средство
Здание NCI расположено на территории кампуса ANU в Канберре и использует изоляцию горячих коридоров и естественное охлаждение для охлаждения своих компьютеров. [2]
Компьютерные системы
По состоянию на июнь 2020 года NCI эксплуатирует две основные высокопроизводительные вычислительные установки, в том числе:
- Gadi , что означает «искать» на местном языке Нгуннавал . [6] 9,26-петафлопсный высокопроизводительный кластер распределенной памяти, состоящий из: [4]
- 145 152 ядра (процессоры Intel Xeon Scalable «Cascade Lake») на 3024 узлах
- 160 узлов, содержащих четыре графических процессора Nvidia V100
- 567 Терабайт основной памяти
- 20 Петабайт быстрого хранилища
- 47 Петабайт хранилища для больших файлов данных
- 50 Петабайт ленточного хранилища для архивации
- HDR Mellanox Infiniband в топологии Dragonfly+ (скорость передачи до 200 Гбит/с)
- Tenjin — это специально разработанное высокопроизводительное партнерское облако с производительностью 67 терафлопс, состоящее из:
- 1600 ядер Intel Xeon Sandy Bridge
- 25 Терабайт основной памяти
- 160-терабайтный государственный диск
Услуги передачи данных и хранение данных
NCI использует самые быстрые файловые системы в Южном полушарии. 20 петабайт хранилища доступны для быстрого ввода-вывода, 47 петабайт доступны для больших файлов данных и исследований, а 50 петабайт доступны на ленте для архивирования.
Наборы данных
NCI размещает несколько наборов данных, которые могут использоваться в его вычислительных системах, включая:
- Архив данных об аборигенах и жителях островов Торресова пролива (ATSIDA), который предоставляет данные исследований коренных народов Австралии [7]
- Австралийский репозиторий оптических астрономических данных (ODR), включая:
- Текущие и избранные исторические наборы данных Англо-австралийского телескопа (AAT) [8]
- Обзор южного неба с использованием роботизированного телескопа SkyMapper Австралийского национального университета в обсерватории Маунт-Стромло [8]
- Австралийская национальная геофизическая коллекция (300 ТБ в 2015 г.), в том числе:
- Данные аэрогеофизики [9]
- Набор данных о гравитации [9]
- Сейсморазведка [9]
- В ходе поиска рейса 370 авиакомпании Malaysia Airlines были получены «сырые» данные высокого разрешения о состоянии морского дна Индийского океана . [10]
Исследовать
Исследования, которые были проведены или проводятся, включают: [11]
- Обзор южного неба с использованием роботизированного телескопа SkyMapper Австралийского национального университета в обсерватории Маунт-Стромло
- Симулятор климата и системы Земли Австралийского сообщества (ACCESS)
- Исследования по смягчению последствий COVID-19
- Медицинские и материаловедение исследования
История
NCI Australia является прямым потомком ANU Supercomputing Facility (ANUSF), который существовал с 1987 по 1999 год. На рубеже нового тысячелетия правительство Австралии продвинулось вперед с процессом формирования Australian Partnership for Advanced Computing (APAC), фундамент которого должен был быть построен вокруг новой национальной вычислительной инфраструктуры. Учитывая его наследие в области суперкомпьютеров, было решено, что APAC National Facility будет располагаться в Австралийском национальном университете, и объект был окончательно введен в эксплуатацию в 2001 году.
В 2007 году APAC начал трансформироваться в нынешнее сотрудничество NCI.
В таблице ниже представлена полная история спецификаций суперкомпьютеров, представленных в NCI, и их предшественников.
| Технические характеристики системы | Производительность | Годы активности | Первоначальный рейтинг Top500 | |||||
|---|---|---|---|---|---|---|---|---|
| Имя | Процессор | Память | Хранилище | Пик | Устойчивый (SPEC) | Введено | Ушедший на пенсию | |
| Fujitsu VP100 | Вектор | 64 МБ | 0,15 ГФЛОПС | 1987 | 1992 | — | ||
| Fujitsu VP2200 | Вектор | 512 МБ | 27 ГБ | 1,25 ГФЛОПС | 1992 | 1996 | — | |
| Fujitsu VPP | Вектор / Скаляр | 14 ГБ | 28 ГФЛОПС | 1996 | 2001 | 59 | ||
| SGI Power Challenge XL | 20 млн операций в секунду 10000 р. | 2 ГБ | 77 ГБ | 6.4 ГФЛОПС | — | |||
| Compaq/HP Alphaserver (sc) | 512 ДЕК Альфа | 0,5 ТБ | 12 ТБ | 1 ТФЛОПС | 2000 | 2001 | 2005 | 31 |
| SGI Altix 3700 [5] (переменный ток) | 1920 Intel Itanium | 5,5 ТБ | 100 ТБ | 14 терафлопс | 21,000 | 2005 | 2009 | 26 |
| SGI Altix XE (xe) | 1248 Intel Xeon ( Nehalem ) | 2,5 ТБ | 90 ТБ | 14 терафлопс | 12,000 | 2009 | 2013 | — |
| Созвездие Солнца/Оракула (Вайю) [5] | 11,936 Intel Xeon ( Nehalem ) | 37 ТБ | 800 ТБ | 140 терафлопс | 240,000 | 2009 | 2013 | 35 |
| Fujitsu Primergy (Райдзин) [9] | 57,472 Intel Xeon ( Sandy Bridge ) | 160 ТБ | 12,5 ПБ | 1.195 ПФЛОПС | 1,600,000 | 2013 | 2019 | 24 |
| Fujitsu Primergy CX2570 (Гади) [4] | 145,152 Intel Xeon ( Cascade Lake ) | 576 ТБ | 20 ПБ | 9,26 ПФЛОПС | 2020 | В использовании | 24 | |
Ваю
Компьютерный кластер Vayu , предшественник Raijin, был основан на Sun Microsystems Sun Constellation System . Система Vayu была взята из кодового названия Sun для вычислительного модуля в системе. Vayu — индуистское божество, имя которого означает «ветер». Кластер был официально запущен 16 ноября 2009 г. министром инноваций, промышленности, науки и исследований правительства Австралии сенатором Кимом Карром после предварительного принятия 18 сентября 2009 г.
Vayu впервые был запущен в эксплуатацию в сентябре 2009 года с одной восьмой от окончательной вычислительной мощности, а полная система была введена в эксплуатацию в марте 2010 года. Vayu имел следующие характеристики производительности: [12]
Система включала: [13]
- 11936 ЦП в 1492 узлах в лезвиях Sun X6275, каждый из которых содержит
- два четырехъядерных процессора Intel Nehalem 2,93 ГГц
- 24 Гбайт памяти DDR3 -1333
- 24 ГБ Flash DIMM для замены и восстановления работы
- всего: 36,9 ТБ ОЗУ на вычислительных узлах
- Двухсокетные, четырехъядерные серверы Sun X4170, X4270, X4275 для файлообмена Lustre
- около 835 ТБ глобального пользовательского хранилища
Потребляемая мощность всей системы 11936 CPU составляла около 605 кВт , но вся мощность должна была поступать из экологически чистых источников энергии . [14]
Системное программное обеспечение для кластера Vayu включает в себя: [13]
- Дистрибутив CentOS 5.4 Linux (на основе Red Hat Enterprise Linux 5.4)
- система управления программным обеспечением кластера oneSIS
- Кластерная файловая система Lustre
- вариант системы пакетной очередности OpenPBS от National Facility
Национальное правительство выделило около 26 млн австралийских долларов на строительство центра и установку Vayu. [15] Другие участвующие организации включали Австралийское бюро метеорологии , Австралийский национальный университет и Содружество научных и промышленных исследований , сотрудничая с использованием интегрированной вычислительной среды для наук о системах Земли, включая исследование аспектов оперативного прогнозирования погоды до моделирования и предсказания климата. ANU и CSIRO каждый пожертвовали около 3 млн австралийских долларов , таким образом получив около четверти машины. [14] ANU и CSIRO при поддержке австралийского правительства разработали планы по финансированию замены Vayu примерно в 2011-2012 годах на машину примерно в 12 раз более мощную. [14] [15]
Смотрите также
Ссылки
- ^ Ириарте, Мариана. «Призывы к суперкомпьютерному времени в Pawsey's Magnus теперь открыты». HPCwire . Получено 18 августа 2022 г.
- ^ ab "Byte me: Взгляд изнутри на австралийский суперкомпьютер". ABC News . 9 июля 2017 г. Получено 14 августа 2022 г.
- ^ abc "NCI supercomputing facility names new director". Computerworld . Получено 12 августа 2022 г. .
- ^ abc "Суперкомпьютер ANU ответит на большие вопросы". The Canberra Times . 4 августа 2019 г. Получено 12 августа 2022 г.
- ^ abc "Новый австралийский суперкомпьютер превосходит все остальные". The Age . 16 ноября 2009 г. Получено 16 августа 2022 г.
- ^ "Gadi, новый суперкомпьютер Австралии, занимает 25-е место в списке самых мощных в мире". ABC News . 22 июня 2020 г. . Получено 15 августа 2022 г. .
- ^ Тернер, Мюррей. «UC Library Guides: Статистика: Ключевые ресурсы: Австралийская статистика». canberra.libguides.com . Получено 13 августа 2022 г. .
- ^ ab "HPC – Astronomy Australia Limited" . Получено 13 августа 2022 г. .
- ^ abcd Jingbo Wang; Evans, Ben; Bastrakova, Irina; Kemp, Carina; Fraswer, Ryan; Wyborn, Lesley (2015). «Передача австралийских геофизических данных на высокопроизводительный узел данных в Национальной вычислительной инфраструктуре (NCI)». doi :10.13140/RG.2.2.16377.06240.
{{cite journal}}: Цитировать журнал требует|journal=( помощь ) - ^ Geoscience Australia (17 июля 2017 г.). «Данные, лежащие в основе поиска MH370: опубликованы данные первой фазы». www.ga.gov.au . Получено 13 августа 2022 г.
- ^ "Основные моменты исследований - Национальная вычислительная инфраструктура". Национальная вычислительная инфраструктура . Получено 25 июня 2020 г.
- ^ Current Peak System, nci.org.au, дата обращения 2009-11-17
- ^ ab Скопление созвездий Солнца, Вайю: Сведения о системе, nci.org.au, дата обращения 18.03.2010
- ^ abc Австралийский новый суперкомпьютер превосходит все остальные, The Age , 2009-11-16, доступ получен 2009-11-17
- ^ ab ANU National Computational Infrastructure National Facility (речь), сенатор Ким Карр , 2009-11-16, доступ получен 2009-11-17
Внешние ссылки
- Сайт NCI Australia
- NCI-объекты
