Як створити суперкомп`ютер

категорія Кулінарія




Вам потрібна машина, здатна проводити обчислення з точністю до сотень трильйонів знаків після коми за секунду? Або вам потрібна історія, яку можна розповідати в барах, про те, як суперкомп`ютер в вашому підвалі вибив пробки? Створення власного Високопродуктивного Комп`ютера, або суперкомп`ютера - завдання, яке будь-який досвідчений гик може вирішити за вихідні при наявності вільного часу і деякої суми грошей. Висловлюючись технічною мовою, сучасний мультипроцесорний суперкомп`ютер - мережа з комп`ютерів, які працюють паралельно для вирішення проблеми. У цій статті коротко описано кожен крок процесу побудова такої мережі, увага приділяється "залозу" і програмного забезпечення.

кроки

Зображення з назвою IMG 464
1
В першу чергу визначитеся з тим, які компоненти і ресурси будуть потрібні. Вам потрібен буде один головний вузол, мінімум десяток ідентичних обчислювальних вузлів, свитч Ethernet, блок розподілу харчування і стійка. Визначте потужність проводки і охолодження, а також площа простору, які вам будуть потрібні. Також визначіться, які IP адреси ви хочете використовувати для вузлів, яке ПЗ ви поставите і які технології будуть потрібні для створення паралельних обчислювальних потужностей (докладніше про це нижче).
  • хоча "залізо" коштує дорого, все наведені в статті програми розповсюджуються безкоштовно, і більшість з них - з відкритим вихідним кодом.
  • Якщо ви хочете дізнатися, наскільки швидким теоретично може бути ваш суперкомп`ютер, використовуйте цей інструмент: https://hpl-calculator.sourceforge.net/
  • 2
    Змонтуйте Ноди. Вам потрібно буде зібрати вузли мережі або придбати попередньо зібрані сервери.

    Відео: Сергій Хрущов - Як створити суперкомп`ютер, і що для цього потрібно

  • Вибирайте рами для серверів з максимально раціональним використанням простору і енергії, а також з ефективним охолодженням.
  • або Ви можете "утилізувати" десяток або близько того б / у серверів, кілька застарілих - і нехай їх вага перевищує сумарний вага комплектуючих, зате ви заощадите пристойну суму. Всі процесори, мережеві адаптери і материнські плати повинні бути однакові, щоб комп`ютери добре працювали разом. Звичайно, не забудьте про RAM і жорсткі диски для кожної ноди, а також як мінімум про один оптичному приводі для головного вузла.
  • 3
    Встановіть сервери в стійку. Починайте знизу, щоб стійка не була перевантажена зверху. Вам знадобиться допомога друга - зібрані сервери можуть бути дуже важкими, і ставити їх в осередки, на яких вони тримаються в стійці, досить складно.
  • 4
    Встановіть світч Ethernet поруч зі стійкою. Варто відразу ж конфігурувати свитч: встановіть розмір джамбо-кадрів 9000 байт, встановіть статичний IP адреса, який ви вибрали на кроці 1 і вимкніть непотрібні протоколи, такі як SMTP.
  • 5
    Встановіть розподільник харчування (PDU, або Power Distribution Unit). Залежно від того, яку максимальну навантаження видають Ноди в вашій мережі, вам може знадобитися 220 вольт для високопродуктивного комп`ютера.
  • 6
    Коли все встановлено, переходите до конфігурації. Linux за фактом є основною системою для високопродуктивних (HPC) кластерів - він не тільки ідеально підходить в якості оточення для наукових обчислень, але вам ще й не доведеться платити за установку системи на сотні і навіть тисячі вузлів. Уявіть, у скільки обійшлася б установка Windows на всі ноди!
  • Почніть з установки останньої версії BIOS для материнської плати і ПО від виробника, яке повинно бути однаковим для всіх серверів.
  • Встановіть бажаний дистрибутив Linux на всі ноди, а на головний вузол - дистрибутив з графічним інтерфейсом. Популярні системи: CentOS, OpenSuse, Scientific Linux, RedHat і SLES.
  • Автор дуже рекомендує використовувати Rocks Cluster Distribution. На додаток до установки всіх необхідних для кластера програм та інструментів, Rocks реалізує відмінний метод для швидкого `переноса` безлічі копій системи на аналогічні сервера з використанням PXE boot і процедури` Kick Start` від Red Hat.
  • 7
    Встановіть інтерфейс передачі повідомлень, менеджер ресурсів та інші необхідні бібліотеки. Якщо ви не поставили Rocks на попередньому кроці, вам доведеться вручну встановлювати необхідне програмне забезпечення, щоб налаштувати логіку паралельних обчислень.
  • Для початку вам знадобиться портативна система для роботи з bash, наприклад, Torque Resource Manager, який дозволяє розділяти і розподіляти завдання на кілька машин.
  • Додайте до Torque ще Maui Cluster Scheduler, щоб закінчити установку.
  • Далі вам потрібно встановити інтерфейс передачі повідомлень, який необхідний для того, щоб індивідуальні процеси в кожній окремій ноді використовували загальні дані. OpenMP - найпростіший варіант.
  • Не забудьте про багатопоточних математичних бібліотеках і компіляторах, які будуть "збирати" ваші програми для розподілених обчислень. Я вже говорив, що вам варто просто поставити Rocks?

  • Відео: Компьюртер 32 ядра (потоку) з двома процесорами Xeon E5 2670 - потужний комп з комплектуючих з Авито

    8
    З`єднайте комп`ютери в мережу. Головна нода посилає завдання для обчислення на підлеглі Ноди, які в свою чергу повинні повернути результат назад, а також відправляти повідомлення один одному. І чим швидше все це відбувається, тим краще.
  • Використовуйте приватну Ethernet мережу, щоб з`єднати всі ноди в кластер.
  • Головна нода може також працювати в якості NFS, PXE, DHCP, TFTP і NTP сервера при підключенні до Ethernet.
  • Ви повинні відокремити цю мережу від публічних, щоб бути впевненим, що пакети не перекриваються іншими в LAN.
  • 9
    Протестуйте кластер. Останнє, що вам варто зробити перед тим, як дати доступ користувачам до комп`ютерних потужностей - протестувати продуктивність. HPL (High Performance Lynpack) benchmark - популярний варіант для вимірювання швидкості обчислень в кластері. Вам потрібно скомпілювати ПО з початкових кодів з найвищим ступенем оптимізації, яку дозволяє ваш компілятор для тієї архітектури, яку ви вибрали.
  • Ви повинні, звичайно, компілювати з усіма можливими настройками оптимізації, які доступні для платформи, яку ви вибрали. Наприклад, при використанні AMD CPU компілюйте в Open64 і рівнем оптимізації -0.
  • Порівняйте отримані результати з TOP500.org, щоб зіставити свій кластер з 500 найшвидшими суперкомп`ютерами в світі!

    • Поради

    • IPMI може спростити адміністрування великого кластера, надавши KVM-over-IP, віддалене управління живленням і багато іншого.
    • Для отримання дійсно високій швидкості роботи погляньте на інтерфейс InfiniBand network. Але будьте готові оплатити преміальний доступ.
    • Використовуйте Ganglia для моніторингу навантаження на окремі Ноди.

    попередження

    • Переконайтеся, що інфраструктура приміщення (проводка і так далі) витримає навантаження.


    Увага, тільки СЬОГОДНІ!
    Cхоже
    Все цікаве
    Як зробити плаваючий ip Як зробити плаваючий ip

    Відео: Як зробити Динамічний Ip адреса без програм!Internet Protocol Address (скорочено ip адреса) - персоніфікований адреса комп`ютера, який підключається до інтернету або локальної мережі. Зазвичай адреса постійний, призначається він…

    Як встановити на свій комп`ютер висту Як встановити на свій комп`ютер висту

    Відео: Установка Windows 7 з флешки на комп`ютер і ноутбукОпераційна система Віста, або Windows Vista на мові виробника, вперше була представлена користувачам 30 листопада 2006 року. Вона представляла собою значний крок вперед по продуктивності і…

    Як розвести інтернет на два комп`ютери Як розвести інтернет на два комп`ютери

    Відео: як підключити два комп`ютера через один кабель.2 кома через 1 кабель.Мало кого зараз можна здивувати декількома комп`ютерами в межах однієї квартири або офісу. Природно, без доступу в інтернет комп`ютер був і залишається неповноцінним. Але…

    Як налаштувати загальний доступ Як налаштувати загальний доступ

    Відео: Загальний доступ на комп`ютері Mac (МакЛікбез)У цій статті ми опишемо вам настройку і використання загального доступу до інтернету в системі Microsoft Windows XP. Загальний доступ дозволить використовувати єдине підключення до інтернету для…

    Як зробити мережу Як зробити мережу

    Відео: Як налаштувати мережу по LAN між двома комп`ютерамиВи дізнаєтеся як зробити локальну мережа між двома і більше комп`ютерами, об`єднати їх за допомогою мережевого кабелю і мережевого комутатора. А також як укладати і обжимати кабель, вибрати…

    Як поміняти програмне забезпечення Як поміняти програмне забезпечення

    Відео: Як оновити драйвера в Windows 7Заміна програмного забезпечення комп`ютера - завдання далеко не з простих. Найпростіший спосіб - перевстановлення операційної системи. програмне забезпечення змінюють зазвичай через його морального старіння,…

    Як налаштувати маршрутизацію мережі Як налаштувати маршрутизацію мережі

    Відео: Створення та налагодження мережі з роутерами в Cisco Packet TracerЩоб створена вами локальна мережа працювала правильно, її необхідно як слід налаштувати. При створенні мереж, в яких комп`ютери використовують статичні IP-адреси, потрібно…

    Як налаштувати з`єднання двох комп`ютерів через модем Як налаштувати з`єднання двох комп`ютерів через модем

    Відео: Як роздати Інтернет з комп`ютера через локальну мережу? | ComplandiaІснують різновиди DSL-модемів, наділені декількома портами LAN. Така особливість обладнання дозволяє з`єднувати в локальну мережу певну кількість комп`ютерів і ноутбуків. …

    Як визначити системну плату Як визначити системну плату

    Відео: "Як дізнатися модель материнської плати"При установці свіжої версії BIOS і останніх драйверів для материнської плати необхідно точно знати модель пристрою. Але це не так легко зробити, якщо комп`ютер перебуває на гарантії, і на…

    Чистка комп`ютера від непотрібних файлів Чистка комп`ютера від непотрібних файлів

    Відео: Очищення комп`ютера від непотрібних файлівУ кожному персональному комп`ютері накопичується досить великий обсяг непотрібної інформації, яка призводить до низьких показників роботи системи. Через зайвої інформації зростає навантаження на…

    Для чого потрібні віртуальні машини Для чого потрібні віртуальні машини

    Віртуальна машина - це спеціальна програма, створена для емуляції іншої операційної системи. Зазвичай віртуальна машина запускається на будь-якої ОС, емулюючи при цьому новий фізичний комп`ютер.Відео: Що таке Virtualbox, навіщо він потрібен і як ним…


    Увага, тільки СЬОГОДНІ!
    » » Як створити суперкомп`ютер