Meta (Facebook) будує найшвидший у світі суперкомп’ютер

Компанія Meta (Facebook) завершила перший етап створення нового суперкомп’ютера зі штучним інтелектом. Як тільки суперкластер досліджень штучного інтелекту (RSC) буде повністю побудований в кінці цього року, компанія вважає, що це буде найшвидший суперкомп’ютер штучного інтелекту на планеті. Він зможе виконувати обчислення зі змішаною точністю на швидкості майже 5 ексафлопс.

Компанія заявляє, що RSC допоможе дослідникам розробити кращі моделі штучного інтелекту, які можуть навчатися на трильйонах прикладів. Серед іншого, моделі зможуть створювати більш досконалі інструменти доповненої реальності і аналізувати текст, зображення і відео разом.

“Ми сподіваємося, що RSC допоможе нам створити абсолютно нові системи штучного інтелекту, які можуть, наприклад, здійснювати голосові переклади в реальному часі для великих груп людей, кожен з яких говорить іншою мовою, щоб вони могли безперешкодно співпрацювати в дослідницькому проекті або грати в гру AR разом”, – написав технічний менеджер програми Кевін і інженер-програміст Шубхо Сенгупта в блозі.

В даний час RSC володіє 760 картами Nvidia DGX A100 із загальною кількістю 6080 графічних процесорів. Meta (Facebook) вважає, що поточна ітерація вже входить до числа найшвидших суперкомп’ютерів штучного інтелекту на планеті. Грунтуючись на ранніх тестах, компанія стверджує, що RSC може, в порівнянні зі старою установкою компанії, запускати робочі процеси комп’ютерного бачення в 20 разів швидше, а бібліотека колективного зв’язку NVIDIA працює у більш ніж в дев’ять разів швидше.

RSC також може навчати великомасштабні моделі обробки природної мови в три рази швидше. Таким чином, моделі штучного інтелекту, які визначають, чи є “дія, звук або зображення шкідливим або нешкідливим”, можуть навчатися швидше. Це має допомогти захистити людей у сучасних сервісах, таких як Facebook і Instagram, а також у метавсесвіті.

Цього року Meta планує збільшити кількість графічних процесорів в RSC до 16 000. Це підвищить ефективність навчання штучного інтелекту у більш ніж в 2,5 рази. Компанія, яка почала працювати над проектом на початку 2020 року, хотіла, щоб RSC навчала моделі штучного інтелекту на наборах даних розміром до ексабайта (еквівалент високоякісного відео за 36 000 років).