Cerebras Systems представила свой Wafer Scale Engine 3 (WSE-3), получивший название «самый быстрый чип искусственного интеллекта в мире».
Сообщается, что WSE-3, который используется в суперкомпьютере Cerebras CS-3 AI, обеспечивает вдвое большую производительность, чем его предшественник WSE-2, при том же энергопотреблении и цене.
Чип способен обучать модели искусственного интеллекта с использованием до 24 триллионов параметров, что является значительным шагом вперед по сравнению с предыдущими моделями.
Суперкомпьютер CS-3
WSE-3 построен по 5-нм техпроцессу TSMC и имеет встроенную SRAM объемом 44 ГБ. Он может похвастаться четырьмя триллионами транзисторов и 900 000 вычислительными ядрами, оптимизированными для искусственного интеллекта, обеспечивая пиковую производительность искусственного интеллекта 125 петафлопс — это теоретический эквивалент примерно 62 графических процессоров Nvidia H100.
Суперкомпьютер CS-3 на базе WSE-3 предназначен для обучения моделей искусственного интеллекта следующего поколения, которые в 10 раз больше, чем GPT-4 и Gemini. Сообщается, что благодаря системе памяти объемом до 1,2 петабайта она может хранить 24 триллиона моделей параметров в едином логическом пространстве памяти, что упрощает рабочий процесс обучения и повышает производительность разработчиков.
Cerebras заявляет, что ее суперкомпьютер CS-3 оптимизирован как для корпоративных, так и для гипермасштабных нужд, он предлагает превосходную энергоэффективность и простоту программного обеспечения, требуя на 97% меньше кода, чем графические процессоры для больших языковых моделей (LLM).
Генеральный директор и соучредитель Cerebras Эндрю Фельдман заявил: «WSE-3 — это самый быстрый ИИ-чип в мире, специально созданный для новейших передовых разработок в области ИИ, от специалистов до моделей с 24 триллионами параметров. Мы в восторге». за вывод WSE-3 и CS-3 на рынок, чтобы помочь решить самые большие сегодня проблемы искусственного интеллекта».
Компания заявляет, что у нее уже есть портфель заказов на CS-3 для корпоративных, государственных и международных облаков. CS-3 также будет играть важную роль в стратегическом партнерстве между Cerebras и G42, который уже обеспечил 8 эксафлопс производительности суперкомпьютера искусственного интеллекта с помощью Condor Galaxy 1 и 2. Третья установка, Condor Galaxy 3, в настоящее время находится в стадии строительства и будет будет построен на базе 64 систем CS-3, производящих 8 экзафлопс вычислений ИИ.