Wafer Scale Engine Two
Cerebras объявила о создании процессора Wafel Scale Engine Two (WSE2) второго поколения – крупнейшего процессора на рынке. Чип гигантский, даже несмотря на его изготовление в очень современном технологическом процессе. По сравнению с моделью первого поколения значительно увеличилось количество транзисторов и доступной памяти.
Wafer Scale Engine Two (WSE2) является преемником процессора, представленного Cerebras два года назад. Новая версия во всех отношениях лучше предыдущей и, вероятно, еще дороже. К сожалению, ее цены мы не знаем, но стоит упомянуть, что чип первого поколения стоил целых 2 млн долларов (!), поэтому WSE2 может быть еще дороже.
Новинка размером до 46225 мм2, оснащена 850 000 ядрами ИИ и 2600 миллиардами транзисторов. Для сравнения, второй по величине процессор ИИ на рынке – Nvidia A100, имеет «всего» 826 мм2 и 54 миллиарда транзисторов. Оба выполнены в одном и том же технологическом процессе 7 нм. В WSE2 находится 40 ГБ SRAM с пропускной способностью 20 ПБ/с. Скорость подключения внутреннего интерфейса составляет до 220 ПБ/с.
Интересный факт – прибыль от процессора ожидается в размере 100%. Она удивительно высока для такого большого процессора.
Важно отметить, что это не просто концептуальный дизайн, потому что уже известно, что платформы, основанные на этом решении, выйдут на рынок в третьем квартале 2021 года.
В прошлом году компания Cerebras System представила самый большой в мире процессор. Его размеры составили 220 x 220 мм, площадь — 46 225 мм². Процессор включает 1,2 трлн транзисторов. Чип получил название WSE (Wafer Scale Engine). Представители компании разработали и компьютер CS-1, основой которого стал гигантский процессор. Систему официально представили 18 ноября 2019 года.
Сейчас Cerebras System рассказала о новом процессоре, количество транзисторов в котором увеличится более чем в 2 раза — с 1,2 трлн до 2,6 трлн. Резкое увеличение количества элементов в чипе стало возможным благодаря переходу на 7-нм техпроцесс. Кратно выросло и число ядер — их теперь 850 000.
Размеры первого процессора огромны — 22 x 22 см, что сопоставимо с размерами небольшого ноутбука. Он в 55.9 раз больше самого крупного GPU-чипа, Nvidia A100. Ну а CS-1 назван производителем «самым быстрым компьютером для работы с искусственным интеллектом и обучения нейросетей». Охлаждение — жидкостное с внутренним контуром и двумя насосами. Дополнительно установлены четыре крупных кулера, обеспечивающие скорость воздушного потока в 0,95 м3/с.
Процессор первого поколения включал 400 000 вычислительных ядер. Его оснастили 18 ГБ памяти формата SRAM, а пропускная способность при этом достигла 9 петабайт в секунду. Система потребляла 18 кВт энергии, которую подавали 12 блоков питания. Масса компьютера с установленным WSE — 254 килограмма. Для включения системы в единую сетевую инфраструктуру использовались 12 портов 100 Gigabit Ethernet (100GBase-SR4).
Генеральный директор и соучредитель Cerebras Systems Эндрю Фельдман на презентации новинки рассказывал, что CS-1 в три раза производительней кластеров TPU от Google. Вычислительные решения от поискового гиганта по энергетическим характеристикам оказались хуже разработки компании, потребляя более 100 кВт электроэнергии.
В 2019 году первые экземпляры CS-1 были переданы заказчикам. Среди них — Аргоннская национальная лаборатория министерства энергетики США, Суперкомпьютерный центр Питтсбурга и Ливерморская национальная лаборатория.
На конференции Hot Chips 2020 компания Cerebras System объявила, что перейдет с 16-нм техпроцесса на 7-нм. Производителем процессора останется тайваньская Taiwan Semiconductor Manufacturing Company (TSMC). Представитель разработчика заявил, что в лаборатории тестируется несколько образцов WSE нового поколения.
Ожидается, что Cerebras System увеличит объем доступной памяти чипа и усилит межкомпонентные соединения микросхем для повышения пропускной способности. Скорее всего, компания продолжит предоставлять в аренду вычислительные мощности для обучения нейросетей корпоративных клиентов. Кто станет клиентом, выяснится в ближайшем будущем, но можно быть уверенным в том, что желающих будет много.