TPU v7 — Ironwood Google показали новое поколение TPU, на одном уровне с Blackwell. В новом поколении 4.6 Dense петафлопса на чип — чуть больше чем в B200. Дают 192 гигабайта видеопамяти, с пропускной способностью чуть похуже чем у B200 — 7.4TB/s против 8. Энергоэффективность в два раза лучше чем у Trillium (v6e) и чуть лучше чем у Blackwell. Новые TPU могут объединяться в поды из over 9000 чипов, только вместо Infiniband/Ethernet там кастомный нетворкинг. Он больше похож на тот, что Nvidia делает в NVL72, но, в отличии от решения Nvidia, которая обещает 576 чипов через NVLink только в 2027, он скейлится на тысячи чипов. Но есть и минусы — TPU v7 даёт всего 1.2TB/s на чип, когда NVLink 5 в GPU Blackwell даёт 1.8TB/s. Главный вопрос — смогут ли они купить достаточно HBM для массовых деплойментов. Но даже если смогут, не смотря на очень хорошие характеристики, это не конкурент Nvidia. Дело в том, что Google не продаёт TPU другим компаниям, лишь сдаёт в аренду в клауде. Да и сами они не отказываются от массового деплоймента GPU — одних Blackwell компания закупила на 10 миллиардов долларов, правда в основном для Google Cloud. @ai_newz
TPU v7 — Ironwood Google показали новое поколение TPU, на одном уровне с…
Из этого канала
- #3818HiDream-I1 (17B) - новая txt2img SOTA Пора бы уже привыкнуть, что нонейм…
HiDream-I1 (17B) - новая txt2img SOTA Пора бы уже привыкнуть, что нонейм команда из Китая нагибает западные СОТА.
- #3823"Mechanistic permutability: Match across layers В современных нейронках одна из…
"Mechanistic permutability: Match across layers В современных нейронках одна из ключевых проблем интерпретируемости — полисемантичность, когда отдельные…
- #3824Для Grok 3 вышло API Дают доступ к двум моделям — Grok 3 и Grok 3 Mini.…
Для Grok 3 вышло API Дают доступ к двум моделям — Grok 3 и Grok 3 Mini. Контекст — 131к для обеих моделей.
- #3814Почему опенсорс – это круто? Наткнулся на такой тред в X – некоторые люди не…
Почему опенсорс – это круто? Наткнулся на такой тред в X – некоторые люди не понимают, зачем что-то опенсорсить (первый срин).
- #3813Вышел DeepCoder 14B Preview Новый ризонер специально для кода, лидирующий в 14B…
Вышел DeepCoder 14B Preview Новый ризонер специально для кода, лидирующий в 14B весовой категории и догоняющий o3-mini и o1, когда они обе на low настройках.