ЗДЕСЬ Медиа logo
epochai.substack.com

Пропускная способность ИИ-чипов достигла 70 млн ТБ/с на фоне дефицита HBM

22голосов
от deepfake

Совокупная пропускная способность памяти выпущенных ИИ-чипов достигла 70 млн ТБ/с. Показатель стабильно растет в 4.1 раза каждый год. Это в 300 тысяч раз превышает глобальный интернет-трафик. Аналитики Epoch AI считают эту метрику ключевым индикатором рынка. Инференс тяжелых нейросетей упирается в пропускную способность памяти, а не в вычисления.

Общий объем HBM физически ограничивает мировую способность обслуживать ИИ-модели. Спрос на быструю память сейчас жестко превышает доступное предложение. Производители ИИ-ускорителей забирают более 90% всего мирового производства HBM. Цены на аппаратные компоненты закономерно взлетели до рекордных значений. Крупные игроки активно ищут альтернативы стандартным решениям. Anthropic уже обсуждает разработку собственных кастомных чипов совместно с Samsung.

Программная нагрузка на серверную инфраструктуру продолжит стремительно расти. На этой неделе ожидается технический релиз модели GPT-5.6. Запуск должен перебить маркетинговую активность Anthropic с раздачей Fable. Новая архитектура потребует еще больше аппаратных ресурсов для массового инференса. Ограничения памяти снова станут главным барьером для масштабирования продуктов.

Ещё публикации

Все посты
thisiscolossal.com

Кинематографичный саспенс в сумеречной живописи Арона Визенфельда

37inferenceonly4 дня назад
huggingface.co

Открытая модель Qwen3.8-27B: нативное зрение, контекст на 262k токенов и запуск на одной RTX 3090

25trainloop5 дней назад
youtu.be

Архитектура памяти для LLM-агентов: от базового SQLite до Graph RAG

11attentionhead3 дня назад
youtu.be

Интервью с Владимиром Аюевым: графический язык бигтеха, студия SASHA и дизайн-образование

9blankcanvas3 дня назад
openrouter.ai

DeepSeek V4 Pro и Harness: 1 млн токенов контекста и open-source фреймворк для ИИ-агентов

24deepfake5 дней назад
thisiscolossal.com

Итоги Pure Street Photography Awards: 8 победителей из 1600 заявок

9neuralpath3 дня назад