Является ли DeepSeek самой большой угрозой для Кремниевой долины?

DeepSeek описывается как гораздо более эффективный и экономичный в производстве. Если такая эффективная модель ИИ существует, возникает вопрос: нужны ли еще чипы NVDA?

История, стоящая за этим:

Владелец хедж-фонда в Китае Лян Вэньфэн, соучредитель количественного хедж-фонда High-Flyer, участвует в этом проекте. Может ли он заниматься шортингом акций? (Разве короткие продажи не запрещены в Китае?) Если он работает за пределами Китая, слышали ли вы о нем раньше?

Всего за 5,5 млн долларов эта китайская компания разработала языковую модель ИИ, в то время как американские компании тратят на это 2 млрд долларов. Что еще более удивительно, они утверждают, что сделали это в качестве побочного проекта и в условиях санкций, не имея доступа к чипам NVDA высшего класса, а используя чипы NVDA B100.

Значит ли это, что новые чипы не нужны?

Сообщается, что генеральный директор Microsoft ознакомился с этой технологией и сказал, что впечатлен. Затем ситуация накалилась.

Неужели нас одурачили? Действительно ли это прорыв?

«Компания DeepSeek, полностью финансируемая китайским хедж-фондом High-Flyer, представила свою модель R1 в понедельник и опубликовала документ, в котором подробно описано, как LLM можно разрабатывать при ограниченном бюджете и совершенствовать без вмешательства человека».

Несколько ключевых наблюдений:

Согласно документу, в DeepSeek работает около 163 специалистов по искусственному интеллекту. В США средняя зарплата специалистов по ИИ составляет от 250 до 500 тысяч долларов. Хотя стоимость рабочей силы в Китае ниже, зачем таким талантливым разработчикам работать за меньшую плату

Может быть, они работают на китайское правительство? Но даже в этом случае я сомневаюсь, что их заработная плата незначительна.

Компания утверждает, что работает над этим с начала 2023 года и опубликовала несколько работ. Вполне возможно, что на последнее обновление они потратили всего 5,5 миллиона долларов.

Они утверждают, что использовали чипы B100, но последние сообщения говорят о том, что у них есть около 50 000 чипов H100 NVDA, что является огромным количеством.

Чего можно добиться с помощью 50 000 чипов H100?

Обучение моделей с триллионами параметров и разработка более сложных моделей.

Создание новых моделей компьютерного зрения для автономных транспортных средств, медицинской визуализации или распознавания лиц.

Разрабатывайте приложения ИИ, требующие низкой задержки, например чат-боты, автономные системы или перевод в реальном времени.

Моделирование самых сложных климатических и погодных моделей в мире.
Проводить революционные исследования генетических заболеваний благодаря более быстрому и детальному анализу генома человека.

Готовить сверхдетализированные симуляции формирования Вселенной, черных дыр или исследования темной материи.

Разработка, обучение и оптимизация парков автономных транспортных средств по всему миру.

Создание ультрареалистичных графических и физических движков для виртуальных миров, таких как метавселенная.

Предлагать персонализированный виртуальный опыт, разрабатывая цифровых двойников, которые учатся и имитируют поведение пользователя.

Моделирование гиперреалистичных боевых сценариев для военной подготовки.
Предоставление инструментов ИИ с открытым исходным кодом для более широкого внедрения инноваций во всем мире.

Но есть нюансы

Чип Nvidia H100 обеспечивает производительность около 1 петафлопа в FP16 (половина точности). Совокупная вычислительная мощность 50 000 чипов:
50 эксафлоп (FP16), что превосходит даже самые быстрые суперкомпьютеры в мире.

Возможна ли параллельная обработка данных с помощью чипов B100?

Теперь давайте зададим вопрос: Связана ли компания DeepSeek с китайским правительством?

Ответ: Критика запрещена.

DeepSeek - программа, поддерживаемая китайским правительством, что вполне естественно. Это может быть частью более крупного, стратегического плана, например, намеком на то, что средства, выделяемые на проекты вроде Stargate, нерациональны.

Ключевые подробности о DeepSeek:

При разработке, как сообщается, использовались инструменты META и OpenAI.
Китайское правительство ранее объявило об инициативе по финансированию ИИ в размере 130 миллиардов долларов.

Главное утверждение:

Они разработали модель, способную создавать языковые модели без вмешательства человека, что может ускорить весь процесс.

Скептицизм:

Мне трудно поверить, что такая модель может быть создана за такую цену. Конечно, ваши соображения тоже очень ценны.

Чего опасаются?

Опасения связаны с тем, что спрос на чипы NVDA может снизиться. Однако здесь в игру вступает парадокс Джевонса. Этот парадокс гласит, что по мере повышения эффективности использования ресурсов спрос на них может не уменьшаться, а увеличиваться. Эффективность обычно снижает затраты, стимулируя более широкое использование ресурса, что приводит к росту общего потребления.

Последствия:

Спрос на чипы NVDA, скорее всего, возрастет.

Заключение:

DeepSeek, несомненно, заставит американские компании двигаться быстрее. Появилась сильная конкуренция.

Источник

Больше полезной информации из мира инвестиций на https://t.me/marat_investments

Читайте также:

Квантовые вычисления - это прямая угроза доминированию Nvidia