Вычислительная мощность искусственного интеллекта в Tesla удвоилась: работает новый кластер с 10 000 современными графическими процессорами

Любой, кто думал, что компьютерным процессорам в какой-то момент больше не придется становиться более мощными, сделал расчет без искусственного интеллекта: Nvidia, как самый важный поставщик в этой области, вряд ли сможет спасти себя от спроса на ее новейшие чипы H100 (см. Фото). Только Tesla (https://tsk.ua/katalog-avto/) купила 10 000 таких графических процессоров, оптимизированных для задач ИИ, и, по ее собственным заявлениям, ввела их в эксплуатацию в виде кластера в понедельник — до того, как за ними должен последовать компьютер Dojo, который был полностью разработан собственными силами.

Выпущен новый суперкомпьютер Tesla

По словам тогдашнего руководителя компании по искусственному интеллекту Андрея Карпати, в середине 2021 года у Tesla уже был пятый по скорости суперкомпьютер в мире, состоящий из 5760 графических процессоров Nvidia типа A100, который был самым современным на тот момент. На презентации по этому поводу он уже анонсировал «Додзё» как следующий шаг, который затем более подробно объяснили в августе: суперкомпьютер Tesla с чипами собственной разработки и собственной архитектурой специально для эффективного видеообучения искусственного интеллекта автопилота.
К концу следующего года Tesla потратит более 1 миллиарда долларов на Dojo, заявил генеральный директор Илон Маск на телеконференции в середине июля. Но вы также используете много оборудования Nvidia и покупаете столько, сколько можете. И это, очевидно, довольно много: в этот понедельник вступит в эксплуатацию новый кластер искусственного интеллекта, состоящий из 10 000 H100, объявил Тим Заман, ранее отвечавший за инфраструктуру в Nvidia, а теперь в Tesla и X.

По теме: где купить Тесла X в Украине (https://tsk.ua/katalog-avto/model-x/)?

Из 5760 и, согласно промежуточному отчету середины прошлого года, 7360 процессоров A100 у Tesla, к ним теперь стали или добавились 10 000 более нового типа H100. Как написал генеральный директор Маск, предыдущий кластер Tesla недавно даже насчитывал около 16 000 A100. По нашему собственному опыту, преемник в три раза быстрее. Если бы суперкомпьютер нового H100 работал, вычислительная мощность Tesla увеличилась бы примерно вдвое. Заман не уточнил, будет ли это означать высокое место в мировом рейтинге суперкомпьютеров. Однако он писал об объеме «горячего кэша» более 200 петабайт, что на порядки больше, чем у, так называемых, LLM.
Эти гигантские языковые модели, такие как GPT для чата, в настоящее время вызывают волнение и страхи перед новым искусственным интеллектом и являются одними из самых сильных драйверов спроса в Nvidia. По данным специализированного блога GPU Utils, устройство с восемью графическими процессорами H100 стоит 460 000 долларов, из которых около 100 000 долларов приходится на услуги. Даже если бы Tesla могла обойтись без этих дополнительных затрат, 10 000 новых графических процессоров Nvidia стоили бы чуть менее полмиллиарда долларов, или половину предполагаемого бюджета Маска Dojo к концу 2024 года.

По теме: приобрести Тесла S в Киеве можно тут (https://tsk.ua/katalog-avto/model-s/)!

Маск хочет использовать Dojo и Nvidia

Однако эти инвестиции, похоже, планируются в дополнение к инвестициям в готовое оборудование для искусственного интеллекта. Tesla будет использовать как Nvidia, так и Dojo, заявил Маск на июльской конференции, где упомянул, что потратит 1 миллиард долларов на собственную систему. По его словам, для того, чтобы программное обеспечение автопилота FSD научилось водить машину лучше, чем человек, потребуются огромные ресурсы обучения для оценки массы данных. А в ходе дискуссии об искусственном интеллекте в Google, которая также создает для него свои собственные компьютеры, Маск повторил в понедельник, что Tesla будет работать с Dojo, как и Nvidia.