Дом
ИИ вычисления для потребления мощности нескольких Нью -Йорка к 2026 году, говорит основатель
Nvidia и партнеры расширяют центры данных для ИИ по всему миру
Nvidia вместе со своими партнерами и клиентами активно расширяет масштабы компьютерных центров по всему миру, чтобы удовлетворить высокие вычислительные потребности для обучения масштабных моделей искусственного интеллекта (ИИ), таких как GPT-4. Это расширение станет еще более важным по мере вывода дополнительных моделей ИИ в эксплуатацию, отметил Томас Грэм, сооснователь стартапа в области оптических вычислений Lightmatter. В недавнем интервью в Нью-Йорке с Мандипом Сингхом, старшим аналитиком по технологиям из Bloomberg Intelligence, Грэм подчеркнул возрастающую потребность в вычислительных ресурсах.
«Спрос на увеличение вычислительных мощностей связан не только с законами масштабирования; речь также идет о развертывании этих моделей ИИ уже сейчас», — объяснил Грэм. Сингх поинтересовался будущим больших языковых моделей (LLM), таких как GPT-4, и будут ли они продолжать расти в размерах. В ответ Грэм переключил внимание на практическое применение ИИ, подчеркнув важность инференса, или фазы развертывания, которая требует значительных вычислительных мощностей.
«Если рассматривать обучение как исследования и разработки, то инференс — это, по сути, развертывание. При развертывании вам потребуются крупномасштабные компьютеры для работы ваших моделей», — заявил Грэм на конференции «Gen AI: Может ли он оправдать обещания продуктивности?», организованной Bloomberg Intelligence.
Точка зрения Грэма совпадает с мнением генерального директора Nvidia Дженсена Хуанга, который подчеркнул на Уолл-стрит, что развитие «агентных» форм ИИ потребует не только более сложного обучения, но и значительно улучшенных возможностей инференса, что приведет к экспоненциальному росту потребностей в вычислительных мощностях.

«Если рассматривать обучение как исследования и разработки, то инференс — это действительно развертывание, и при этом вам понадобятся большие компьютеры для работы ваших моделей», — сказал Грэм. Фото: Bloomberg, предоставлено Крейгом Варгой Роль Lightmatter в инфраструктуре ИИ
Основанная в 2018 году, Lightmatter находится на передовой разработки технологий чипов, использующих оптические соединения для связи нескольких процессоров на одном полупроводниковом кристалле. Эти оптические межсоединения могут передавать данные более эффективно, чем традиционные медные провода, потребляя меньше энергии. Эта технология может оптимизировать соединения внутри и между стойками центров данных, повышая общую эффективность и экономичность центров данных, отметил Грэм.
«Заменяя медные дорожки в центрах данных — как на печатных платах серверов, так и в кабелях между стойками — на оптоволокно, мы можем значительно увеличить пропускную способность», — рассказал Грэм Сингху. Lightmatter в настоящее время сотрудничает с различными технологическими компаниями над проектированием новых центров данных, и Грэм отметил, что эти объекты строятся с нуля. Компания уже установила партнерство с Global Foundries, контрактным производителем полупроводников с операциями в северной части штата Нью-Йорк, который обслуживает клиентов, таких как Advanced Micro Devices.
Хотя Грэм не раскрыл конкретных партнеров и клиентов помимо этого сотрудничества, он намекнул, что Lightmatter работает с поставщиками кремния, такими как Broadcom или Marvell, для создания специализированных компонентов для технологических гигантов, таких как Google, Amazon и Microsoft, которые разрабатывают собственные процессоры для центров данных.
Масштабы и будущее центров данных для ИИ
Чтобы проиллюстрировать масштабы развертывания ИИ, Грэм указал, что как минимум дюжина новых центров данных для ИИ либо планируется, либо уже строится, каждый из которых требует гига ватта энергии. «Для контекста, Нью-Йорк потребляет около пяти гига ватт энергии в среднем за день. Таким образом, речь идет о потреблении энергии, эквивалентном нескольким Нью-Йоркам», — сказал он. Он прогнозирует, что к 2026 году глобальная обработка ИИ потребует 40 гига ватт энергии, что эквивалентно восьми Нью-Йоркам, специально для центров данных ИИ.
Lightmatter недавно привлекла инвестиции венчурного капитала в размере 400 миллионов долларов, оценив компанию в 4,4 миллиарда долларов. Грэм упомянул, что компания планирует начать производство «в ближайшие несколько лет».
На вопрос о возможных препятствиях для планов Lightmatter Грэм выразил уверенность в постоянной потребности в расширении инфраструктуры вычислений для ИИ. Однако он признал, что прорыв в алгоритмах ИИ, требующий значительно меньше вычислительных ресурсов или более быстрое достижение искусственного общего интеллекта (AGI), может поставить под сомнение текущие предположения о необходимости экспоненциального роста вычислительных мощностей.
Связанная статья
Шведский стартап в области искусственного интеллекта Lovable Eyes достиг оценки в 13,2 миллиарда долларов после крупного раунда финансирования
По мере того как инструменты для программирования на основе искусственного интеллекта набирают популярность, шведский стартап Lovable привлек крупный раунд финансирования. Компания нацелена на привлечение $3 млрд, что потенциально может увеличить её
Google тестирует агента Remy AI для Gemini по мере смещения фокуса на управление пользователями
Согласно Business Insider, Google тестирует Remy, нового ИИ-персонального агента для Gemini. Этот инструмент предназначен для выполнения задач от имени пользователей, упрощая как профессиональные рабочие процессы, так и повседневные рутины.В настоящ
Как исправить Core Web Vitals для улучшения позиций в поисковой выдаче
Оптимизация написания комментариев в отчетных карточках с помощью ИИ-инструментовВведениеИИ-инструменты для генерации комментариев в отчетных карточкахMagic SchoolAlmanac AIChat GPTИспользование Magic School для генерации комментариев в отчетны
Рекомендации по связанным специальным темам
Комментарии (37)
So we're basically trading human brainpower for literal power plants? AI is cool but the energy cost is insane. 😅
Holy crap, that's a lot of juice! 😅 I knew AI training was power-hungry, but comparing it to multiple NYC's worth of electricity by 2026 really puts it in perspective. Are we just gonna ignore the environmental cost while chasing bigger models? Hope Nvidia's got some efficiency tricks up their sleeves...
So AI's energy consumption might outpace entire cities? 😳 That puts the 'cost' of innovation into a whole new perspective. Will there be a breakthrough in energy-efficient hardware soon, or are we just betting on renewable energy scaling fast enough?
Wow, Energieverbrauch wie mehrere New Yorks bis 2026? Das ist krass. Die AI-Boom ist ja mega spannend, aber wenn Data Center bald mehr Strom als Länder fressen... irgendwie gruselig. Macht man sich Gedanken über Klima und ob das wirklich nachhaltig ist. 🤔 Hoffentlich forscht man auch an effizienteren Lösungen, sonst knallt's.
AIの消費電力がニューヨーク市全体を超えるなんて…技術革新と環境負荷のバランスが気になりますね。電力を食い尽くす前に再生可能エネルギーへの移行が必要では?🌍 日本でもAIデータセンターの増設が進んでいますが、電力問題は他人事じゃないです。
Nvidia и партнеры расширяют центры данных для ИИ по всему миру
Nvidia вместе со своими партнерами и клиентами активно расширяет масштабы компьютерных центров по всему миру, чтобы удовлетворить высокие вычислительные потребности для обучения масштабных моделей искусственного интеллекта (ИИ), таких как GPT-4. Это расширение станет еще более важным по мере вывода дополнительных моделей ИИ в эксплуатацию, отметил Томас Грэм, сооснователь стартапа в области оптических вычислений Lightmatter. В недавнем интервью в Нью-Йорке с Мандипом Сингхом, старшим аналитиком по технологиям из Bloomberg Intelligence, Грэм подчеркнул возрастающую потребность в вычислительных ресурсах.
«Спрос на увеличение вычислительных мощностей связан не только с законами масштабирования; речь также идет о развертывании этих моделей ИИ уже сейчас», — объяснил Грэм. Сингх поинтересовался будущим больших языковых моделей (LLM), таких как GPT-4, и будут ли они продолжать расти в размерах. В ответ Грэм переключил внимание на практическое применение ИИ, подчеркнув важность инференса, или фазы развертывания, которая требует значительных вычислительных мощностей.
«Если рассматривать обучение как исследования и разработки, то инференс — это, по сути, развертывание. При развертывании вам потребуются крупномасштабные компьютеры для работы ваших моделей», — заявил Грэм на конференции «Gen AI: Может ли он оправдать обещания продуктивности?», организованной Bloomberg Intelligence.
Точка зрения Грэма совпадает с мнением генерального директора Nvidia Дженсена Хуанга, который подчеркнул на Уолл-стрит, что развитие «агентных» форм ИИ потребует не только более сложного обучения, но и значительно улучшенных возможностей инференса, что приведет к экспоненциальному росту потребностей в вычислительных мощностях.

Роль Lightmatter в инфраструктуре ИИ
Основанная в 2018 году, Lightmatter находится на передовой разработки технологий чипов, использующих оптические соединения для связи нескольких процессоров на одном полупроводниковом кристалле. Эти оптические межсоединения могут передавать данные более эффективно, чем традиционные медные провода, потребляя меньше энергии. Эта технология может оптимизировать соединения внутри и между стойками центров данных, повышая общую эффективность и экономичность центров данных, отметил Грэм.
«Заменяя медные дорожки в центрах данных — как на печатных платах серверов, так и в кабелях между стойками — на оптоволокно, мы можем значительно увеличить пропускную способность», — рассказал Грэм Сингху. Lightmatter в настоящее время сотрудничает с различными технологическими компаниями над проектированием новых центров данных, и Грэм отметил, что эти объекты строятся с нуля. Компания уже установила партнерство с Global Foundries, контрактным производителем полупроводников с операциями в северной части штата Нью-Йорк, который обслуживает клиентов, таких как Advanced Micro Devices.
Хотя Грэм не раскрыл конкретных партнеров и клиентов помимо этого сотрудничества, он намекнул, что Lightmatter работает с поставщиками кремния, такими как Broadcom или Marvell, для создания специализированных компонентов для технологических гигантов, таких как Google, Amazon и Microsoft, которые разрабатывают собственные процессоры для центров данных.
Масштабы и будущее центров данных для ИИ
Чтобы проиллюстрировать масштабы развертывания ИИ, Грэм указал, что как минимум дюжина новых центров данных для ИИ либо планируется, либо уже строится, каждый из которых требует гига ватта энергии. «Для контекста, Нью-Йорк потребляет около пяти гига ватт энергии в среднем за день. Таким образом, речь идет о потреблении энергии, эквивалентном нескольким Нью-Йоркам», — сказал он. Он прогнозирует, что к 2026 году глобальная обработка ИИ потребует 40 гига ватт энергии, что эквивалентно восьми Нью-Йоркам, специально для центров данных ИИ.
Lightmatter недавно привлекла инвестиции венчурного капитала в размере 400 миллионов долларов, оценив компанию в 4,4 миллиарда долларов. Грэм упомянул, что компания планирует начать производство «в ближайшие несколько лет».
На вопрос о возможных препятствиях для планов Lightmatter Грэм выразил уверенность в постоянной потребности в расширении инфраструктуры вычислений для ИИ. Однако он признал, что прорыв в алгоритмах ИИ, требующий значительно меньше вычислительных ресурсов или более быстрое достижение искусственного общего интеллекта (AGI), может поставить под сомнение текущие предположения о необходимости экспоненциального роста вычислительных мощностей.
Шведский стартап в области искусственного интеллекта Lovable Eyes достиг оценки в 13,2 миллиарда долларов после крупного раунда финансирования
По мере того как инструменты для программирования на основе искусственного интеллекта набирают популярность, шведский стартап Lovable привлек крупный раунд финансирования. Компания нацелена на привлечение $3 млрд, что потенциально может увеличить её
Как исправить Core Web Vitals для улучшения позиций в поисковой выдаче
Оптимизация написания комментариев в отчетных карточках с помощью ИИ-инструментовВведениеИИ-инструменты для генерации комментариев в отчетных карточкахMagic SchoolAlmanac AIChat GPTИспользование Magic School для генерации комментариев в отчетны
So we're basically trading human brainpower for literal power plants? AI is cool but the energy cost is insane. 😅
Holy crap, that's a lot of juice! 😅 I knew AI training was power-hungry, but comparing it to multiple NYC's worth of electricity by 2026 really puts it in perspective. Are we just gonna ignore the environmental cost while chasing bigger models? Hope Nvidia's got some efficiency tricks up their sleeves...
So AI's energy consumption might outpace entire cities? 😳 That puts the 'cost' of innovation into a whole new perspective. Will there be a breakthrough in energy-efficient hardware soon, or are we just betting on renewable energy scaling fast enough?
Wow, Energieverbrauch wie mehrere New Yorks bis 2026? Das ist krass. Die AI-Boom ist ja mega spannend, aber wenn Data Center bald mehr Strom als Länder fressen... irgendwie gruselig. Macht man sich Gedanken über Klima und ob das wirklich nachhaltig ist. 🤔 Hoffentlich forscht man auch an effizienteren Lösungen, sonst knallt's.
AIの消費電力がニューヨーク市全体を超えるなんて…技術革新と環境負荷のバランスが気になりますね。電力を食い尽くす前に再生可能エネルギーへの移行が必要では?🌍 日本でもAIデータセンターの増設が進んでいますが、電力問題は他人事じゃないです。











