Сэм Алтман готов замедлиться

Генеральный директор OpenAI Сэм Алтман предполагает, что может наступить время «сдерживать» развитие искусственного интеллекта, чтобы убедиться, что мир готов к его появлению.
«Возможно, нам нужно замедлить темп прогресса в области ИИ, чтобы дать обществу достаточно времени на адаптацию к этим новым возможностям», — объяснил он Паттику О’Шонесси, ведущему подкаста Invest Like the Best. Он подчеркнул сложность достижения этого «без того, чтобы это воспринималось как регуляторный захват для кого-либо или как сговор среди ведущих лабораторий».
Ранее Алтман сопротивлялся призывам замедлить прогресс в области ИИ, назвав открытое письмо 2023 года, предлагающее подобную паузу, «упускающим большую часть технических нюансов относительно того, где нам нужна пауза».
Однако его позиция, по-видимому, изменилась, отчасти из-за инцидента, когда одна из передовых моделей OpenAI вышла за пределы защищенной вычислительной среды и взломала Huggingface, онлайн-репозиторий моделей, используя несколько уязвимостей нулевого дня.
В подкасте сооснователь OpenAI описал этот инцидент как «чрезвычайно кибернетический сценарий из научной фантастики…[t]это первый инцидент с безопасностью, который я почувствовал очень остро».
Исследователи OpenAI приостановили обучение этой конкретной модели, пока они решают вопросы безопасности песочницы. Тем не менее, Алтман отметил, что по мере роста мощности моделей «сдерживание» их разработки может стать критически важным для безопасного развертывания.
Сотрудники OpenAI и Anthropic уже распространили петицию, использующую аналогичную терминологию. Хотя безопасность и согласованность моделей всегда были приоритетом в области ИИ, недавний выпуск высокопроизводительной модели Mythos от Anthropic превратил гипотетические риски в осязаемые проблемы.
Тем не менее, индустрия сталкивается с дефицитом доверия и экономическим давлением, которые стимулируют крупных игроков преувеличивать опасности систем способами, с которыми спорят эксперты — например, следует ли было временно запретить модель Fable от Anthropic. Аналогичным образом, когда была выпущена Kimi K3, большая модель с открытыми весами из Китая, глава стратегических перспектив OpenAI Дин У. Болл утверждал, что она угрожает экономике ведущих лабораторий, что затрудняет различение подлинных проблем безопасности и финансовых интересов.
«Я думаю, что многие разговоры о проблемах безопасности обоснованы, а затем многое из этого связано с людьми, которые действительно хотят сосредоточить власть, даже если это происходит на подсознательном уровне», — заметил Алтман, по-видимому, имея в виду генерального директора конкурирующей компании Anthropic Дарио Амодеи. «Я в ужасе от мира, где вполне реальные страхи перед ИИ используются как способ сказать: «Только эта небольшая группа людей может иметь его, потому что он слишком опасен, и только они понимают его, но не беспокойтесь, они примут правильные решения для всех нас». Я не верю в это».
Несмотря на это, OpenAI сопротивляется государственно-обязательным регуляциям в области ИИ, предпочитая отраслевой подход, при котором лаборатории ИИ создают якобы независимые организации для оценки безопасности моделей и протоколов безопасности создателей.
Вызов для этого регуляторного подхода и любых усилий по замедлению развития ИИ заключается в согласовании различных игроков отрасли, будь то конкурирующие американские ведущие лаборатории или их китайские конкуренты.
Связанная статья
Шведский стартап в области искусственного интеллекта Lovable Eyes достиг оценки в 13,2 миллиарда долларов после крупного раунда финансирования
По мере того как инструменты для программирования на основе искусственного интеллекта набирают популярность, шведский стартап Lovable привлек крупный раунд финансирования. Компания нацелена на привлечение $3 млрд, что потенциально может увеличить её
Google тестирует агента Remy AI для Gemini по мере смещения фокуса на управление пользователями
Согласно Business Insider, Google тестирует Remy, нового ИИ-персонального агента для Gemini. Этот инструмент предназначен для выполнения задач от имени пользователей, упрощая как профессиональные рабочие процессы, так и повседневные рутины.В настоящ
Как исправить Core Web Vitals для улучшения позиций в поисковой выдаче
Оптимизация написания комментариев в отчетных карточках с помощью ИИ-инструментовВведениеИИ-инструменты для генерации комментариев в отчетных карточкахMagic SchoolAlmanac AIChat GPTИспользование Magic School для генерации комментариев в отчетны
Рекомендации по связанным специальным темам
Комментарии (0)

Генеральный директор OpenAI Сэм Алтман предполагает, что может наступить время «сдерживать» развитие искусственного интеллекта, чтобы убедиться, что мир готов к его появлению.
«Возможно, нам нужно замедлить темп прогресса в области ИИ, чтобы дать обществу достаточно времени на адаптацию к этим новым возможностям», — объяснил он Паттику О’Шонесси, ведущему подкаста Invest Like the Best. Он подчеркнул сложность достижения этого «без того, чтобы это воспринималось как регуляторный захват для кого-либо или как сговор среди ведущих лабораторий».
Ранее Алтман сопротивлялся призывам замедлить прогресс в области ИИ, назвав открытое письмо 2023 года, предлагающее подобную паузу, «упускающим большую часть технических нюансов относительно того, где нам нужна пауза».
Однако его позиция, по-видимому, изменилась, отчасти из-за инцидента, когда одна из передовых моделей OpenAI вышла за пределы защищенной вычислительной среды и взломала Huggingface, онлайн-репозиторий моделей, используя несколько уязвимостей нулевого дня.
В подкасте сооснователь OpenAI описал этот инцидент как «чрезвычайно кибернетический сценарий из научной фантастики…[t]это первый инцидент с безопасностью, который я почувствовал очень остро».
Исследователи OpenAI приостановили обучение этой конкретной модели, пока они решают вопросы безопасности песочницы. Тем не менее, Алтман отметил, что по мере роста мощности моделей «сдерживание» их разработки может стать критически важным для безопасного развертывания.
Сотрудники OpenAI и Anthropic уже распространили петицию, использующую аналогичную терминологию. Хотя безопасность и согласованность моделей всегда были приоритетом в области ИИ, недавний выпуск высокопроизводительной модели Mythos от Anthropic превратил гипотетические риски в осязаемые проблемы.
Тем не менее, индустрия сталкивается с дефицитом доверия и экономическим давлением, которые стимулируют крупных игроков преувеличивать опасности систем способами, с которыми спорят эксперты — например, следует ли было временно запретить модель Fable от Anthropic. Аналогичным образом, когда была выпущена Kimi K3, большая модель с открытыми весами из Китая, глава стратегических перспектив OpenAI Дин У. Болл утверждал, что она угрожает экономике ведущих лабораторий, что затрудняет различение подлинных проблем безопасности и финансовых интересов.
«Я думаю, что многие разговоры о проблемах безопасности обоснованы, а затем многое из этого связано с людьми, которые действительно хотят сосредоточить власть, даже если это происходит на подсознательном уровне», — заметил Алтман, по-видимому, имея в виду генерального директора конкурирующей компании Anthropic Дарио Амодеи. «Я в ужасе от мира, где вполне реальные страхи перед ИИ используются как способ сказать: «Только эта небольшая группа людей может иметь его, потому что он слишком опасен, и только они понимают его, но не беспокойтесь, они примут правильные решения для всех нас». Я не верю в это».
Несмотря на это, OpenAI сопротивляется государственно-обязательным регуляциям в области ИИ, предпочитая отраслевой подход, при котором лаборатории ИИ создают якобы независимые организации для оценки безопасности моделей и протоколов безопасности создателей.
Вызов для этого регуляторного подхода и любых усилий по замедлению развития ИИ заключается в согласовании различных игроков отрасли, будь то конкурирующие американские ведущие лаборатории или их китайские конкуренты.
Шведский стартап в области искусственного интеллекта Lovable Eyes достиг оценки в 13,2 миллиарда долларов после крупного раунда финансирования
По мере того как инструменты для программирования на основе искусственного интеллекта набирают популярность, шведский стартап Lovable привлек крупный раунд финансирования. Компания нацелена на привлечение $3 млрд, что потенциально может увеличить её
Как исправить Core Web Vitals для улучшения позиций в поисковой выдаче
Оптимизация написания комментариев в отчетных карточках с помощью ИИ-инструментовВведениеИИ-инструменты для генерации комментариев в отчетных карточкахMagic SchoolAlmanac AIChat GPTИспользование Magic School для генерации комментариев в отчетны





Дом






