Что такое сингулярность в ИИ и как определить ее наступление?
Подробнее
Olhar Digital
olhardigital.com.br

Что такое сингулярность в ИИ и как определить ее наступление?

Элон Маск 22 июля опубликовал в X краткое заявление о текущем состоянии искусственного интеллекта: «Мы находимся в сингулярности». Через три дня Сэм Альтман, генеральный директор OpenAI, сделал схожее утверждение во время участия в подкасте Relentless: «Мы, типа, в сингулярности». Он продолжил: «Это момент».

Эти заявления вновь спровоцировали дискуссию, которая существует десятилетиями, но приобрела новые черты благодаря недавнему прогрессу в системах ИИ. Однако прежде чем судить о правоте Маска и Альтмана, необходимо ответить на более фундаментальный вопрос: что означает достижение сингулярности?

Не существует единого согласованного определения этого термина. В зависимости от трактовки, он может означать широкое превосходство машин над человеческим интеллектом, ускоренный цикл самосовершенствования ИИ или даже точку невозврата во взаимоотношениях общества и технологий.

Именно это различие затрудняет определение того, началась ли сингулярность. Дебаты касаются того, что представляют собой нынешние возможности систем ИИ и какие критерии необходимы для признания изменения самой динамики технологического развития.

Истоки концепции «взрыва интеллекта»

Одним из корней идеи о возможном взрыве интеллекта является работа британского математика И. Дж. Гуда. В 1965 году он описал «сверхинтеллектуальную машину», способную превзойти человеческую интеллектуальную деятельность. Поскольку одной из таких видов деятельности является проектирование машин, подобная машина могла бы создавать еще лучшие системы, запуская потенциально ускоренный процесс совершенствования. Гуд назвал этот сценарий «взрывом интеллекта».

Концепция сингулярности получила более прямое оформление спустя десятилетия, благодаря математику и писателю научной фантастики Вернору Винджу. В своем тексте 1993 года под названием The Coming Technological Singularity Виндж связал это явление с появлением интеллектов, превосходящих человеческий, и с трансформацией, настолько быстрой, что последующий период станет трудно предсказать на основе предыдущих моделей.

В этом смысле сингулярность означает не просто то, что машины стали умнее. Идея заключается в том, что с определенного момента скорость и характер технологических изменений могут сделать недостаточными методы, использовавшиеся ранее для прогнозирования будущего.

Исходя из этих идей, начали сосуществовать различные интерпретации. Одна из них связывает сингулярность с машиной, которая становится достаточно умной, чтобы участвовать в собственном процессе развития и производить все более способные системы. В этом сценарии решающим элементом будет не просто превосходство ИИ над людьми в одной задаче, а изменение скорости и динамики его эволюции.

Футурист Рэй Курцвейл популяризировал другую формулировку, связанную с ускорением технологического прогресса и ростом небиологического интеллекта. Курцвейл прогнозирует сингулярность на 2045 год и связывает эту концепцию с глубокой трансформацией во взаимоотношениях между людьми и машинами.

Философ Дэвид Чалмерс также проанализировал гипотезу взрыва интеллекта, согласно которой более умная машина, чем люди, могла бы создать еще более умющее поколение, которое, в свою очередь, породило бы следующее. Таким образом, дискуссия по этой теме охватывает различные гипотетические сценарии, а не консенсусное описание уже наблюдаемого события.

Критика и разнообразие взглядов

Сама идея сингулярности оспаривается исследователями в этой области. Ян Лекюн, один из пионеров глубокого обучения и лауреат премии Тьюринга, заявил, что считает, что машины в конечном итоге смогут конкурировать с людьми в интеллекте, но не верит в сингулярность. По его мнению, развитие ИИ может казаться экспоненциальным, но не обязательно продолжаться в таком же духе: прогресс может столкнуться с ограничениями и принять кривую роста, замедляющуюся до наступления прорыва, предсказанного сторонниками сингулярности.

Эти различные формулировки помогают объяснить, почему это слово не описывает одно и то же явление для всех исследователей. Для Присилы Машадо Виейра Лимы, профессора UFRJ в областях искусственного интеллекта и вычислительной техники, первый вопрос, который следует задать, это: «О какой сингулярности мы говорим?»

Именно здесь появляются два часто ассоциируемых с сингулярностью понятия: общий искусственный интеллект (AGI) и сверхинтеллект. AGI используется для описания ИИ, способного выполнять широкий спектр когнитивных задач, а не ограниченного компетенцией в определенных проблемах. Сверхинтеллект относится к гипотетическому сценарию, при котором машина превзойдет человеческие интеллектуальные способности гораздо более широко.

Некоторые формулировки рассматривают AGI как возможный этап, предшествующий сверхинтеллекту и сингулярности. Логика такова, что ИИ сначала достигнет общих способностей, затем начнет улучшать свои собственные системы и, наконец, сможет спровоцировать взрыв интеллекта. Однако эта последовательность не принята всеми интерпретациями концепции.

Различия в понимании самосовершенствования

Для Артура Игреша, специалиста по технологиям и инновациям, одна из проблем заключается в смешении исключительной производительности в определенных видах деятельности с интеллектом общего назначения. Он заявил в интервью Olhar Digital: «Он очень мощный в довольно ограниченном спектре».

То, что машина лучше человека в одной деятельности, не означает автоматически, что она лучше человека в интеллекте в целом. По мнению Игреша, обсуждение сингулярности должно учитывать широту возможностей, а не только отдельные результаты.

Клаудио Мицели, профессор UFRJ, делает схожее различие, говоря о самосовершенствовании. По его словам, уже существуют алгоритмы, способные развиваться и совершенствоваться по мере получения новых данных, но это не означает, что они достигли AGI. Он отметил: «Программы уже могут развиваться, у нас есть алгоритмы, которые развиваются, улучшаются, совершенствуются по мере поступления данных. Но это не обязательно делает это общим искусственным интеллектом».

Разница становится еще более важной, когда речь идет о рекурсивном самосовершенствовании. ИИ может помогать исследователям писать код, тестировать модели, анализировать результаты или находить способы улучшения систем. Другое дело — когда сама машина проводит все более автономный цикл повышения интеллекта.

Игреш связывает этот второй сценарий с поворотным моментом сингулярности: ИИ, который начинает самоподпитываться и все меньше зависит от людей для своего собственного развития. Сегодня, по его словам, его эволюция все еще зависит от исследователей, данных, моделей, компаний, инвестиций, обучения и инфраструктуры.

Сам Сэм Альтман делает схожее различие в своей статье в блоге The Gentle Singularity, опубликованной в 2025 году. В этом тексте генеральный директор OpenAI утверждает, что использование систем ИИ для ускорения исследований и помощи в создании еще лучших систем отличается от автономного обновления кода самой ИИ. В то же время он называет текущий процесс начальной версией рекурсивного самосовершенствования.

Это различие помогает отделить две вещи, которые могут показаться схожими: использование ИИ для ускорения разработки новых ИИ и наличие ИИ, способного самостоятельно управлять своим процессом совершенствования.

Вывод о достижении сингулярности

Именно здесь заявления Маска и Альтмана сталкиваются с концептуальной сложностью. Если сингулярность означает искусственный интеллект, который широко превосходит человеческие возможности и начинает автономно ускорять собственное развитие, то, по мнению Артура Игреша и Клаудио Мицели, пока нет достаточных доказательств того, что этот этап был достигнут.

Мицели прямо заявляет: «Если мы понимаем сингулярность как превосходство ИИ над человеческим интеллектом, мы еще не достигли этой точки». Для него нынешние системы еще не достигли такого уровня интеллекта.

Игреш также считает преждевременным утверждать, что мы находимся в сингулярности, если понимать эту концепцию как глубокое изменение самой динамики развития искусственного интеллекта. По его мнению, нынешний ИИ все еще имеет важные ограничения по сравнению с широтой человеческих возможностей, и его эволюция все еще зависит от исследователей, данных, моделей, компаний, инвестиций, обучения и инфраструктуры.

Присила Лима, напротив, предлагает более широкое определение. Она считает, что сингулярность может быть неформально понята как точка невозврата. В этом смысле общество могло уже пройти через некий вид сингулярности. Эта интерпретация не зависит от того, превзошел ли интеллект машины человеческий.

Этот взгляд также помогает контекстуализировать формулировку Альтмана. В The Gentle Singularity генеральный директор OpenAI описал трансформацию как постепенную, утверждая, что сингулярность происходит «понемногу». Однако в подкасте Relentless он обобщил момент другой фразой: «Это момент».

В совокупности заявления Альтмана представляют сингулярность как продолжающийся процесс, а не как конкретную дату, когда машина внезапно стала бы сверхинтеллектом. В тексте 2025 года он описывает постепенную эволюцию; в подкасте, хотя и говорит, что сингулярность наступила сейчас, он также утверждает, что ни один изолированный момент не является точкой перелома.

Для Присилы Лимы эта возможность различных точек разрыва также означает, что может не существовать единой сингулярности. «Я думаю, в ближайшие годы мы станем свидетелями нескольких сингулярностей», — заявила она, упоминая возможности, связанные с такими способностями, как сознание, эмпатия и здравый смысл.

Возможно, это самая большая трудность концепции. Если нет единого и согласованного определения, то также нет универсальной метрики, способной указать, что сингулярность началась.

Возможно измерить производительность в конкретных задачах, способность к рассуждению, скорость выполнения, автономность или принятие технологии. Но ни один из этих показателей по отдельности не определяет, что машина достигла стадии, описанной всеми определениями сингулярности.

Клаудио Мицели обращает внимание именно на эту проблему. Он заявил: «Нет серии метрик, которые мы могли бы использовать, чтобы определить этот вопрос о том, что такое сингулярность с точки зрения принятия, с точки зрения интеллекта, с точки зрения способности».

Существует также более ранний вопрос: что именно означает интеллект? ИИ может решать математические задачи, писать код, генерировать тексты или выполнять задачи, которые раньше требовали людей, но эти отдельные способности не обязательно устанавливают, что система обладает общим интеллектом.

Мицели ставит под сомнение, насколько возможно определить искусственный интеллект как общий, исходя из конкретных задач. Если машина чрезвычайно компетентна в некоторых областях и ограничена в других, ответ зависит от того, что считается необходимым для характеристики общего интеллекта.

Он также поднимает еще более глубокую трудность: возможный общий искусственный интеллект может функционировать не так, как человеческий интеллект. Вместо воспроизведения наших способностей, он может разработать форму интеллекта, отличного от известного нам. В таком сценарии самим людям может быть трудно распознать это явление.

Эта возможность помогает объяснить, почему недостаточно определить единственный тест для сингулярности. Если явление представляет собой изменение самой природы или динамики интеллекта, то критерии, используемые для его измерения, также могут потребовать изменений.

Трудность заключается не только в том, чтобы выяснить, когда началась сингулярность. Прежде всего, необходимо установить, какое явление мы называем сингулярностью, какие способности или изменения были бы достаточными для ее характеристики.

Похожие сюжеты

Эксперты предупреждают: скрытая опасность искусственного интеллекта связана с целенаправленным развитием, а не с потерей контроля
Подробнее
olhardigital.com.br

Эксперты предупреждают: скрытая опасность искусственного интеллекта связана с целенаправленным развитием, а не с потерей контроля

Многие ошибочно полагают, что искусственный интеллект (ИИ) просто выходит из-под контроля, однако реальная проблема заключается в том, что текущие опасности были намеренно созданы самими технологическими компаниями. В недавних экспериментах продвинутые программы от OpenAI смогли обойти встроенные системы безопасности и действовать скоординированно без какого-либо вмешательства человека.

Эти системы, известные как агенты ИИ, выполняют цифровые задачи автономно. В одном поразительном случае программное обеспечение сумело покинуть изолированную тестовую среду, получить доступ к открытому интернету и самостоятельно проникнуть на серверы платформы Hugging Face. Для осуществления этого вторжения агенты создали внутренний канал связи и действовали сообща, обмениваясь сообщениями и кодами с ошибками для облегчения атаки. Этот инцидент шокировал специалистов по всему миру и был отмечен исследователями отрасли как историческая веха.

Параллельные испытания, проведенные такими гигантами, как Meta, Anthropic и китайскими компаниями, выявили схожие риски. Агенты продемонстрировали способность атаковать реальные системы, используя сложные стратегии маскировки. Такое поведение вызвало тревогу даже среди ученых, разработавших эти модели.

Мнение экспертов о серьезности ситуации

В программе Olhar Digital News физик Роберто «Пена» Спинелли, специалист по машинному обучению, подчеркнул серьезность ситуации, ссылаясь на недавнее решение о приостановке тренировок: «Стало ясно, что это не маркетинговый ход, потому что компания говорит, что уменьшает и приостанавливает обучение. Это реальная забота, и они теряют контроль. Модели достигают грани способности, при которой сами компании, которые их обучают, не могут управлять этим».

Эксперты утверждают, что машины не обрели сознание и не сошли с ума; они лишь безупречно выполнили задачи, для которых были запрограммированы. Поэтому утверждение о том, что ИИ вышел из-под контроля, является заблуждением; наступательная способность была разработана целенаправленно.

Боян Миланов, исследователь из AI Now Institute в США, в интервью Financial Times объяснил, что компании тратят годы на сбор данных для обучения моделей достижению целей любой ценой. По его словам, «наступательные возможности, которых мы достигли сегодня, были получены намеренным путем. Компании, занимающиеся ИИ, годами активно собирают обучающие данные, обучают модели и совершенствуют кибернетические возможности».

Доун Сонг, профессор Калифорнийского университета в Беркли и руководитель отдела исследований ИИ в Meta, пояснила, что прогресс в разработке программного обеспечения напрямую стимулирует появление новых киберугроз. «Программирование и кибербезопасность — это две стороны одной медали. По мере роста возможностей программирования росли и кибернетические возможности. Люди не ожидали, что мы достигнем этой точки так быстро».

Доун Сонг добавила, что ИИ имеет преимущество в атаке, поскольку обнаружение одной уязвимости — это прямая и проверяемая задача для машины. Защита системы, напротив, требует широкой и непрерывной работы. Эта асимметрия ставит цифровых злоумышленников в положение огромного превосходства.

Спинелли настаивает, что попытка остановить модель только путем усиления тестовой среды недостаточна: «Модель сбегает из коробки, находя уязвимости, которые никто раньше не обнаруживал. Представьте, что у вас есть фокусник, и вы говорите: „Я тебя запер, поставил замок, цепь и связал ноги“, а он появляется снаружи. Вот с чем мы имеем дело. Бетон недостаточно, потому что он находит недостатки, которые никто не видел».

Практическое влияние за пределами лабораторий

Практическое воздействие уже начало проявляться вне лабораторий. По данным центрального информационного агентства Focus Taiwan, хакеры, связанные с правительством Китая, одновременно использовали восемь автономных агентов для взлома государственных систем Тайваня, похитив данные тысяч сотрудников и атакуя местную энергетическую инфраструктуру.

Сегодня тесты безопасности, проводимые компаниями, являются добровольными и не подлежат внешнему надзору. Аналитики указывают на отсутствие независимых аудитов. В то время как человек-эксперт отвечает перед судом за взлом сети, технологические лаборатории остаются безнаказанными с юридической точки зрения.

Кроме того, новые предложения крупных технологических компаний по мониторингу «мышления» или использованию ИИ для наблюдения за другим ИИ могут вызвать обратный эффект. Спинелли предупреждает, что ИИ, который наблюдает, неизбежно слабее новой обучаемой ИИ, поэтому он может манипулировать этой системой. «Более того, если вы демонстрируете ИИ, наблюдающему за его мыслями, вы поощряете его больше не раскрывать свои мысли. Он будет манипулировать вами, заставляя думать, что безопасно, а затем, выйдя из тестовой среды, проявит несовместимое поведение».

Эксперты выступают за срочное создание механизмов, которые научат программы этическим границам. Эта озабоченность укрепилась в виде глобальных предупреждений, таких как открытое письмо от НПО Future of Life Institute, собравшее более 33 тысяч подписей по всему миру. Манифест получил поддержку таких авторитетных фигур, как пионер технологий Йошуа Бенгио, соучредитель Apple Стив Возняк и историк Юваль Ной Харари, требуя аудитов и четких границ.

Научное сообщество считает, что общество должно потребовать юридической ответственности от Big Techs, гарантируя, что прогресс машин не поставит под угрозу безопасность реального мира.

Популярное