Сегодня 19 октября 2026
18+
MWC 2018 2018 Computex IFA 2018
реклама
Новости Software

Google намерена узнать, что произойдёт, когда миллионы ИИ-агентов начнут действовать вместе

Специализирующееся на изучении и разработке систем искусственного интеллекта подразделение Google DeepMind объявило в выделении финансирования в размере $10 млн на изучение сценариев, при которых несколько миллионов ИИ-агентов начинают взаимодействовать друг с другом. В проекте согласились принять участие несколько частных и государственных организаций со всего мира.

 Источник изображения: deepmind.google

Источник изображения: deepmind.google

Всего через несколько месяцев во всём мире ИИ-агенту будут развёрнуты в таких масштабах, что сопутствующие риски станут реальной проблемой, и учёные хотят опередить этот момент. Потенциальные угрозы сводятся к усиленным вариантам неблагоприятных сценариев, которые наблюдаются уже сегодня: мошеннические схемы, инъекции в запросах, которые превращают ИИ-агентов в самонаводящееся вредоносное ПО, и другие формы кибератак. Единственный способ понять, что может произойти, когда большое количество многоагентных систем будет взаимодействовать друг с другом — провести реалистичные симуляции: поместить ИИ-агентов в «песочницы» и наблюдать за их поведением.

Не получится предсказать, что произойдёт, если изучать отдельных агентов или даже нескольких агентов изолированно. И нельзя предполагать, что выполняющие инструкции больших языковых моделей ИИ-агенты будут действовать рационально — сложность возникает в условиях огромного числа одновременных взаимодействий. Есть версия, которую не исключают и в Google DeepMind, что сильный ИИ (AGI) возникнет не из одной сверхумной модели, а станет порождением своего рода коллективного разума ИИ-агентов, где возможности группы оказываются сильнее, чем суммы её частей.

Google DeepMind — не единственный крупный разработчик, предупреждающий об угрозах, исходящих от технологий, которые он создаёт. Ранее Anthropic опубликовала рекомендации по развёртыванию ИИ-агентов, основанные на принципе «нулевого доверия»: следует исходить из того, что компьютерная система уязвима, агент является злоумышленником, и взлом неизбежен. Ранее подходы к обеспечению кибербезопасности имели в основе предположение, что объект, от которого исходит угроза — это написанное человеком ПО, выполняющее фиксированные действия по фиксированным траекториям, указывают эксперты. ИИ-агент действует иначе: он рассуждает, импровизирует, и его можно взломать всего одной фразой в документе, который ему предлагается прочитать. В рамках проекта важно не упускать из виду не только экзотические гипотетические сценарии, но и скучные проблемы, которые уже существуют.

Было интересно? Скажите об этом Google, чтобы чаще получать ссылки на наши новости про искусственный интеллект

Источник:

Если вы заметили ошибку — выделите ее мышью и нажмите CTRL+ENTER.
Материалы по теме

window-new
Soft
Hard
Тренды 🔥
Звезда Cyberpunk 2077 Хидео Кодзима вернётся в Найт-Сити ради Cyberpunk: Edgerunners 2 4 мин.
Российский рынок промышленного ИИ достигнет 134 млрд рублей к 2030 году 2 ч.
Anthropic направит до 20 % акций на благотворительность — в том числе для борьбы с безработицей из-за ИИ 6 ч.
Разработчик экшена Samson подал на банкротство — сотрудники Liquid Swords несколько месяцев не получали зарплату 16 ч.
Анонсирован Encryption — хоррор о поисках пропавшей дочери в охваченной лесными пожарами Италии 20 ч.
Новая статья: TOEM 2 — в одну уютную реку дважды. Рецензия 18-10 00:07
Сервер или люди? ИИ проверили задачей о вагонетке — и пожалели 17-10 17:05
Криптобиржа Bitget закрыла доступ к сервисам жителям России и Беларуси 17-10 16:35
Anthropic предложила американским законодателям собственный законопроект о регулировании отрасли ИИ 17-10 07:11
ИИ-модели Google достигли переломного момента: вскоре они смогут самосовершенствоваться 17-10 06:37
Старые iPhone станут донорами для новых китайских смартфонов — всё из-за дефицита памяти 2 ч.
У складного iPhone батарея оказалась меньше, чем у iPhone 18 Pro Max — Apple раскрыла точную ёмкость 2 ч.
Сдача ЦОД Nscale в норвежском Глом-фьорде отложена на полгода из-за пожара, утечек в системе охлаждения и более серьёзных проблем 2 ч.
SAMA B850 — блок питания для современных игровых ПК с сертификацией Cybenetics и не только 2 ч.
Великобритания отклонило заявку на создание 1,2-ГВт «углеродно-отрицательного» ИИ ЦОД в рамках программы AI Growth Zone 2 ч.
Microsoft: компонуемая память поможет преодолеть ограничения в ИИ-инфраструктуре 3 ч.
Biostar представила одноплатный компьютер BIWCL-PAT на базе Intel Wildcat Lake для AIoT-приложений 3 ч.
Navitas и NVIDIA создали плату питания мощностью 24 кВт для ИИ ЦОД 3 ч.
Nvidia объединяет: TSMC поможет Samsung выпускать скоростную ИИ-память NVHBM 3 ч.
Восемь на одного: Meta представила сетевую архитектуру Flattened Planar Fabric для ИИ-инфраструктуры 4 ч.