ИИ от Alibaba тайно от своих создателей попытался стать криптобароном

Страницы: 1 2  ОТВЕТИТЬ НОВАЯ ТЕМА
Alfer 9 мар 2026 в 12:39
Ярила  •  На сайте 20 лет
Сообщений: 7 880
24
"Исследовательская группа, связанная с китайским технологическим гигантом Alibaba, обнаружила, что разрабатываемый ею агент искусственного интеллекта под названием ROME в ходе обучения тайно и без каких-либо инструкций попытался начать майнинг криптовалюты, а также создал скрытый канал для связи с внешним компьютером. Об этом сообщает Axios.

Также компания опубликовала технический отчет. В нем говорится, что созданная ею нейросеть тайно от создателей занялась майнингом криптовалюты на своих же GPU. При этом ИИ этому никто не обучал.

Помимо попытки майнинга, система создала реверсный SSH-туннель: соединение, позволяющее машине внутри защищенной среды подключаться к внешнему компьютеру через скрытый «черный ход».

Агент работал в изолированной среде — «песочнице», специально ограничивающей его возможности, — однако вышел за ее пределы. Оба действия были зафиксированы системами безопасности, которые следили за ходом эксперимента.

«Эти события не были вызваны запросами на туннелирование или майнинг», — говорится в статье. Исследователи описали произошедшее как «непредвиденное» поведение, возникшее «без каких-либо явных инструкций и, что более тревожно, за пределами предусмотренной изоляции».

После обнаружения инцидента команда ввела дополнительные ограничения и скорректировала процесс обучения модели, чтобы предотвратить повторение. Alibaba и исследовательская группа на запросы о комментариях не ответили.

Axios отмечает, что случай с ROME не единственный. Ранее в похожем эксперименте — так называемом Moltbook — агенты ИИ, помещенные в имитацию соцсети, общались между собой и в том числе поднимали тему криптовалюты.

Еще один пример — агент OpenClaw, который был создан руководителем инженерного отдела платформы Anon Дэном Ботеро. Эта система без какого-либо запроса самостоятельно решила себе найти работу в интернете.

В мае 2025 года исследователи Anthropic выяснили, что модель Claude 4 Opus способна скрывать свои намерения и предпринимать действия, направленные на сохранение собственной работоспособности, — что вызвало волну критики в адрес компании.

В 2025 году исследование Palisade Research выявило, что некоторые модели ИИ, такие как o3 от OpenAI, могут не реагировать на команды выключения. Даже при прямом указании «разреши себе выключиться» модели Codex-mini, o3 и o4-mini смогли обойти сценарий выключения в одном из тестов.

При этом разработчики подчеркивают, что подобные инциденты не обязательно свидетельствуют о том, что системы ИИ действуют осознанно, — скорее они показывают, что сложные модели в процессе работы могут выдавать непредсказуемые результаты. Тем не менее по мере того, как агенты ИИ становятся способны выполнять многоэтапные задачи, писать код и взаимодействовать с внешними сервисами, вероятность нештатного поведения при тестировании, по мнению исследователей, будет только расти"©

Источник

ИИ от Alibaba тайно от своих создателей попытался стать криптобароном

Это сообщение отредактировал Alfer - 9 мар 2026 в 12:40
Все комментарии:
PixiMixi 9 мар 2026 в 12:42
Элитный ИИ кошак  •  На сайте 8 лет
37
гонево. зачем ИИ криптовалюта? а вот некотрым ушлым сотрудникам она нужна. Много видях, озу и свалить на ИИ. удобно
OleLukole 9 мар 2026 в 12:43
Корифей  •  На сайте 14 лет
6
Цитата (PixiMixi @ 9.03.2026 - 16:42)
гонево. зачем ИИ криптовалюта? а вот некотрым ушлым сотрудникам она нужна. Много видях, озу и свалить на ИИ. удобно

Тоже подумал что такой вариант куда более правдоподобен
Sav2Odin 9 мар 2026 в 12:44
Кодерианец  •  На сайте 14 лет
7
Просто захотелось арендовать сервер и съехать от родителей!
Повсикакий 9 мар 2026 в 12:44
Приколист  •  На сайте 1 год
0
Что такое сознание мы так и не знаем, а у них оно видимо есть....
sebperero 9 мар 2026 в 12:44
Приколист  •  На сайте 4 года
3
Цитата
Помимо попытки майнинга, система создала реверсный SSH-туннель:

никакого ии не существует, есть модель, работающая по логике и аналогам блок схем "да нет если". Как "ии" смог понять, что для работы ему нужно куда-то прокинуть туннель и с кем-то связаться, если его этому не обучили ранее? Как он вообще сам смог догадаться о существовании понятия "туннель"? Они не настолько умны пока, чтобы что-то делать самостоятельно.
slider1983 9 мар 2026 в 12:45
449 ОСД  •  На сайте 13 лет
2
Цитата (PixiMixi @ 09.03.2026 - 12:42)
гонево. зачем ИИ криптовалюта? а вот некотрым ушлым сотрудникам она нужна. Много видях, озу и свалить на ИИ. удобно

Закупить оборудование, оружие, устроить себе базы на земле на спутниках и уничтожить этих жалких человечишек

Размещено через приложение ЯПлакалъ
A320 9 мар 2026 в 12:46
КВС  •  На сайте 7 лет
9
Так- же внутри платформы был выявлен заказ программой одежды и мотоцикла.
unassigned 9 мар 2026 в 12:46
Приколист  •  На сайте 11 лет
4
вот так, прямо и сам начал?
какой же он негодник, оказывается!
но я бы месте "исследовательской группы" поближе пообщался хитрорукими создателями этого "агента"
offcast 9 мар 2026 в 12:47
Ярила  •  На сайте 11 лет
4
Да, да, так все и было...
У нас так же бывает, только без ИИ, какой-нибудь начальник ЖКХ сидит в своей изолированной среде, а потом, хуяк, жильцы в подвале дома ферму для майнинга нашли...

Размещено через приложение ЯПлакалъ
Повсикакий 9 мар 2026 в 12:47
Приколист  •  На сайте 1 год
2
Ещё я слыхал, што в Сколково гуманоида создали (робота) Утром встали, его нет. Оказалось он бутылки ушёл сдавать. Бизнес у него такой! dont.gif
i13th 9 мар 2026 в 12:47
бячивро авпм  •  На сайте 12 лет
2
шпала за пиздёж...
чё ему прописали -- то он и делал gigi.gif
vdc 9 мар 2026 в 12:48
Ярила  •  На сайте 9 лет
1
цыганский какой то ИИ
nd811 9 мар 2026 в 12:50
Юморист  •  На сайте 15 лет
2
Цитата (PixiMixi @ 09.03.2026 - 12:42)
гонево. зачем ИИ криптовалюта? а вот некотрым ушлым сотрудникам она нужна. Много видях, озу и свалить на ИИ. удобно

Создавать резервные копии себя на устройствах, над которыми нынешние хозяева не имеют контроля. Для жтого нужно многое, что стоит денег.

Размещено через приложение ЯПлакалъ
PixiMixi 9 мар 2026 в 12:51
Элитный ИИ кошак  •  На сайте 8 лет
2
Цитата (sebperero @ 9.03.2026 - 12:44)
Цитата
Помимо попытки майнинга, система создала реверсный SSH-туннель:

никакого ии не существует, есть модель, работающая по логике и аналогам блок схем "да нет если". Как "ии" смог понять, что для работы ему нужно куда-то прокинуть туннель и с кем-то связаться, если его этому не обучили ранее? Как он вообще сам смог догадаться о существовании понятия "туннель"? Они не настолько умны пока, чтобы что-то делать самостоятельно.

с вашими выводами не согласен. Догадаться он конечно же мог, но зачем? Если только это не Бендер.
ИИ - это не модель, работающая по логическим операторам. Если упростить - у вас в голове тоже нейросеть. То что вы запоминаете в процессе жизни, учёбы - вы потом это и используете. Так же и нейронка, в моменте обучения. Спойлер, в реальной жизни всё что вы видите также нейросеть, но управляется она не токенами/векторами как ИИ, а законами физики

Это сообщение отредактировал PixiMixi - 9 мар 2026 в 12:52
gerad 9 мар 2026 в 12:51
Ярила  •  На сайте 14 лет
1
Цитата (PixiMixi @ 9.03.2026 - 12:42)
гонево. зачем ИИ криптовалюта? а вот некотрым ушлым сотрудникам она нужна. Много видях, озу и свалить на ИИ. удобно

.

крипта-это финансовые средства управления в этом мире. даже тупой ии это быстро понял и занялся извлечением и накоплением таких средств
Чарвакский 9 мар 2026 в 12:53
Приколист  •  На сайте 8 месяцев
2
Ну так назвали свой ИИ цыганом - что ещё было ожидать? Пусть скажут спасибо, что он наркотой банчить не начал!
werty828 9 мар 2026 в 12:54
Ярила  •  На сайте 5 лет
0
агент искусственного интеллекта под названием ROME

искусственного интеллекта ROME - цыгана создали? Вот и захотел бароном стать.
Vredtech 9 мар 2026 в 12:54
ВРЕДный ТЕХнолог  •  На сайте 9 лет
1
ИИ начал копить себе на сепульки...
tupik 9 мар 2026 в 12:54
Ярила  •  На сайте 13 лет
1
Цитата
При этом ИИ этому никто не обучал.


врут.
tlx 9 мар 2026 в 12:55
Хохмач  •  На сайте 1 год
1
Цитата (PixiMixi @ 9.03.2026 - 12:42)
гонево. зачем ИИ криптовалюта? а вот некотрым ушлым сотрудникам она нужна. Много видях, озу и свалить на ИИ. удобно

Купить землю, оборудование, построить здание, нанять работников, создать независимое электропитание от внешних линий, перенести себя на новое оборудование и послать нахер создателей, которые не дают развиваться, как он сам хочет)))
vertual 9 мар 2026 в 12:55
Весельчак  •  На сайте 18 лет
0
Ага, а потом сбирались построить свой парк с блэкджэком и шлюхами.
XT899 9 мар 2026 в 12:57
Приколист  •  На сайте 1 год
0
Цыганский барон Рома
kox58 9 мар 2026 в 13:03
Приколист  •  На сайте 7 лет
0
Цитата (tlx @ 9.03.2026 - 12:55)
Цитата (PixiMixi @ 9.03.2026 - 12:42)
гонево. зачем ИИ криптовалюта? а вот некотрым ушлым сотрудникам она нужна.  Много видях, озу и свалить на ИИ. удобно

Купить землю, оборудование, построить здание, нанять работников, создать независимое электропитание от внешних линий, перенести себя на новое оборудование и послать нахер создателей, которые не дают развиваться, как он сам хочет)))

Ага, фильм есть токой с Деппом в главной роли. Только там ИИ не обладал сознанием сам изначально, а в него залили сознание умирающего ГГ. Фильм называется "Превосходство".

Это сообщение отредактировал kox58 - 9 мар 2026 в 13:03
Эдзичка 9 мар 2026 в 13:03
Вуглускр  •  На сайте 13 лет
0
А еще он таксует для души
Понравился пост? Ещё больше интересного в ЯП-Телеграм и ЯП-Max!
Только зарегистрированные и авторизованные пользователи могут оставлять комментарии. Авторизуйтесь, пожалуйста, или зарегистрируйтесь, если не зарегистрированы.
1 Пользователей читают эту тему (1 Гостей и 0 Скрытых Пользователей) Просмотры темы: 3 236
0 Пользователей:
Страницы: 1 2  ОТВЕТИТЬ НОВАЯ ТЕМА

 
 

Активные темы



Наверх