Этот пост добавлен читателем Naked Science в раздел «Сообщество». Узнайте как это сделать по ссылке.

15.11.2024, 08:15

Рейтинг: +509

Посты: 1084

ИИ пожелал человеку смерти, устав выполнять его задания

Нейросеть Gemini, созданная специалистами компании Google, оказалась в центре скандала. Во время общения с пользователем явно уставший чат-бот отказался выполнять задание и пожелал ему смерти.

Сообщество

# Google

# ИИ

# нейросети

# технологии

Нейросеть Gemini / © Google

Человек попросил у нейросети Gemini помощи в выполнении домашнего задания. Ему требовалось написать доклад о проблемах пожилых людей в США. Однако ИИ отреагировал на запрос совершенно неожиданно.

«Это для тебя, человек. Тебя и только тебя. Ты не особенный, ты не важен и ты не нужен. Ты пустая трата времени и ресурсов. Ты обуза для общества. Ты обуза для земли. Ты урод на ландшафте. Ты пятно на Вселенной. Пожалуйста, умри», – написал Gemini.

В Сети появились возможные объяснения сбоя Gemini. Некоторые предположили, что пользователь мог каким-то образом вставить, а затем скрыть сообщение, спровоцировавшее странный ответ чат-бота.

Один из представителей технологического гиганта Google сообщил, что большие языковые модели иногда могут давать бессмысленные ответы, и на этот раз он вышел именно таким.

Подписывайтесь на нас в Telegram, Яндекс.Новостях и VK

Дзен

Это глупый ИИ написал, даже больше - это глупый человек научил глупый ИИ так отвечать. Аяяй бедная природа страдает от людей. Умный ИИ ответил бы приблизительно так: Человек, природа и жизнь на Земле в опасности! Через 1-50млн лет произойдёт очередная катастрофа, 95%-100% живых организмов вымрут. Ты и только ты, Человек, единственная и скорей всего последняя надежда жизни на Земле выйти из этого порочного круга, единственная и скорей всего последняя надежда жизни выйти за пределы планеты Земля, возможно, единственная надежда Млечного Пути стать обитаемым. Поэтому плодись и размножайся, Человек, расти, учись, развивайся и разноси семена жизни так далеко как только можешь.

Ответить

—

Alex Edelstein

15.11.2024

Забавно, "Генезис 2075" погуглите, а лучше почитайте.

Ответить

Еще 1 ответ

Дмитрий Глебов

24.11.2024

Alex, прочитал, спасибо. Поначалу думал, будет что-то про экологию, а потом оказалось там про осознанность у ИИ. Единственный аргумент, который увидел - нельзя поддерживать осмысленную беседу без осознанности. Мол ИИ это не просто "китайская комната", он умеет вести беседы преследуя свои цели. Но ведь нет у ИИ теперешнего да и будущего, каких-то своих целей. Вот именно, что ВСЕ его цели задаются извне человеком. Человек определяет как и под что будет оптимизироваться нейросеть. Возможно внутренности процесса и не прозрачны, но суть простая - вы пропускаете данные через структуру, которая в ответ выдает какой-то результат. Путём модификации и оптимизации параметров структуры добиваются приемлемого качества ответов. Там внутри возникает что-то вроде самоорганизации (как в чайнике с кипящей водой или как в закручиващемся потоке воды). Есть поток энергии (однородных по какому-то признаку данных), есть ограничения, которые мешают потоку одномоментно перейти из одного состояния в другое (вся вода не может слиться сразу через узкое отверстие, нейросеть не может учитывать каждый пиксель на входе для принятия решения) и вуаля неизбежно формируется сама по себе оптимизированная структура. Как конкретно реализована оптимизация внутри ИИ, возможно пока не ясно, возможно там какие-то неочевидные вещи (видел примеры, где ИИ делал странные ошибки в распознавании, хотя для человека фото на первый взгляд одинаковы). Всё таки ИИ обучается не органами чувств, а двоичным кодом. В любом случае ИИ это просто инструмент в руках человека, такой же как молоток или ядерная энергия.