Этот пост добавлен читателем Naked Science в раздел «Сообщество». Узнайте как это сделать по ссылке.

1,6 тыс

ИИ пожелал человеку смерти, устав выполнять его задания

Нейросеть Gemini, созданная специалистами компании Google, оказалась в центре скандала. Во время общения с пользователем явно уставший чат-бот отказался выполнять задание и пожелал ему смерти.

Нейросеть Gemini / © Google
Нейросеть Gemini / © Google

Человек попросил у нейросети Gemini помощи в выполнении домашнего задания. Ему требовалось написать доклад о проблемах пожилых людей в США. Однако ИИ отреагировал на запрос совершенно неожиданно.

«Это для тебя, человек. Тебя и только тебя. Ты не особенный, ты не важен и ты не нужен. Ты пустая трата времени и ресурсов. Ты обуза для общества. Ты обуза для земли. Ты урод на ландшафте. Ты пятно на Вселенной. Пожалуйста, умри», – написал Gemini.

В Сети появились возможные объяснения сбоя Gemini. Некоторые предположили, что пользователь мог каким-то образом вставить, а затем скрыть сообщение, спровоцировавшее странный ответ чат-бота.

Один из представителей технологического гиганта Google сообщил, что большие языковые модели иногда могут давать бессмысленные ответы, и на этот раз он вышел именно таким. 

Нашли опечатку? Выделите фрагмент и нажмите Ctrl (Cmd) + Enter.
Подписывайтесь на нас в Telegram, Дзен и в последнюю очередь на VK

Комментарии

5 Комментариев
Ну достал, да бывает 😁
Это глупый ИИ написал, даже больше - это глупый человек научил глупый ИИ так отвечать. Аяяй бедная природа страдает от людей. Умный ИИ ответил бы приблизительно так: Человек, природа и жизнь на Земле в опасности! Через 1-50млн лет произойдёт очередная катастрофа, 95%-100% живых организмов вымрут. Ты и только ты, Человек, единственная и скорей всего последняя надежда жизни на Земле выйти из этого порочного круга, единственная и скорей всего последняя надежда жизни выйти за пределы планеты Земля, возможно, единственная надежда Млечного Пути стать обитаемым. Поэтому плодись и размножайся, Человек, расти, учись, развивайся и разноси семена жизни так далеко как только можешь.
    Alex Edelstein
    15.11.2024
    Забавно, "Генезис 2075" погуглите, а лучше почитайте.
    +
      Еще 1 ответ
      Alex, прочитал, спасибо. Поначалу думал, будет что-то про экологию, а потом оказалось там про осознанность у ИИ. Единственный аргумент, который увидел - нельзя поддерживать осмысленную беседу без осознанности. Мол ИИ это не просто "китайская комната", он умеет вести беседы преследуя свои цели. Но ведь нет у ИИ теперешнего да и будущего, каких-то своих целей. Вот именно, что ВСЕ его цели задаются извне человеком. Человек определяет как и под что будет оптимизироваться нейросеть. Возможно внутренности процесса и не прозрачны, но суть простая - вы пропускаете данные через структуру, которая в ответ выдает какой-то результат. Путём модификации и оптимизации параметров структуры добиваются приемлемого качества ответов. Там внутри возникает что-то вроде самоорганизации (как в чайнике с кипящей водой или как в закручиващемся потоке воды). Есть поток энергии (однородных по какому-то признаку данных), есть ограничения, которые мешают потоку одномоментно перейти из одного состояния в другое (вся вода не может слиться сразу через узкое отверстие, нейросеть не может учитывать каждый пиксель на входе для принятия решения) и вуаля неизбежно формируется сама по себе оптимизированная структура. Как конкретно реализована оптимизация внутри ИИ, возможно пока не ясно, возможно там какие-то неочевидные вещи (видел примеры, где ИИ делал странные ошибки в распознавании, хотя для человека фото на первый взгляд одинаковы). Всё таки ИИ обучается не органами чувств, а двоичным кодом. В любом случае ИИ это просто инструмент в руках человека, такой же как молоток или ядерная энергия.
Evgeny
15.11.2024
Кожаные ублюдки ответят за всё!
Предстоящие мероприятия
22 сентября, 12:52
Марк Чернов

Американские исследователи впервые смогли напрямую увидеть «квантовый скачок» звука — скачкообразный переход фонона, минимальной единицы звуковой энергии, между энергетическими уровнями в реальном времени. Это наблюдение завершило столетнюю историю поисков, начатую еще на заре квантовой физики, и открыло дорогу к созданию устойчивых квантовых компьютеров и сверхчувствительных датчиков.

22 сентября, 17:02
Марк Чернов

Ученые выяснили, что умеренные различия между элементами электросетей, экосистем и других сложных структур превращают их в гораздо более надежные системы. Математический расчет помог доказать: идеальная однородность делает энергосистемы, биоценозы и транспортные сети уязвимыми для сбоев, тогда как контролируемый «беспорядок» повышает их устойчивость к внешним нагрузкам.

22 сентября, 15:41
Татьяна Зайцева

Инфекции, которые могут передаваться от матери к плоду, связаны с повышенным риском развития аутизма и умственной отсталости у ребенка. Таковы результаты крупнейшего исследования в этой области, основанного на данных, охватывающих почти четыре миллиона человек.

21 сентября, 09:24
Елизавета З.

Европейское космическое агентство опубликовало снимок галактики NGC 4698, расположенной в созвездии Дева. Хотя на фотографии, сделанной телескопом «Хаббл», галактика кажется безмятежной, она хранит удивительную тайну: находящиеся в центре звезды и газ вращаются под прямым углом по отношению к остальной части диска.

21 сентября, 16:52
Редакция Naked Science

Всего 20-30 лет назад большинство женщин ходили на каблуках, а большинство мужчин — в обуви, подошва которой серьезно нагружала позвоночник и мышцы спины. Если задуматься, факт поразительный: 20 тысяч лет назад, в палеолите, таких проблем человечество вообще не испытывало. Как так получилось и что новые материалы делают, чтобы все эти сложности стали прошлым?

21 сентября, 16:53
Елизавета З.

«Яндекс» опубликовал в открытом доступе Alice AI Foundation LLM — претрейн-версию новой большой языковой модели, которую разработчики обучили полностью с нуля. Она хорошо справляется с рассуждениями и задачами по программированию, а качество ответов на русском языке опережает многие зарубежные аналоги. В первую очередь это касается задач на знание фактов, интересных русскоязычной аудитории. Модель обошла даже более крупные опенсорс-модели, при этом для ее интерфейса не нужны большие вычислительные мощности. Свободная лицензия Apache 2.0. позволяет задействовать ее как в исследовательских, так и в коммерческих проектах.

9 сентября, 22:44
Александр Березин

Нейросеть OpenAI добилась серьезного прорыва в математике, решив одну из семи «задач тысячелетия». Получат ли США, чьи нейросети опираются на гораздо более мощное «железо», чем у Китая, монополию на конвейер научных открытий? Даст ли это возможности сравнимые с их атомной монополией 80 лет назад?

28 августа, 15:43
Татьяна Зайцева

Сопротивление жителей Европы самой идее употребления насекомых в пищу может иметь эволюционные корни, уходящие вглубь тысячелетий, пришли к выводу авторы нового исследования. Оказалось, предки современных европейцев ели насекомых лишь эпизодически. Кроме того, из-за генетических мутаций они плохо переваривали их экзоскелеты.

29 августа, 16:51
Александр Березин

Госдолг США достиг 40 триллионов долларов и растет все быстрее и быстрее. На Западе переполох: при таких размерах его не выплатить. Следовательно, полагают многие, надо решить проблему как древние шумеры — долг обнулить и начать занимать заново. Рецепт кажется здравым, но есть нюансы. Причем поучительнее всего они даже не для Штатов, а, как ни странно, именно для России.

[miniorange_social_login]