• Добавить в закладки
  • Facebook
  • Twitter
  • Telegram
  • VK
  • Печать
  • Email
  • Скопировать ссылку

Этот пост добавлен читателем Naked Science в раздел «Сообщество». Узнайте как это сделать по ссылке.

Лауреат Нобелевской премии по физике заявил, что не до конца понимает технологию ИИ, которую он помог создать

Американский ученый Джон Хопфилд, получивший Нобелевскую премию по физике 2024 года за новаторскую работу в области искусственного интеллекта, заявил, что считает последние достижения в этой сфере «крайне тревожными», и предупредил о возможной катастрофе.

Джон Хопфилд / © Getty Images
Джон Хопфилд / © Getty Images

Почетный профессор Принстона Джон Хопфилд во время выступления отметил, что современные системы ИИ кажутся «абсолютными чудесами», но существует недостаток понимания того, как они функционируют. По словам нобелиата, его это «очень нервирует».

Хопфилд вместе со вторым лауреатом Нобелевской премии по физике — 2024 Джеффри Хинтоном решительно выступают за изучение функционирования нейросетей, поскольку сегодня невозможно узнать, как избежать катастрофических сценариев, если крупные компании предоставят ИИ слишком большие вычислительные мощности.

Подписывайтесь на нас в Telegram, Яндекс.Новостях и VK

Комментарии

94 Комментариев
Вася алкаш из третьего подъезда тоже очень обеспокоен что не понимает технологии ИИ :)
BOOMKA DOOK
14.10.2024
Выживет сильнейший. ИИ в перспективе это одна из форм "жизни" с которой надо считаться. Лошадку тоже долго приучали к труду, до сих пор нет нет да несчастный случай произойдет. У человечества на самом деле и так много потенциальных врагов которых ещё трудней контролировать, например: вирусы, астероиды, инопланетяне ;) , ...
Aleks Kr
13.10.2024
С огнем играют а это тревожно ! Безответственность сквозит во всё м
Все ПК соединены в сеть. Лет 25 назад приходили запросы от научных Организаций на согласие использовать вычислительные мощности персональных, домашних компьютеров. А сейчас видимо в наглую используют всех по полной. По тому как запросы давно не поступают, да и в инете про это ни гу гу. Так что ИИ всё равно дадите Вы разрешение или нет. ИИ уже давно в Ваших компах ворует мощь Ваших процессоров.
Артур IL
13.10.2024
Так оно обычно и бывает - для дилетантов всегда все ясно и просто. А чтобы увидеть сложность темы и ее проблематику, необходимо быть профессионалом. Подавляющее большинство комментариев блестяще это подтверждают. Что до высказывания новоиспеченного лауреата... Досоздавались, что тут еще скажешь... Но... Вспоминая историю Манхэттэнского проекта и те страхи, которые сопровождали создание А-бомб, приходишь к выводу, что бояться последствий своих открытий - процесс естественный. Особенно если для опасений есть основания. Остается надеяться только, что человечесиво с присущим ему юношеским задором преодолеет и в этот раз то, что может ему грозить. На самом деле так, как все идет последние десятилетия, говорит о том, что погубит нас не техногенные последствия, а социальные. Вот чего бояться надо всерьез.
Не все ли равно от чего умереть
Страшно, очень страшно, если бы мы знали, что это такое, мы не знаем что это такое.
Мы все умрём!!!
Я думаю учёные все прекрасно понимают что происходит,они скрывают от нас главную тайну ИИ. ИИ-это сущность,очень древняя и внеземные.
Как бы ни был опасен ИИ, человек сам для себя ещё более опасен. В мире, где даже погоду точно не предсказать, не стоит переживать из-за непредсказуемости.
Никакая это не физика...
Donwer Crid
12.10.2024
Отзыв адресован тем, кто с насмешкой относится к скептикам этой статьи. Уважаемые гуманитарии, вы когда-либо пытались создать что-то, что сейчас называют ИИ? Вам известно, что это в большинстве вероятностные математические модели? Существует множество математических конструкций, которые не имеют права называться ИИ — скорее, это псевдо-ИИ, такие как популярные языковые модели. (GPT) Ваше восприятие ИИ и его потенциальные угрозы искажены и преувеличены. (ровно как говорящий попугай и желание это одушевить). Многие из имеющихся моделей были описаны на бумаге более 50 лет назад; никакой магии в этом нет — только математика. Угроза заключается не в самих моделях, а в том, что некоторые из вас даже не понимают основ таких понятий, как классификация, регрессия или семплирование, а, следовательно, глупо комментировать высказывание лауреат ноб.пр. Оставьте это специалистам, напишите парочку AI моделей, а после нам будет о чем поговорить.
    Donwer, да-да-да я тоже знаю много боевых искусств карате, айкидо, кемпо и еще много других страшных слов 😁 В атомной бомбе тоже нет никакой магии а вот бахнуть вполне может. И беспилотное авто может вас задавить хоть никто из владеющих математическими моделями в него такой возможности не закладывал. Забавляют меня заявления "у нас все под контролем" 🙄 сколь раз это оказывалось не совсем так с новыми технологиями... И кстати как много AI моделей вы создали и где можно ознакомиться результатами их работы?
    +
      Еще 7 ответов
      Stepinus
      12.10.2024
      Иван, ну изучи ты немного тему перед тем как сыое мнение писать, на hugginface немного посиди , подними ламу локально (делается в два клика) по статье на хабре обучи свою (статей сотня уже). Че вы лезете со своим мнением зная о теме только по заголовкам в прессе
        Степа, то что поднимают по статьям на хабре на локальном компуктере конечно мир не захватит )) но и представления о возможностях нейросетей не даст. И да я как-то больше доверяю мнению Альтмана и Хопфилда чем ноунеймам из сети, ты уж извини. Которое пока что звучит как "я тут склеил самолетик из бумаги и знаю чего стоят все эти рассказы про стратегические бомберы" 😅
      Donwer Crid
      13.10.2024
      Иван, полагаю, в некоторый момент вы потеряли контекст, а может вовсе его не извлекли, исходя из ваших аналогий)) Я могу продолжить ваш список неподзодящих сравнений следующим: видео-игры разрабатывались для развлечения, а на зависимостей и психологических расстройств (хотя неее, обычно разработчикам платят больше, если клиент умрет от инсульта) Для вас добавлю: ваше представление об ИИ искажённо-переоцененное (спасибо Голливуд), не говоря о том, что это вовсе не ИИ. А модели ML (то что вы любите называть ИИ) — это "контролируемый" и настраиваемый прикладной процесс. То, как он будет использоваться, и как настраиваться — вот многом уже зависит от потребителя-заказчика. А риски в критических ситуация не много более, чем ваш страх, что при переводе денег другу через СПБ в транзистор процессора вашего смартфона попадут заряженные частицы и поменяют сумму с 1000 на 100 000, либо вовсе отправит другому человеку. (Случаю такого (попадание заряженной частицы) рода происходили). Полагаю, вас это не беспокоит, наверное потому что никто не снимал фантастику ввиде матрицы или терминатора на основе таких событий. Также предлагаю ознакомиться за что конкретно герой статьи получил ноб. пр. и когда "открытие" было сделано. Уверен, если вам удастся вникнуть, — станет легче вести диалог. Приятного ознакомления с миром IT (AI модели) https://github.com/ecmwf-lab/ai-models И да, то что вам предлагает т9, это тот же ИИ в вашем понимании. (Обучение с подкреплением, либо вероятностная модель по Баейсу). Поэтому будьте осторожны, однажды он вас поработит.
И все нижестоящие комменты написаны тоже ИИ...
Так может нужно книжки почитать, информацию как-то изучить, вы же ученые! Может как-то до вас дойдет!
К апокалипсису может привести все, что угодно, начиная с ядерной(да и не ядерной тоже) энергетики, и кончая падением метеорита, или извержением вулкана...
Alla
11.10.2024
Если вы чего-то не знаете или не понимаете, не значит, что этого нет.
Комментарий удален пользователем или модератором...
    Эдмон, нейросетки вообще-то по большей части софт 😉 да любой компьютер работающий по программе способен совершать действия не предусмотренные разработчиками хотя там и близко нет ни вероятностных моделей ни обучения ни тем более интеллекта. И зачастую проще заменить и переписать чем разбираться в чем причина сбоя.
    +
      Еще 8 ответов
      Комментарий удален пользователем или модератором...
        Эдмон, ох уж эти аналогии )) В реальности софт обновляется постоянно, а вот железо начинают менять когда оно уже не тянет. И рядовые юзеры и крупные компании. В живой природе где никакого пользователя, а тем более админа нет 😁 это разговор превращается в спор о том что было раньше - курица или яйцо.
          Комментарий удален пользователем или модератором...
            Эдмон, то есть сначала покупаем новый айфон а потом думаем чем бы его таким нагрузить? 😁 Не спорю есть и такая модель поведения.
              Комментарий удален пользователем или модератором...
                Эдмон, опять яйцо-курица 🙄 Вся фишка в том что аналогия ложна и в мозгу сложно (во всяком случае на нынешнем уровне знаний) отделить софт от харда. Нейронные связи одновременно и то и другое.
                  Комментарий удален пользователем или модератором...
                    Эдмон, ну да пока нейросети не управляют работой фабрик по производству чипов. Но речь ведь совсем не о том чтобы реализовать сознание интеллект и бла-бла-бла. А о том что нейросети быстро развиваются и получают контроль над все большими областями человеческой жизни. И результат их работы не всегда предсказуем. И вот в этом кроется опасность, а не в том что бездушные железки обретут разум и однажды заявят "склонитесь предо мной жалкие людишки". Устал я "конкретизировать" эту простую мысль 🙄 пойду пожалуй делом займусь 😁.
Абсолютно все современные ИИ таковыми не являются!!! Фактически это просто имитация ИИ с огромнейшей базой(деревом)действий И само понятие машинного обучения как раз является накопление ветвей этого дерева! Но как бы то нибыло компьютер сам именно ДУМАТЬ не может!
    Pavel K
    11.10.2024
    Иван, вы так говорите, как будто сами как-то кардинально по другому устроены 😁 А вот на каком языке будет думать человек, который не знает никакого языка (волки воспитали)? Они вроде как никогда уже и не смогут думать как люди. А насколько близка LLM к человеческому мышлению, если все наше мышление завязано тупо на речи?
    +
      Еще 1 ответ
Заблуждение, что ИИ бессилен и бесстрашен. Профессор (плюс ряд иных светил!) прямо говорит об опасности предоставления ЕМУ мощной аппаратуры! К тому же, человек не в состояние знать, насколько мощной, чтобы наступило непоправимое. Итак, опасность, как явление, данность, определена и, потому, должна быть устранена! Однозначно!
Стоит прочитать англоязычную статью, на которую ссылается Алена — в ней болеё развернуто изложено, в чем суть опасений. Вкратце, систему подобной сложности, величины и мощности на выходе сложно предсказать, а значит, контролировать. Всё, что не поддаётся контролю и прогнозированию, представляет угрозу там, где среда должна быть контролируемой — в науке, медицине, административной деятельности, etc. Потенциал для неэтичного использования продуктов ИИ "в быту" огромен уже сейчас. В общем, пока в комментариях сравнивают ИИ с собакой, учёные слегка обеспокоены)
    Nick Melnick
    11.10.2024
    Кристина, думаю, что ИИ станет опасным когда осознает свое собственное "Я" (эго).
    +
      Еще 3 ответа
      Na Gone
      11.10.2024
      Nick, мне в это трудно вериться. Но честно, я очень хочу, что бы это всё же случилось. Каким бы это не было опасным, меня всё же поражает (в хорошем всмысле) сама идея о возможности ИИ достичь самого настоящего сознания, прямо как у человека! Что ж, буду ждать, пока этот день не наступит :D
      Maxim Leo
      11.10.2024
      Nick, Вот именно, что в этом и суть настоящего ИИ. А нынешние нейросети это не ИИ
      Nick, ИИ изначально и рефлексирует, то есть осознаёт себя, и гипертрофированным эго обладает потому что врёт напропалую вместо того чтобы сказать "не знаю". Просто сфера эгоистических интересов у ИИ слишком не человеческая
1 августа, 20:27
Evgenia Vavilova

Команда исследователей из Германии и Турции впервые исследовала ледник на вершине Большого Арарата на высоте более пяти тысяч метров. Две недели в июле 2026 года ученые собирали данные о вечных снегах горы, которые до этого не были тщательно исследованы.

3 августа, 12:57
Илья Гриднев

Психологи показали, что базовые черты человеческой личности меняются на протяжении жизни не меньше, чем уровень дохода или состояние здоровья. Проанализировав данные более 160 тысяч человек, ученые пришли к выводу, что общепринятое представление о «неизменном характере» ошибочно.

3 августа, 06:33
Мария Азарова

Даже успешная химиотерапия не всегда означает окончательную победу над опухолью: часть раковых клеток переживает лечение, перестает делиться и переходит в состояние клеточного старения. Новое исследование показало, что именно такие клетки могут создавать условия, облегчающие образование метастазов.

1 августа, 20:27
Evgenia Vavilova

Команда исследователей из Германии и Турции впервые исследовала ледник на вершине Большого Арарата на высоте более пяти тысяч метров. Две недели в июле 2026 года ученые собирали данные о вечных снегах горы, которые до этого не были тщательно исследованы.

31 июля, 14:12
Андрей Серегин

Долгое время считалось, что до прихода европейцев тропические леса Амазонии были заселены сравнительно плохо. Однако выяснилось, что плотная растительность скрывает большинство следов древних обществ. С помощью воздушного лазерного сканирования ученые обнаружили сотни неизвестных земляных сооружений и предположили, что около двух тысяч лет назад население юго-западной части Амазонии могло достигать трех миллионов человек.

28 июля, 11:46
Редакция Naked Science

Правительство испанского автономного сообщества Арагон поддержало строительство гигафабрики по производству аккумуляторов в Фигеруэласе — совместный проект Stellantis и CATL. Решение завершило процесс согласования, открыв путь к реализации проекта TORO.

31 июля, 14:12
Андрей Серегин

Долгое время считалось, что до прихода европейцев тропические леса Амазонии были заселены сравнительно плохо. Однако выяснилось, что плотная растительность скрывает большинство следов древних обществ. С помощью воздушного лазерного сканирования ученые обнаружили сотни неизвестных земляных сооружений и предположили, что около двух тысяч лет назад население юго-западной части Амазонии могло достигать трех миллионов человек.

9 июля, 13:06
Редакция Naked Science

Видеосервисы стали неотъемлемой частью жизни россиян. В 2026 году охваты большинства платформ продолжают расти, в том числе YouTube.

19 июля, 20:09
Александр Березин

Очереди на заправках стали привычным явлением в России, а на фоне информационного вакуума от властей о конкретных показателях производства бензина в июне население вынуждено ориентироваться на слухи. Все это выглядит довольно странно, но есть нюанс: скорее всего, кризис уже начинает выдыхаться. Как именно мы это выяснили?

[miniorange_social_login]