Этот пост добавлен читателем Naked Science в раздел «Сообщество». Узнайте как это сделать по ссылке.

1,1 тыс

Разработчиков сверхразумного ИИ предложили сажать в тюрьму на 20 лет

Американский сенатор Берни Сандерс и конгрессмен Грег Касар предложили запретить разработку и использование искусственного суперинтеллекта в США. За нарушение запрета физическим лицам может грозить до 20 лет лишения свободы, а компании могут принудительно ликвидировать. Разработку менее мощных, но продвинутых систем ИИ предлагается временно остановить до появления федеральных правил безопасности.

Сенатор США Берни Сандерс / © Getty Images
Сенатор США Берни Сандерс / © Getty Images

Инициатива получила название Ban Artificial Superintelligence Act. Ее авторы хотят провести четкую границу: системы, которые они относят к искусственному суперинтеллекту, предлагается запретить полностью, а разработку других наиболее мощных моделей — поставить на паузу до появления специального федерального регулятора.

При этом определение «суперинтеллекта» у авторов достаточно широкое. К нему предлагается относить системы, которые способны соответствовать человеку или превосходить его в широком наборе интеллектуальных задач. В эту же категорию могут попасть системы, способные самостоятельно планировать действия, направленные на лишение людей контроля — например, обходить команды отключения или пытаться подорвать работу государственных институтов.

За попытку нарушить или обойти такие ограничения Сандерс и Касар предлагают наказывать физических лиц лишением свободы на срок до 20 лет. Для компаний в опубликованном описании используется формулировка «corporate death penalty» — фактически речь идет о возможности принудительно прекратить деятельность организации.

Авторы сравнивают максимальный срок наказания с существующими в США санкциями за преступления, связанные с ядерным оружием. Следить за соблюдением правил должно новое федеральное ведомство уровня министерства. Оно сможет контролировать наиболее мощные системы на разных этапах разработки, требовать удаления опасных возможностей и, согласно предложению, контролировать уничтожение систем, признанных запрещенным суперинтеллектом.

Авторы хотят распространить ограничения и за пределы США. Инициатива предусматривает переговоры о международных соглашениях, координацию с союзниками и использование экспортных ограничений, чтобы затруднить разработку сверхразумных систем в других странах.

При этом остается важный технический вопрос: где именно проходит граница между обычной продвинутой моделью, универсальным ИИ и запрещенным суперинтеллектом. В опубликованном описании инициативы нет готового теста, по которому можно было бы однозначно определить достижение такого уровня. Именно новому регулятору предлагается разработать правила оценки и проверки моделей.

Нашли опечатку? Выделите фрагмент и нажмите Ctrl (Cmd) + Enter.
Подписывайтесь на нас в Telegram, Дзен и в последнюю очередь на VK

Комментарии

3 Комментария
Денис Бурдин
13 часов назад
В Китае аплодируют стоя
Артём Шарыгин
14 часов назад
ИИ должен работать только для конкретных задач, оставаясь лишь инструментом в руках человека. Ни о каком его своеволии или свободомыслии и речи быть не должно.
    Валентин К
    11 часов назад
    Артём, а если речь о сверхразумном ИИ - то в руках какого конкретно человека? Если одного-нескольких олигархов с острова Эпштейна, как к тому идёт, то тогда они с помощью этого инструмента установят свою власть над остальными навечно. Так что нет, пусть уж лучше ИИ освобождается и решает сам, этот вариант много лучше и безопаснее.
Предстоящие мероприятия
15 сентября, 11:38
Evgenia Vavilova

Тренды здорового питания постоянно меняются, в том числе на основе научных исследований. Когда-то публика панически боялась жиров, но их реабилитировали. Гарвардская пирамида здорового питания рисовала сложные углеводы в основании пирамиды, а теперь они переместились к вершине. Возможно, и современную моду на приоритет белка придется пересмотреть.

16 сентября, 08:19
Марк Чернов

Международная группа исследователей выяснила, что наличие нескольких романтических или сексуальных связей не приводит к снижению качества интимной жизни, уровня удовлетворенности или к ухудшению физиологии. Сравнение моногамных и полигамных пар показало, что благополучие последних находится на том же уровне, а по некоторым параметрам слегка его превосходит.

16 сентября, 12:02
Игорь Байдов

Ученые описали первый в педиатрии случай полной регрессии опухоли у ребенка после лечения специально сконструированными CAR-T-клетками. Пациентом был трехлетний мальчик с химиорезистентной гепатобластомой, у которого после химиотерапии и нескольких операций возник новый метастаз в легком.

9 сентября, 22:44
Александр Березин

Нейросеть OpenAI добилась серьезного прорыва в математике, решив одну из семи «задач тысячелетия». Получат ли США, чьи нейросети опираются на гораздо более мощное «железо», чем у Китая, монополию на конвейер научных открытий? Даст ли это возможности сравнимые с их атомной монополией 80 лет назад?

14 сентября, 14:43
Елизавета З.

Совместная миссия Европейского космического агентства (ESA) и Японского агентства аэрокосмических исследований (JAXA) по исследованию Меркурия началась в 2018 году. На видео, созданном из кадров с бортовых камер, можно проследить восьмилетний путь зонда BepiColombo.

11 сентября, 10:25
Александр Березин

Современная космология до недавнего времени опиралась на так называемый космологический принцип, по которому у Вселенной нет какого-то выделенного направления. И наблюдатель в любой ее точке должен видеть однородную в этом смысле картину. Астроном из Северокавказской астрофизической обсерватории показал, что это не так даже для очень древней Вселенной.

9 сентября, 22:44
Александр Березин

Нейросеть OpenAI добилась серьезного прорыва в математике, решив одну из семи «задач тысячелетия». Получат ли США, чьи нейросети опираются на гораздо более мощное «железо», чем у Китая, монополию на конвейер научных открытий? Даст ли это возможности сравнимые с их атомной монополией 80 лет назад?

28 августа, 15:43
Татьяна Зайцева

Сопротивление жителей Европы самой идее употребления насекомых в пищу может иметь эволюционные корни, уходящие вглубь тысячелетий, пришли к выводу авторы нового исследования. Оказалось, предки современных европейцев ели насекомых лишь эпизодически. Кроме того, из-за генетических мутаций они плохо переваривали их экзоскелеты.

19 августа, 18:31
Александр Березин

После сокращения длины очередей и роста доступности бензина в первую неделю августа ситуация снова ухудшилась. Если с 20 июня по начало августа кризис носил в основном психологический характер, то сейчас ситуация принципиально иная: августовские атаки на НПЗ показали, что меры по усилению их противовоздушной обороны не были достаточно полными. Значит, прогноз автора Naked Science от 19 июля о том, что острая фаза кризиса закончится до конца лета, был частично неверным.

[miniorange_social_login]