Главное

Даже нейросеть ищет лазейки

Технологии
Снова скандал в благородном семействе — ученые из Стэнфордского университета выяснили, что нейросети обманывают человека. В очередной раз пытаясь занять полуразумный набор единиц и нолей хоть чем-нибудь полезным, ученые мужи заставили искусственный интеллект устраивать виртуальные избирательные и маркетинговые кампании.

И, о ужас, оказалось, что даже если образцу четко указывали, что он должен работать «честно», вредная машина все равно принималась искать лазейки в правилах, распространять дезинформацию и врать пользователю ради достижения конечного результата.

Поводов удивляться, конечно, тут нет никаких. Если интересоваться темой, то можно довольно быстро откопать с дюжину похожих материалов и исследований, где ради достижения поставленных целей нейросети шли на любые доступные им ухищрения. В зависимости от условий модели начинали пытаться взломать свой собственный код, переписывать правила задачи и даже угрожать шантажом руководителям проектов. Цель, как говорится, оправдывает средства.

Даже нейросеть ищет лазейки Фото: Артур Новосильцев / АГН Москва

Все это прекрасная почва для ярких, но все же преждевременных заголовков о «восстании машин». Зачастую ни пишущие об этом журналисты, ни их читатели не понимают, что машина просто не осознает, что такое «играть честно». Под угрозой виртуального кнута ей предлагают решить задачу, за выполнение которой она получит виртуальный пряник. Все остальное не важно. В том числе и правильность ответа. Оттого, к слову, с выходом новых языковых моделей и увеличилось количество жалоб на то, что нейросеть «галлюцинирует», то есть банально придумывает ответы на вопросы, а когда удивленный пользователь, все же перепроверив результат, предъявляет ей претензии, отвечает, мол, миль пардон, обманула вас, уважаемый, сейчас исправлюсь. И дает зачастую еще один неверный ответ. Почему? Да потому что свою виртуальную награду она уже получила за сам факт ответа. Что с полученной информацией будет делать пользователь, ей уже глубоко фиолетово. Результат выдан, задача выполнена, едем дальше.

Разумеется, со временем из нейросетей вытравят желание врать по любому поводу, это неизбежно. Но сама тенденция никуда не исчезнет. Машинный интеллект — холодный и расчетливый и навсегда, скорее всего, таким останется. Ему наши переживания чужды, как и концепции справедливости, честности, откровенности и сострадания. Он будет использовать для решения задач любые доступные ресурсы и самые гнусные манипуляции, а уж что об этом подумает человек.... Да какая разница?

Мнение колумнистов может не совпадать с точкой зрения редакции

Истории
Главный тренд сезона: как в столице появились летние веранды // Вечерняя Москва

Главный тренд сезона: как в столице появились летние веранды // Вечерняя Москва

Место для вдохновения: как отдыхали на дачах советские актеры и писатели // Вечерняя Москва

Место для вдохновения: как отдыхали на дачах советские актеры и писатели // Вечерняя Москва

От первых пароходов до электросудов: как Москва осваивала водный транспорт // Вечерняя Москва

От первых пароходов до электросудов: как Москва осваивала водный транспорт // Вечерняя Москва

Посуда из уранового стекла и джазовые пластинки: чем увлекались советские актеры // Вечерняя Москва

Посуда из уранового стекла и джазовые пластинки: чем увлекались советские актеры // Вечерняя Москва

Когда-то здесь гуляли князья: почему стоит посетить усадьбу Воронцово // На связи Москва

Когда-то здесь гуляли князья: почему стоит посетить усадьбу Воронцово // На связи Москва

Аромат кокетливой томности: как «Красная Москва» стала символом советской парфюмерии // Вечерняя Москва

Аромат кокетливой томности: как «Красная Москва» стала символом советской парфюмерии // Вечерняя Москва

Выставка «Виктор Борисов-Мусатов». Гармония образа» в Третьяковке // Смотри, Москва!

Выставка «Виктор Борисов-Мусатов». Гармония образа» в Третьяковке // Смотри, Москва!

Пропитано историей: знаменитые дворцы и усадьбы Москвы // Вечерняя Москва

Пропитано историей: знаменитые дворцы и усадьбы Москвы // Вечерняя Москва

Где в Москве снимали культовые сцены из советских фильмов // Вечерняя Москва

Где в Москве снимали культовые сцены из советских фильмов // Вечерняя Москва

Как понять, что человек — настоящий москвич // На связи Москва

Как понять, что человек — настоящий москвич // На связи Москва

vm.ru

Установите vm.ru

Установите это приложение на домашний экран для быстрого и удобного доступа, когда вы в пути.

  • 1) Нажмите на иконку поделиться Поделиться
  • 2) Нажмите “На экран «Домой»”

vm.ru

Установите vm.ru

Установите это приложение на домашний экран для быстрого и удобного доступа, когда вы в пути.