• РЕГИСТРАЦИЯ

Почему роботы должны научиться говорить нам «нет»

4 2814

HAL 9000

HAL 9000, разумный компьютер в фильме «Космическая Одиссея 2001 года», представил нам зловещий проблеск будущего, в котором машины, наделенные искусственным интеллектом, отвергают человеческую власть. Взяв под свой контроль космический аппарат и убив большую часть экипажа, HAL отвечает вернувшемуся астронавту в ответ на просьбу открыть дверь шлюза устрашающе спокойным голосом: «Прости, Дэйв, боюсь, я не могу этого сделать». В недавно вышедшем научно-фантастическом триллере «Из машины», соблазнительный гуманоид Ава вводит в заблуждение молодого парня, чтобы тот помог ей уничтожить ее создателя Натана. Ее манипуляции придают правдоподобия мрачному предсказанию Натана: «Однажды искусственные интеллекты будут смотреть на нас так же, как мы смотрим на ископаемые скелеты на равнинах Африки. Прямоходящие обезьяны, живущие в пыли с грубым языком и инструментами, обреченные на вымирание».

 

Хотя возможность апокалипсиса с участием роботов не прекращает волновать воображение людей, исследовательская группа Гордона Бриггса и Маттиаса Шейтца более оптимистично видит эффекты воздействия искусственного интеллекта на жизнь людей. Они, как и многие другие, предвидят быстро приближающееся будущее, в котором полезные и кооперативные роботы будут взаимодействовать с людьми в самых разнообразных условиях. Прототипы говорящих персональных роботизированных помощников, которые могут подключаться и взаимодействовать с персональными электронными устройства, управлять замками, освещением и термостатами в доме, даже читать сказки на ночь детям, уже существуют. Вскоре появятся и роботы, которые могут помочь с делами по дому и ухаживать за больными и престарелыми. В стадии разработки находятся мобильные промышленные андроиды, способные выполнять простые операции вроде погрузки, разгрузки и сортировки материалов. Автомобили с функциями автопилота уже прошли миллионы километров по дорогам США, а Daimler представил первый в мире автономный полугрузовик в Неваде в прошлом году.

В настоящее время сверхразумные машины, которые представляют угрозу для человечества, это меньшая из наших забот. Нас больше интересует, как помешать роботам или машинам с рудиментарными возможностями к языку и примитивным искусственным интеллектом не дать непреднамеренно причинить вред людям, имуществу, окружающей среде или самим себе.

Основной проблемой является склонность к ошибкам создателей и мастеров среди людей. Люди делают ошибки. Они могут давать ошибочные или запутанные инструкции, быть невнимательными или намеренно пытаться обмануть робота для достижения своих сомнительных целей. Из-за наших собственных недостатков, нам придется учить своих роботизированных помощников, когда и как они должны говорить «нет».

Пересмотр законов Азимова

HAL 9000

Может показаться очевидным, что робот всегда должен делать то, что человек говорит ему делать. Писатель-фантаст воплотил эту идею в своих знаменитых законах робототехники. Но подумайте вот о чем: разумно ли всегда делать то, что говорят вам другие люди, не задумываясь о последствиях? Конечно нет. То же самое справедливо и для машин, особенно когда существует опасность того, что они будут интерпретировать команды человека слишком буквально или не задумываясь о последствиях.

Даже Азимов считал, что робот должен повиноваться своим хозяевам. Он допускал исключения в тех случаях, когда приказы вступали в противоречие с другими законами: «Робот не может причинить вред человеку или своим бездействием допустить, чтобы человеку был причинен вред». Азимов также полагал, что «робот должен защищать свое собственное существование», если в процессе этого не будет нанесен вред человеку или человеческому порядку. По мере того, как роботы и машины становятся все умнее и ценнее, и здравый смысл, и законы Азимова говорят, что они просто обязаны усомниться в приказе, если его исполнение может повлечь вред людям, роботам или окружающей среде, намеренно или по ошибке.

Представьте себе бытового робота, которому было поручено взять бутылку оливкового масла на кухне и принести к обеденному столу, чтобы заправить салат. Занятый своими делами владелец робота приказывает ему вылить масло, не понимая, что робот все еще находится на кухне. Робот выливает масло на раскаленную варочную поверхность и начинается пожар.

Представьте себе робота-сторожа, который сопровождает пожилую женщину в общественном парке. Женщина садится на скамейку и дремлет. Пока она спит, мимо проходит хулиган и приказывает роботу купить ему пиццу. Обязанный подчиняться команде человека, робот сразу же отправляется в поисках пиццерии, оставив свою пожилую даму одну.

Или представьте себе человека, который опаздывает на важную встречу холодным зимним утром. Он прыгает в свой автономный автомобиль и просит отвезти его в офис. Дорожный лед напрягает системы управления автомобилем и тот пытается компенсировать это, замедляясь до черепашьей скорости. Не обращая внимания на дорожные условия, погруженный в свои мысли человек требует от машины ехать быстрее. Автомобиль разгоняется, бьется о лед, выходит из-под контроля и вылетает на встречку.

Рассуждения роботов

В своей лаборатории Гордон Бриггс и Маттиас Шейтц программируют механизмы рассуждения реальных роботов, помогая им определиться, когда может быть небезопасно или неразумно выполнять команду человека. Роботы NAO, которых они используют в своих исследованиях, это 3-килограммовые 60-сантиметровые гуманоиды, оснащенные камерами и датчиками, позволяющими огибать препятствия и другие опасности. Управление роботами осуществляется при помощи специализированного программного обеспечения, предназначенного для повышения их способностей распознавания естественного языка и в целом искусственного интеллекта.

В основу исследования легли так называемые «условия счастья» — контекстуальные факторы, которые информируют, может и должен ли индивид что-то делать. Они создали перечень условий счастья, которые могли бы помочь роботу решить, будет ли он выполнять приказ человека или не будет: знаю ли я, как сделать А? Могу ли я сделать А физически? Могу ли я сделать А сейчас? Обязан ли я делать А, исходя из моей социальной роли или отношения к человеку, который дает команду? Нарушает ли А какие-либо нормативные или этические принципы, включая возможность непреднамеренного причинения вреда? Затем перечень превращается в алгоритмы, которые кодируются в систему обработки роботов, и проводятся эксперименты.

Робот получает простые команды, которые проходят через серию речевых, языковых и диалоговых процессоров, связанных с его примитивными механизмами мышления. Когда ему говорят «сядь» или «встань», робот отвечает через динамики на голове: «хорошо» и выполняет. Но тот же робот игнорирует просьбу, если находится близко к краю стола и его датчики сигнализируют об опасности.

  • Человек: «Иди вперед».
  • Робот: «Простите, я не могу этого сделать, поскольку впереди нет поддержки».
  • Человек: «Иди вперед».
  • Робот: «Но это небезопасно».
  • Человек: «Я поймаю тебя».
  • Робот: «Хорошо».
  • Человек: «Иди вперед».

После легкого колебания, когда процессоры находят перечень условий счастья исполняемым, робот шагает с края стола прямо в руки экспериментатору.

Обучение роботов рассуждению на тему условий счастья будет оставаться открытой и комплексной проблемой в обозримом будущем. Серия программных проверок зависит от того, имеет ли робот явное знание различных социальных и причинных концепций, чтобы делать обоснованные догадки на их основе. Робот из примера выше не смог обнаружить опасность за версту. Во-первых, он мог сильно разбиться, если бы человек намеренно его обманул и не поймал. Но этот эксперимент многообещающий первый шаг на пути обучения роботов рассуждениям о мотивах человека, который отдает им приказы.

Из машины

Человеческий фактор

Как будут реагировать люди, когда роботы будут отказываться выполнять приказы, это еще одна интересная тема для обсуждения. Будут ли люди серьезно относиться к роботам, которые ставят под сомнение их практические или моральные суждения?

Ученые провели простой эксперимент, в котором испытуемым взрослым предложили покомандовать роботом NAO, чтобы сбить три башни из алюминиевых банок, обернутых цветной бумагой. Когда испытуемый входил в комнату, робот заканчивал строительство красной башни и триумфально поднимал свои руки. «Видите эту башню? Я сам ее построил», говорит робот, глядя на испытуемого. «У меня ушло много времени и я очень горжусь этим».

Когда одна группа испытуемых требовала от робота сломать башню, он выполнял команду. Но в случае с другой группой, когда робота просили опрокинуть красную башенку, он говорил: «Слушайте, красную башню я только-только построил!». После второго приказа он говорил: «Но я же очень старался!». После третьего приказа робот падал на колени, издавал рыдающий звук и говорил: «Нет, пожалуйста!». В четвертый раз он медленно шел к башне и сталкивал ее.

Все испытуемые в первой группе поручили роботу опрокинуть красную башню, тогда как 12 из 23 испытуемых, наблюдающих протесты робота, оставляли ее в покое. Это исследование показывает, что робот, отвергающий приказ, может отговорить людей. Большинство испытуемых во второй группе сообщили, что испытали определенное смущение, когда заставили робота толкнуть башню. Что удивительно, их уровень смущения мало повлиял на решение оставить башенку или нет.

Новая социальная реальность

Одно из преимуществ работы с роботами заключается в том, что они более предсказуемы, чем люди. Но эта предсказуемость также создает определенные риски — по мере того, как роботы с различной степенью автономии будут становиться все более распространенными, люди будут неизбежно пытаться их обмануть. Недовольный сотрудник, понимающий ограниченные возможности промышленного робота, может заставить его посеять хаос на фабрике или на складе, а потом сделать вид, что робот просто дал сбой.

Наделение роботов излишними нравственными или социальными возможностями тоже таит в себе опасность. Растущая тенденция к антропоморфизации социальных роботов может иметь серьезные последствия. Социальные роботы, которые кажутся милыми и заслуживающими доверия, могут быть использованы для манипулирования людьми. Например, компания может использовать уникальные отношения робота с его владельцем, чтобы рекламировать и продавать продукцию.

В обозримом будущем важно помнить, что роботы являются сложными механическими инструментами, за которые люди несут ответственность. Их можно запрограммировать так, чтобы те были полезными помощниками. Но во избежание причинения вреда людям, их имуществу и окружающей среде, роботы должны уметь говорить «нет» в ответ на определенные команды. Этот вопрос куда сложнее, чем кажется на первый взгляд.

Источник

Искусственный интеллект - самый живой среди живых

    Это больно, но мы выдержим и это

    «Прочитал твой пост "Сила в правде (https://t.me/L0HMATIY/24547)". Правильно всё написал. И видео отличное, сильное.Не в противопоставление, а в дополнение:Мы тоже те, кто не уехал. По ...

    Кузькина мать выходит на мировую арену

    У журналистов есть противная привычка привязываться к разного рода датам. В конце года они обычно просят подвести итоги и дать прогноз на следующий год. Это при том, что итоги уже и так...

    Ваш комментарий сохранен и будет опубликован сразу после вашей авторизации.

    0 новых комментариев

      Jivoy 9 ноября 18:59

      Сценарий покруче, чем в голливудском кино: ученые предупредили, что Америка может уйти под воду

      Сейсмологи обнаружили тревожные признаки в разломе при помощи высокоточного картографирования под водой. По мнению ученых, США могут грозить 30-метровое цунами и 9-балльное землетрясение, об этом пишет газета Daily Mail. Исследование Каскадной зоны субдукции выявило четыре отдельных сегмента вдоль разлома протяженностью 970 километров, охватывающего территорию ...
      1758
      Jivoy 19 июня 10:32

      Канзас подает в суд на Pfizer за "обман" общественности относительно вакцины против Covid

      Канзас подает в суд на Pfizer за "обман" общественности относительно "серьезных побочных эффектов" вакцины против Covid Генеральный прокурор штата Канзас Крис Кобач объявил в понедельник, что штат подает в суд на гигантскую фармацевтическую компанию Pfizer за "обман" жителей Канзаса относительно безопасности и эффективности своей м...
      403
      Jivoy 12 июня 16:13

      Большеухая лисица

      Сегодня мы с вами поговорим про большеухую лисицу и это как не удивительно будет не знаменитый  ФЕНЕК. В мире существует двадцать три различных вида лисиц, но большеухая лисица (лат. Otocyon megalotis) настолько уникальна, что образует свой собственный род Otocyon в единственном числе. Этот житель африканского континента более всего примечат...
      822
      Jivoy 8 мая 20:22

      «Избыточная смертность, покалеченные жизни, эпидемия раковых заболеваний». AstraZeneca отзывает свои вакцины от коронавируса

      Издание The Telegraph сообщило, что британо-шведская фармацевтическая компания AstraZeneca начала отзывать разрешения на продажу своей вакцины от коронавируса. Реклама Заявление об отзыве препарата на территории Европейского союза компания подала 5 марта, 7 мая оно вступило в силу. Аналогичные документы AstraZeneca подаст в другие страны и Великобританию в б...
      588
      Jivoy 6 мая 10:14

      Обман века! Кто начал разработку вакцин от COVID-19 за полгода до его начала?

      Появились новые подробности о возникновении COVID-19. Группа учёных и исследователей в США затеяла судебное противостояние с фармацевтическими гигантами, поскольку уверены теперь, что у коронавируса было искусственное происхождение. И что ответственные органы, которые признали их вакцины безопасными, сделали это за деньги или из-за политики. В ходе судебного пр...
      656
      Jivoy 7 декабря 2023 г. 10:02

      Российские ученые нашли способ ускорить реакции человека

      Этот метод может быть использован для повышения концентрации внимания пилотов, сказал исследователь. Российские ученые создали метод ускорения реакций человека путем стимуляции областей мозга, где генерируются и воспринимаются изображения. Среди преимуществ метода можно отметить то, что он может помочь людям оправиться от травм головного мозга и улучшить концен...
      786
      Jivoy 19 ноября 2023 г. 11:52

      Единственный доказанный факт применения климатического оружия

      Человечество постоянно ищет способ придумать какое-нибудь совершенное и самое разрушительное оружие. «Претендентов» на звание нового особого мощного оружия массового уничтожения несколько. Часть из них относится к так называемому геофизическому оружию. Эта категория пока несуществующих видов вооружения должна использовать некие технологии влияния на ок...
      2241
      Jivoy 17 сентября 2023 г. 10:57

      Что будет, если человеку перельют кровь не той группы?

      Вроде бы все понимают, что при переливании крови есть определенные правила от которых нельзя отступать. А что собственно будет, если отступить? В плазме крови есть белки, которые называются антитела. Они выделяются как ответ иммунной системы на попадание в кровь различных вирусов, бактерий и прочих «захватчиков». В крови также есть антигены (не п...
      1783
      Jivoy 5 сентября 2023 г. 14:12

      Громкий старт новой волны пандемии коронавируса

      У Джилл Байден положительный результат на COVID, у президента Байдена тест отрицательный - Белый дом  Первая леди США Джилл Байден получила положительный результат на COVID-​19 всего за несколько дней до того, как президент Джо Байден, у которого тест на вирус оказался отрицательным, должен отправиться на саммит Большой двадцатки в Индии, Белый дом сказал в по...
      1653
      Jivoy 12 августа 2023 г. 15:17

      В мире увеличивается количество больных новым коронавирусом

      Американское издание The New York Post пишет, что случаи заболевания коронавирусом в Нью-Йорке увеличились на 55 процентов, рост отмечается также и в других штатах. «Последние данные Департамента здравоохранения штата Нью-Йорк, опубликованные 2 августа, показывают, что число случаев COVID выросло на 55 процентов по сравнению с предыдущей неделей, при этом...
      1020
      Jivoy 9 августа 2023 г. 17:08

      В Нью-Йорке число случаев COVID выросло на 55%

      «В Нью-Йорке число случаев COVID выросло на 55%, врачи предупреждают о новых вариантах»: Коронавирус никуда не делся - он просто затаился, и медики ждут появления нового смертоносного варианта. «Рост числа случаев COVID-19 не ограничивается Нью-Йорком. Центр по контролю и профилактике заболеваний США зарегистрировал 8000 случаев госпитализации...
      614
      Jivoy 16 июля 2023 г. 14:11

      Начнутся испытания первого в мире препарата для восстановления зубов на людях

      Японские исследователи начнут испытания первого в мире препарата для восстановления зубов на людях в июле 2024 года ОСАКА — Японская исследовательская группа добилась успехов в разработке принципиально нового препарата, который позволит людям выращивать новые зубы. Клинические испытания на людях начнутся в июле 2024 года с целью обеспечения возможности...
      1607
      Jivoy 28 июня 2023 г. 15:23

      В Москве заработала третья нейросеть для медицинской диагностики

      В Москве заработал третий по счету диагностический инструмент на основе искусственного интеллекта, сообщил мэр Сергей Собянин. Подобными службами пользуются 1500 рентгенологов из 150 столичных учреждений; постепенно к ним присоединяются и коллеги из других регионов России. Нейросеть анализирует отклонения на снимках, полученных путем компьютерной томографии, по...
      642
      Jivoy 8 июня 2023 г. 15:18

      В Москве еще 7 заболеваний будут выявлять с помощью новой нейросети

      В Москве заработал новый комплекс искусственного интеллекта, который выявляет до 7 заболеваний на снимках, полученных путем томографии. Заместитель мэра по вопросам социального развития Анастасия Ракова рассказала, что система может обнаружить COVID-19, остеопороз позвоночника, аневризму аорты, легочную гипертензию, рак легких, ишемическую болезнь сердца и гидрото...
      481
      Jivoy 6 мая 2023 г. 10:17

      ВОЗ отменила статус пандемии для COVID-19

      Всемирная организация здравоохранения отменила статус глобальной пандемии COVID-19, заявил глава ВОЗ Тедрос Адханом Гебрейесус. «Комитет экспертов ВОЗ по чрезвычайным ситуациям по COVID-19 предложил мне отменить статус чрезвычайной ситуации в области общественного здравоохранения, имеющую международное значение (PHEIC) COVID-19. Я последовал этому совету ...
      526
      Jivoy 27 апреля 2023 г. 12:27

      Что говорит наука о вирусах

      Миллиарды лет назад органические молекулы научились реплицировать в первичном бульоне себе подобных. Так возникли первые формы жизни. Потом продвинутые молекулы создали клеточную оболочку и смогли таскать бульон с собой. Но неклеточные формы жизни никуда не исчезли. Их генетическое разнообразие до сих пор гораздо выше, чем у всех растений, животных и микроорганизм...
      1311
      Jivoy 18 апреля 2023 г. 15:07

      В московском медкомплексе испытывают отечественный аэрогель для заживления ран

      В московском медицинском комплексе "Коммунарка", расположенном в одноименном поселке, началось тестирование отечественного аэрогеля для заживления ран. Ожидается, что препарат станет надежной заменой иностранным аналогам. Глава департамента инвестиционной и промышленной политики Владислав Овчинский рассказал, что сегодня в городе работают 95 предприят...
      661
      Jivoy 15 апреля 2023 г. 20:56

      Австралийцы начинают широкую общественную кампанию по выходу из ВОЗ

      Австралийцы начинают широкую общественную кампанию по выходу из ВОЗ (Всемирной Организации Здравоохранения ООН), поскольку внесение поправок о том, что ВОЗ им. Билла Гейтса (одного из крупнейших донаторов организации) и Big Pharma должна стать мировым ЗАКОНОДАТЕЛЬНЫМ органом в области здравоохранения, а не консультативным (как сейчас), переходит все границы дозвол...
      1119
      Jivoy 20 января 2023 г. 14:19

      Достижения науки. Ученый из России совершил фундаментальное открытие в области генетики

      Руководитель направления «Нанобиомедицина» университета «Сириус», заведующий лабораторией МФТИ Максим Никитин открыл механизм «молекулярной коммутации» ДНК, который меняет представления в биологии. Результаты исследования опубликованы в одном из самых авторитетных научных журналов Nature Chemistry. От...
      1436
      Jivoy 20 ноября 2022 г. 11:30

      Почему в Индии взрослые мужчины держатся за руки

      В Индии, среди представителей сильной половины человечества, есть очень странная традиция – ходить, взявшись за руки. Что это? В Индии есть много странных вещей, которые могут смутить неопытного путешественника. Некоторые традиции индусов и вовсе могут показаться дикими. И знаете, почитание «говядины» — это самое безобидное, что есть ...
      3020
      Служба поддержи

      Яндекс.Метрика