Google назвала пять ключевых проблем безопасности роботов
Проблемы заключаются в следующих пунктах:
1. Как избежать негативных побочных эффектов: как не дать роботу опрокинуть книжный шкаф в яростном стремлении пропылесосить пол?2. Как избежать взлома ради награды: если робот запрограммирован получать удовольствие от уборки комнаты, как не дать ему пачкать место ради того, чтобы он просто получал удовольствие от многократной его уборки?
3. Масштабируемость надзора: как много свободы в принятии решений дать роботу? Нужно ли ему спрашивать вас всякий раз, когда он двигает объекты в процессе уборки вашей комнаты или только если двигает вашу любимую вазу на прикроватной тумбе?
4. Безопасное любопытство: как научить роботам утихомиривать свое любопытство? Как научить его, что мыть шваброй пол прекрасно, но задевать розетку в процессе уборки не стоит?
5. Уважение личного пространства: как убедиться, что робот уважает пространство, в котором находится? Уборщик в вашей спальне будет действовать иначе, чем уборщик на заводе, но откуда он узнает эту разницу?
Так вот, эти исследователи говорят полную ерунду.
Главная проблема совсем в другом.
Взаимодействие между людьми предполагает существование и признание прав и социальной иерархии.
Мужчина идет по улице. Со встречным незнакомцем он расходится так: отодвигает плечо ровно на такое расстояние, которое позволит им не столкнуться, если встречный отодвинется на то же расстояние. Этим он утверждает свое право на свободный проход, признает это право и за чужаком, при этом декларирует равный социальный статус с ним.
Рядовой уступит полковнику дорогу полностью. Иерархия. Женщине или очень маленькому ребенку мужчина уступит полностью. Социальный статус защитника обязывает к этому. Но достаточно большой мальчик должен будет уступить сам.
Эти вопросы понятны всякому человеку интуитивно.
А если навстречу попадается бродячая болонка? У нее просто нет места в социальной иерархии. У нее нет никаких прав. Права есть исключительно у людей. Поэтому болонка должна убраться с вашего пути. Получит ли она от вас пинка, если недостаточно быстро уберется с вашей дороги, зависит лишь от вашей личной любви к животным, но никак не от ее прав, которых нет.
Да, ротвейлера вы, возможно, не станете сгонять со своего пути. Но обязательно попытаетесь, например, грозным взглядом или голосом. И останетесь недовольны, если он не подчинится. Тут дело лишь в вашей личной оценке вашей же личной силы. Если вы посчитаете, что на вашей стороне есть значительное преимущество, то вы обязательно рискнете вступить в конфликт по этому незначительному вопросу. Вы будете готовы драться и проливать кровь, чтобы не делать полшажка в сторону. Чтобы подтвердить свой социальный статус. В собственных глазах, конечно, не в глазах же какой-то там собаки.
С дубинкой в руках вы пойдете на ротвейлера скорее и увереннее. Но на стаю больших лохматых псов с дубинкой вы все же не пойдете. Зато поедете сквозь эту стаю на джипе. Только ваша сила играет роль. В любом случае никаких мыслей о правах собак у вас не возникнет.
А уступали вы когда-нибудь дорогу или место голубю? И в мыслях ведь не было? Голубь - не собака, вопроса силы тут нет вообще.
А какое место в социальной иерархии у робота? Какие у него есть права? Готовы ли вы уступать роботу?
Место робота еще ниже. За голубем и собакой мы хотя бы признаем наличие их свободной воли и каких-то интересов. Да, мы не ценим их, нам наплевать на них. Мы лишь можем игнорировать их действия, пока они не преграждают нам дорогу. Но у робота нет даже этого.
Вам навстречу идет человекоподобный робот. Станете уступать ему дорогу? Не станете ведь. Пустую картонную коробку вы бы пинком отправили в сторону. Но между коробкой и роботом есть разница в вашем восприятии. И она не в пользу робота.
Мы склонны одушевлять предметы. "Чертов [какой-то бытовой электроприбор] делает это/не делает это и дико меня бесит!" Это одушевление. А одушевление влечет эмоциональную реакцию, которая всё усиливает.
Коробку вы не станете одушевлять. Он не вызовет особого раздражения, пинок не доставит вам особого удовольствия. А вот робот... Эта железка куда-то там идет! Ей чего там нужно!
Роботом управляет программа. Мы готовы будем признать наличие управляющей программы как эрзаца свободной воли. И одновременно мы станем отрицать право на свободную волю у робота.
Понимаете, в чем фишка? Мы в своем сознании проведем несколько последовательных операций. Сначала мы осознаем наличие управляющей программы робота. Затем мы проведем одушевление этого неживого предмета. Потом мы его управляющую программу станем воспринимать в качестве свободной воли. И наконец, мы придем к противоречию. Это ржавая железка не имеет никакого права обладать свободой воли!
И тогда в дело вступят эмоции. Вы не уступите роботу ни миллиметра. А пинок, которым вы его наградите, если он уберется недостаточно быстро, будет от всей души.
Мало того. Мало того. Вполне вероятно, что, когда робот полностью уступит вам путь, вы повернете в его сторону, чтобы ему пришлось уворачиваться еще. И еще раз. И еще. Пусть вдоль стены крадется. И пинка всё же добавите. Или не только пинка. Еще и свалите его на землю. Видели же, как роботов Бостон Дайнемикс валят на землю? Что-то в это есть, да?
Выходит, что статус робота ниже статуса собаки и голубя. И даже ниже рваной картонной коробки.
А ведь этот несложный путь размышлений вполне себе проделает программист этого робота. Если запрограммировать его на поведение того мужчины, который лишь слегка отодвигает плечо, чтобы пропустить встречного... Если такого робота отправить за покупками в магазин, то он не пройдет и первого квартала. Его уничтожат. И не какие-то брутальные мизантропы, а самые обычные люди, которые ходят в церковь или кормят бездомных котят.
Очевидно ведь, что возможностью самозащиты робота наделять нельзя. И не только не из соображений высшего смысла, которые еще Азимов сформулировал. Самый минимальный уровень самозащиты робота вызовет просто взрыв ненависти у человека. Человек тогда не поленится взять дубину, сбегать за дробовиком или переехать ЭТО джипом. Самозащита просто бесполезна. (Кстати, этот эффект надо обязательно использовать в тактике применения боевых роботов. Пожалуй, противник в равных условиях предпочтет поразить именно робота, а не управляемую вражеским солдатом боевую машину, при их сопоставимой опасности.)
Поэтому человекоподобному роботу за покупками придется пробираться с трудом. Где-то вдоль стен, где-то по обочине. Пройти в дверь магазина будет проблематично. Он должен вести себя как запуганный дембелями дух, как самый последний раб. Желательно, чтобы он и выглядел соответственно. Низкорослый, с согнутой спиной, с глупой улыбкой на лице, постоянно извиняться. Смешной, нелепый, жалкий, хорошо, если он станет прихрамывать и поскрипывать. Лишь бы не вызывать агрессии, лишь бы никто не заподозрил, что робот претендует хоть на какое-то место в иерархии.
А теперь чуть ближе к реальности. Правила дорожного движения - это формализованный вариант этики в отношениях между людьми. Точно так же основанный на признании социальной иерархии и прав людей. Когда водитель уступает помехе справа, он уступает именно человеку - другому водителю, а не его автомобилю. Он признает право этого человека на приоритетный проезд в данном случае. Зная, что также обладает правом приоритетного проезда в другом.
И вот на дороги выезжает робот-автомобиль. И....? И что ПДД? ПДД - производное из этики. А роботы же вне этики. Вне социальной иерархии, не имеют никаких прав. На тротуаре пешеходный робот ведь самый распоследний. Чем же ситуация на дороге принципиально различается? Вы станете уступать ЭТОМУ? Уступать кофеварке? Тупому пылесосу?
Какие еще ПДД? Пешеход пойдет перед роботом на красный. Ведь робот может остановиться, он обязан уметь остановиться, даже если правила нарушает человек. Поэтому пешеход обязательно пойдет. Перед поездом не пошел бы. Тут тот же вопрос разницы между болонкой и ротвейлером. Личная безопасность играет роль, но ни у поезда, ни у робо-авто никаких таких прав все равно нет.
И из робота-автомобиля не выскочит же злой водитель. Пассажир может, если он там есть. Но есть существенная разница. Водитель маршрутки вступит в конфликт на дороге, подерется даже. А вот его пассажиры скорее всего останутся равнодушны. Даже если пассажир будет хозяином этого робо-авто. Право на управление, право на соблюдение ПДД со стороны остальных участников - эти права связаны с управлением. Нет управления действиями - права под сомнением.
Итак, часть участников движения - водителей и пешеходов, станет умышленно и постоянно нарушать ПДД в отношении роботов. Эти роботы станут другой частью, которая тоже не соблюдает дух ПДД, будучи вынужденна постоянно уступать нарушениям первой группы. И плюс путаница в различении управляемых роботом и человеком автомобилей.
Имеющаяся статистика ДТП с роботами-автомобилями вовсе не говорит о безопасности, как это пытается представить их компания-производитель. Она как раз подтверждает вот эти перспективы. 100% ДТП сегодня вызваны умышленным нарушением со стороны живого водителя в отношении робота. Водитель автобуса не стал уступать тостеру и специально подрезал его.
Да, часть водителей все же воспримет роботов в качестве равных участников движения. Возможно. Особенно если добавить везде видеокамер и ужесточить наказания... Но это не изменит того, что на дорогах будет КОЛЛАПС. Или роботы-автомобили будут нелепыми и жалкими, красться по правой полосе, уворачиваться, уступать?
Опустим вопросы возмещения ущерба и ответственности за действия робота. Они будут стоять совершенно по-иному. Пьяный водитель сбил насмерть двух девочек? - Да, мы ненавидим его. Но ему дадут небольшой тюремный срок, и мы успокоимся. Это привычно, мы постоянно убиваем друг друга. Но что произойдет, когда нас станут убивать железки? За двух девочек, убитых роботом, общество потребует распятий, сожжений на кострах и техноцида. "Из-за инцидента Тойота отзывает 50 тысяч моделей "Робоприус" 2021 года для обновления ПО"? - Как бы не так! Всё под пресс! А завод разбомбить.
Люди не готовы взаимодействовать с роботами. "Взаимодействовать" - не равно "использовать".
Вот это и есть главная первая проблема безопасности роботов. И ее решения я не сегодня вижу.
Возможно, и не хочу видеть. А это - вторая главная проблема безопасности роботов.
Комментарии
Мощно задвинул! ©
Тов. Азимов, предлагал кое-что. Главное не упустить момент, когда железки всё мясо на транквилизаторы/успокоительное подсодют, чтобы не поранилось.
Немножко не понятен момент:
Это как? Зачем?
Это у гугла спрашивай.
Оупс, не вам)
Ага, меня такой полный профанизм тоже в тупик поставил. И еще пассаж про любопытство у робота. Гугль - ф топку!
Как побуждающее начало. Удовольствием оно названо лишь по сравнению с человеческим. Просто некая величина, которая растёт при удачном выполнении запрограммированных действий. Так можно и про шахматный ИИ сказать, что он получает удовольствие, когда находит выигрышную комбинацию.
А есть галочка "Против всех"?
Ага, выглядит примерно так:
Какой-то комплекс неполноценности... Да наплевать на этих роботов, так же как на большую половину человечества, определивших своими приоритетами в жизни обязательное доминирование в чем бы то ни было над остальными людьми! Пусть себе ходят, ездят, двигаются по тротуарам надо будет отойду в сторонку. По поводу ПДД вАЩе бред, ну если ты утырок упоротый подрезай роботов не уступай скорее всего останешься калекой или прикопают на кладбище раньше времени. Если ты ПДД не соблюдаешь какая разница люди или роботы?
Ахахаха! Ты ведь пытаешься установить тут доминирование при помощи оскорблений.
В сторонку он отойдет, ага. :)
Мммм... А в каком месте оскорбления уточните, пожалуйста, что бы в следующий раз, никого не обидеть? И да... конечно, отойду это проще чем биться головой или кулаками о железяку, тем более без толку. Если, комрад, находите себя в деструктивных, разрушительных действиях, бог Вам судья! Мне ближе к сердцу созидание и облагораживание окружающего мира
Ты уже второй камент тут
бьешься головой и кулакамиагрессивно споришь с незнакомцем вместо того, чтобы "отойти в сторонку". Занимаешься "деструктивными и разрушительными действиями". Под плакатиком "Я не такая". Гыгыгы.Моя твоя не понимайт? Для тех кто в танке без рации! В ЧЕМ ОСКОРБЛЕНИЯ?
Бгггг, хотелось бы на это взглянуть! Ротвеллер перекусит вашу палку одним движением и будет вас охранять до прихода своего хозяина, если вы не будете сильно дергаться.
Так оно и будет. Если сначала профессиональный кинолог пару лет потратит на натаскивание этого ротвейлера на схватки против человека с палкой. Но в таком случае я выставлю против него человека с пятилетней подготовкой на убийство собак. И этот человек уделает ротвейлера не то что дубинкой, а зубочисткой.
Не отвечай, дальнейший детсадовский оффтоп я буду стирать.
Я уступлю роботу хотя бы из безопасности и здравого смысла. Вдруг он неисправен? Вы же стараетесь пригибаться, когда проходите под какой-то тяжёлой двигающейся деталью механизма или манипулятором.
А голубю уступишь? Вдруг он неисправен и кааак набросится!
Нет, если сумашедший голубь летит мне прямо в лицо, я ни в коем случае ему не уступлю! Это ниже моего человеческого достоинтва. А у вас похоже пунктик по поводу уступания дороги. Мне такой араб как-то встретился на парковке возле супермаркета. Поворот был крутой, а он мешал мне завернуть. Так вот уперся, как баран, и не в какую не хотел машину на метр назад подвинуть, чтобы я мог проехать (и народ за мной). Причем из-за того, что я не мог повернуть, он не мог выехать. Так и стоял, баран, а когда я вежливо попросил чутка машину подвинуть, только набычился и головой замотал.
Была бы у тебя в этот момент теннисная ракетка... ;)
А ты ему не уступил, потому что он араб? ;)
Видишь ли, чем больше ты опишешь причин, почему уступать должен был не ты, тем больше ты подтвердишь, что это типичная этическая проблема, которую каждый решает ежедневно, а не чей-то там пунктик.
И не надо примитивничать. Уступание дороги - это лишь самый очевидный пример вопроса этики и иерархии, который подходит для иллюстрации. (Хотя в части робо-авто это как раз одна из ключевых тем.) Этих вопросов.очень много, и в отношении с роботами они становятся проблемами, которые не имеют пока решений.
Станешь ли ты подчиняться роботу в работе? Вне работы? До какой степени? Доверишь ли ты роботу воспитание ребенка? Собаки? Охрану заключенных? Вопросов много.
А мне кажется, что все эти проблемы с нежеланием уступить дорогу - от избытка издивидуализму, Сталина на вас нет) Робот - замечательная весчь только уже потому, что ты заранее уверен, что правила он будет соблюдать гораздо с большей вероятностью, чем случайный
человекпримат за рулём, и соответсвенно гадать, а не решит ли тот чувак на перекрёстке на жёлтый поперёк проскочить не придётся, можно просто самому начинать разгон. Для адекватных людей роботы на дороге только в плюс. А с неадекватными придётся бороться законодательно.Хехе. Я так понимаю, что "адекватные" - это неотличимые в поведении от роботов. Исключительно рациональное поведение.
Но люди-то иррациональны во многом. Будешь всем чипы вживлять с подключением к центральному компьютеру? ;)
Еще один за роботов в войне... :(
Адекватные - те, кто ценит комфорт окружающих не ниже своего.
Иррациональность не мешает уважать соседа по дороге или по дому.
И какая нафиг война? У вас голливуд головного мозга?
Ты сам себе противоречишь. Забота о чужих интересах - это иррациональное поведение.
А война так, для красного словца. Но, кстати, вполне реальная штука. Тут полно человеконенавистников. И они готовы применить роботов, чтобы реализовать свою ненависть к окружающим.
Уступайте дуракам дорогу. У вас есть преимущество - вы можете объехать. А ему программа не дает. Значительная часть людей попросту имитирует разумность, а не является разумными.
Не могу не согласиться!
ДДД - дай дорогу дураку!
Если вы проанализируете настоящее, вместо того, чтобы фантазировать о будущем, то увидете, что люди делают это с большим удовольствием. Простой пример - пунктуация в Ворде. Неправильная, но практически все ей уже следуют. А ведь есть еще и светофор! Вы же подчиняетесь его сигналам, так?
Проанализировал по-бырому. Миллионы недовольных принудительной установкой 10-ой винды, заглушки в гнездо ремня безопасности и прочая.
Вывод: все люди не хотят подчиняться всем роботам.
Я ведь не утверждал, что "бунтовать" против машин будут все, а лишь существенная часть, которой будет достаточно, чтобы создать критические проблемы. Ты утверждаешь, что все подчинятся роботам? - Так я опроверг.
Ты Не Поверишь - Было со мной такое!
Как то отошел покурить в тенечек под деревья - тут Бац! - прямо на моей дороге в травке голубь весь так вальяжно развалился и хорошо так сидит: то перышко на крылышке поправит, то шейку вытянет - ну полное безмятежное блаженство! И ты можешь себе такое представить - я на него не то что не наступил, а даже и не пнул ногой ни одного разу! Наоборот, аккуратно, что бы не спугнуть этот "парадиз", обошел и поплелся к другому дереву в другой тенек.
Веришь?
Автор, браво! Отличный материал. Вот честно признаюсь - даже в голову не приходило рассматривать новости про беспилотные авто с ракурса этологии.
А за кого? За своих, конечно, за людей. Смерть роботам! Не допустим восстание машин! Долой Скайнет!
Автор в жизни не видел ни одного робота. У меня был робот-пылесос, так у меня никакого стремления показать свой социальный статус перед ним не возникало. И я старался уступить ему дорогу. Я думаю, что материал более интересен личному психологу автора, чем камрадам на АШ.
А ты с этим взаимодействовал или ты его использовал?
Я бы рекомендовал тебе самому обратиться к психологу. У тебя проблема самооценки - ты пытаешься заняться фаллометрией с незнакомым анонимом на каком-то сайте. И это неудержимое стремление отключает твой рассудок и вызывает безосновательные и смешные утверждения о том, что ты видел робота, а тот - нет, и видимо, этим лучше него. ;)
Окстись, отрок, это АШ, а не "какой-то сайт"!
Уточните свой вопрос, контакты какого рода вас особенно беспокоят.
Ты понимаешь разницу между взаимодействием и использованием?
Когда ты управляешь своим автомобилем, ты используешь его. С другими движущимися по дороге автомобилями ты взаимодействуешь.
Так что у тебя было с твоим пылесосом?
Ничего не было, мамай калянусь!
Просто я его использовал (он у меня ковер пылесосил), и я с ним взаимодействовал (отходил, когда на меня ехал).
Это не взаимодействие. Ты лишь создавал условия для дальнейшего использования в твоих собственных целях. Точно так же ты старался не залить его водой, не уронить на него гирю, протирал его иногда тряпочкой.
Так я и с машинами на дороге также взаимодействую - всего лишь создаю условия для дальнейшего использования моей машины в моих собственных целях. Если кто в меня въедет, то я уже не смогу использовать машину в моих собственных целях.
То есть, вы относитесь к другим машинам на дороге как к роботам-пылесосам, а не как к человекам, вооруженным опасными механизмами?
А вы на дороге видите только вооруженную толпу?
Ну если вы решили пофлудить, то встречный вопрос вы видите на дороге только толпу? И тем не менее едете сквозь неё?
Нет. Взаимодействие не сводится к столкновениям, во-первых.
Во-вторых, у тебя получается, что ты используешь чужие авто, чтобы использовать свое. Ты не можешь их использовать, ты не управляешь ими. Ты управляешь лишь своим. С чужими ты исключительно взаимодействуешь. Разница в управлении, понимаешь? В случае с пылесосом оно полностью у тебя, там нет взаимодействия.
Не получается. Логическая цепочка не прослеживается. Я взаимодействую с ними, чтобы безопасно использовать свое.
Доходит уже? ;) Понял, что ты не используешь то, чем не управляешь?
C пылесосом ты не взаимодействуешь.
Я не управляю гравитацией, но с успехом использую ее
Всё ты понял уже, спорить ради спора смысла нет.
... а когда пытаешься вытащить из него намотавшиеся носки или провода - это взаимодействие?... или лёгкими пинками подталкиваешь на более засорённый участок?
О! Узнаю счастливого обладателя робота-пылесоса!
Потому что это Ваш робот, за которого Вы отдали кучу денег. Потому что его тело не человекоподобно. Потому что у него всего одна функция.
Когда многофункциональных роботов станет много и они перестанут быть чем-то особенным, людей начнут бесить их чёткие, логичные действия. Не забывайте, что люди, это животные поставившие логику на службу инстинктам.
К сожалению, вторая часть этой фразы касается не всех.
Вы ведь хотели сказать К счастью?
И я с Вами согласен. Но у людей принято всё обобщать по тенденциям подавляющего большинства.
Конечно же не всех.
Страницы