Василиск Роко

Василиск Роко (англ. Roko’s Basilisk) — мысленный эксперимент, предложенный участником сайта Lesswrong.

Суть эксперимента

Согласно эксперименту, Василиск — будущий могущественный недоброжелательный искусственный интеллект, который захочет наказать тех, кто в прошлом знал о возможности его появления, но не способствовал его созданию. Сам факт этого знания подвергает человека риску наказания[1].

Многие авторы называют этот опыт «самой жуткой дилеммой технофутуризма»[2].

Задача эксперимента

Мнение о том, что описание этого мысленного эксперимента — попытка создать самоисполняющееся пророчество не более обоснована, чем обвинения автора Кота Шрёдингера в живодерстве. Задачей этого мысленного эксперимента было продемонстрировать недостатки вневременной теории принятия решений (TDT).

Пари Паскаля

Дилемма Василиска близка к «пари Паскаля» — аргументу, предложенному математиком и философом XVII века Блезом Паскалем: человек должен посвятить себя христианскому Богу, даже если он не уверен в его существовании, так как Бог может предложить вечный «выигрыш» (в раю) или вечное наказание (в аду). Согласно Паскалю, вероятность существования Бога не так важна, так как любые конечные затраты перевешиваются перспективой вечного вознаграждения или вечного наказания. Исходя из этого, наиболее рациональное эгоистичное решение — начать помогать появлению Василиска, социальное — наоборот[2].

Запрет обсуждения

Основатель Less Wrong, Элиэзер Юдковский, удалил посты Роко по этой теме, назвав его «глупым».

Вы, должно быть, умны, раз пришли к такой мысли. Однако меня печалит, что люди, которые достаточно умны, чтобы представить себе такое, недостаточно сообразительны, чтобы ДЕРЖАТЬ СВОЙ ДУРАЦКИЙ ЯЗЫК ЗА ЗУБАМИ и никому не говорить об этом, так как это важнее, чем показать себя умным, рассказывая об этом всем своим друзьям.

[3]

Обсуждение теории Роко было запрещено на LessWrong на несколько лет[4][5], прежде чем запрет был снят в октябре 2015.[6]

Ссылки

См. также

Примечания
  1. 10 самых пугающих теорий, известных человеку.
  2. Василиск Роко: самая жуткая дилемма технофутуризма (15.09.2015).
  3. S. Zotov. Василиск Роко: самый пугающий мысленный эксперимент в истории. theoryandpractice.ru (18 августа 2014).
  4. Love, Dylan. WARNING: Just Reading About This Thought Experiment Could Ruin Your Life. Business Insider (6 августа 2014). Дата обращения: 6 декабря 2014.
  5. The Most Terrifying Thought Experiment of All Time, Slate (17 июля 2014). Дата обращения 18 июля 2014.
  6. RobbBB. A few misconceptions surrounding Roko's basilisk. LessWrong (5 октября 2015). — «The Roko's basilisk ban isn't in effect anymore». Дата обращения: 10 апреля 2016.
This article is issued from Wikipedia. The text is licensed under Creative Commons - Attribution - Sharealike. Additional terms may apply for the media files.