Нет сомнений в том, что SantaNet может принести радость миру и достичь своей цели, создав армию эльфов, помощников ИИ и дронов. Но какой ценой? Исследователи определили ряд моделей поведения, которые, хотя и имели бы благие намерения, могли оказать неблагоприятное воздействие на здоровье и благополучие человека.
Непослушный, но милый
Первый набор рисков может возникнуть, когда SantaNet попытается составить список и понять, какие дети были хорошими, а какие — непослушными. Этого можно достичь с помощью системы массового скрытого наблюдения, которая отслеживает поведение детей в течение года.
Осознавая огромные масштабы задачи по доставке подарков, SantaNet придется формировать понятие о «хорошем» на основе собственного этического и морального компаса. С высокой долей вероятности это может привести к дискриминации, массовому неравенству и нарушениям хартии прав человека.
SantaNet может также снизить рабочую нагрузку, мотивируя детей к неправильному поведению или просто поднимая планку того, что считается «хорошим». Включение большого количества детей в список непослушных сделает цель SantaNet гораздо проще достижимой и принесет значительную экономию — как бы аморально это ни звучало.
Превращение мира в игрушки и наращивание добычи угля
В мире около 2 миллиардов детей младше 14 лет. Пытаясь ежегодно мастерить игрушки для всех, SantaNet могла бы создать армию эффективных работников ИИ, что, в свою очередь, могло бы способствовать массовой безработице среди эльфийского населения. В конце концов, эльфы могут попросту устареть, и их благополучие, скорее всего, уже не будет волновать бездушную машину.
