Arbital на русском

Терминальные и инструментальные цели / ценности / предпочтения

2015.12.18   Элиезер Юдковский

«Инструментальные цели» или «инструментальные ценности» — это то, чего агент хочет ради достижения других целей. Например, мы можем захотеть сесть в машину — не потому, что нам нравится открывать двери ради самого процесса, а потому, что мы хотим куда-то поехать.

«Терминальные» цели, ценности или предпочтения — это те, в которых предпочтение определяется локально, а не путем рассмотрения отложенных или отдаленных последствий. Если вам просто нравится есть шоколад (и в остальном вы одобряете удовольствие от шоколада и т. д.), то вы не извлекаете свое предпочтение из того, что, по вашему мнению, относится к дальнейшим последствиям употребления шоколада.

Представьте себе реальность как огромную паутину событий, соединенных причинно-следственными связями. «Терминальная ценность» обычно локальна и оценивается в рамках одного события внутри графика; даже если это нелокальное благо, мы оцениваем его, оценивая историю до определенного момента и получая кусок гарантированной хорошести, который уже никуда не денется, независимо от того, что произойдет позже.

А «инструментальная ценность» — это нелокальное свойство события, зависящее от его реального или ожидаемого будущего и контингентное в зависимости от этого будущего; если вы просто сложите все инструментальные значения на графике, вы не получите осмысленной суммы, потому что какие-то значения при этом могут быть учтены дважды.

На моральном или этическом уровне инструментальные ценности оправдываются обращением к их последствиям, тогда как терминальные ценности оправдываются без обращения к их последствиям.

Дальнейшее чтение:


Категории:
Оригинал: Terminal versus instrumental goals / values / preferences (читать на GreaterWrong)    Перевод: К. Кирдан

Материалы распространяются по лицензии CC BY 3.0