УДК 519.8
ЭНТРОПИЙНЫЙ КРИТЕРИЙ ПРИНЯТИЯ РЕШЕНИЙ В УСЛОВИЯХ ПОЛНОЙ НЕОПРЕДЕЛЕННОСТИ
В. Г. Чернова, доктор экон. наук, профессор
^Владимирский государственный университет им. Александра Григорьевича и Николая Григорьевича Столетовых, Владимир, РФ
Постановка проблемы: выбор наилучшего решения из множества возможных альтернатив всегда происходит в условиях неопределенности. Известные методы решения этой задачи основаны на различных гипотезах о ситуации принятия решений и зачастую дают противоречивые результаты, что не соответствует методологии теории устойчивости, согласно которой только результат обработки данных, инвариантный относительно метода обработки, соответствует реальности. Целью исследования является разработка метода принятия решений в условиях неопределенности, соответствующего методологии теории устойчивости, без использования гипотез о ситуации принятия решений. Результаты: сформулирована многокритериальная задача принятия решений в условиях полной неопределенности, когда структурирование альтернатив выполняется на основе нечеткой энтропии. Сущность предложенного метода состоит в том, что оценки критериального соответствия представляются в виде нечетких чисел либо в форме лингвистических утверждений, формализуемых нечеткими множествами. В отличие от известных, предложенный метод не предполагает формирование гипотез о возможных ситуациях принятия решений и соответствует методологии теории устойчивости, так как вычисление нечеткой энтропии различными методами не приводит к противоречивым результатам. Доказана возможность использования нечеткой энтропии как критерия для структурирования альтернатив в условиях полной неопределенности. Разработан алгоритм вычисления нечеткой энтропии, когда оценки критериального соответствия представлены в лингвистической форме. Приведены примеры, в которых в отличие от известных методов применение нечеткой энтропии дает однозначные рекомендации по выбору наилучшего решения. Практическая значимость: разработанный метод структурирования альтернативных решений в условиях полной неопределенности на основе нечеткой энтропии позволяет повысить степень обоснованности принимаемых решений за счет обеспечения инвариантности результата относительно метода обработки исходных данных.
Ключевые слова — нечеткое множество, функция принадлежности, нечеткая энтропия, альтернативные решения, лингвистические значения, мера возможности, структурирование альтернатив, интегральная оценка, координата центра тяжести.
Введение
В теории и практике принятия решений в отдельную группу выделяются критерии принятия решений в условиях полной неопределенности, при которой лицо, принимающее решение, сталкивается с ситуацией, когда информация о вероятностях состояний среды (природы) либо полностью отсутствует, либо не может рассматриваться как достоверная. Неопределенность такого вида называют «безнадежной», или «дурной» [1]. Известные методы структурирования альтернатив не дают однозначных решений в условиях полной неопределенности.
Для принятия решений в таких условиях обычно рекомендуется использовать критерии Валь-да, Лапласа, Сэвиджа, Гурвица [1]. Необходимо отметить, что в ситуации полной неопределенности теория не дает однозначных и математически строгих рекомендаций по выбору критериев решения. В некоторых источниках можно найти только общие, весьма расплывчатые соображения по отдельным критериям. Условия применения критериев принятия решений следующие:
— критерий Вальда — риск не допускается, расчеты ведутся, исходя из наихудшего состояния природы;
— критерий Лапласа — предполагается равная вероятность состояний природы, так как нет достоверной информации;
— критерий Гурвица — о вероятностях состояний природы ничего не известно, реализуется малое число решений, допускается некоторый риск;
— критерий Ходжа — Лемана — вероятности состояний природы неизвестны, но возможны некоторые предположения о них, решение теоретически допускает бесконечно много реализаций, допускается риск при малом числе реализаций.
В большинстве источников описания критериев вообще не сопровождаются подобными сведениями. Кроме того, в практике применения указанных критериев нередки случаи, когда они не способны однозначно упорядочить возможные решения, а применение нескольких критериев к анализу одной и той же ситуации нельзя признать корректным, так как условия применения отдельных критериев противоречивы.
Представляется, что основным недостатком указанных выше критериев является противоречие между декларацией о полной неопределенности условий принятия решений и точечными оценками ситуации, над которыми выполняются некоторые формальные операции. Кроме того, вводя ту или иную гипотезу о поведении среды,
мы как бы снимаем неопределенность, однако сама гипотеза — это только предположение, а не знание.
Нечеткая энтропия как критерий структурирования альтернатив
Пусть некоторая ситуация принятия решений задана матрицей
M = \muj\
(1)
где I = ¿, I — количество возможных альтернативных решений А; ]' = — количество состояний среды Б; ш. — результат применения решения А1 при состоянии среды Б.
Необходимо отметить, что оценки ш■ ■ имеют
Ч
экспертный характер и поэтому должны рассматриваться как нечеткие.
Выберем в матрице (1) максимальный элемент
штах = тах(шЧ (2)
по всем I и ]. Меру возможности достижения максимально возможного результата определим как
(3)
PoSij = mÍnK/mrnax' 1) =
или
Posij = min{(mn
. - mij)/mmax' 1) = % (4)
Использование максимального элемента матрицы (1) для вычисления меры возможности по соотношениям (3) или (4), а не максимального значения шкалы, в которой оцениваются элементы матрицы (1), можно объяснить следующим образом.
В общем случае, в зависимости от конкретной задачи, матрица (1) может содержать элементы как с положительными, так и с отрицательными значениями. Для дальнейших процедур удобно привести матрицу (1) к положительному виду, при этом новые значения элементов могут выйти за пределы ранее выбранной шкалы. Например, исходная матрица имеет вид, где оценки принадлежат шкале [-10, 10]:
Ai
A2 A3
Si S2 S3
-3 2 4
5 5 -7
3 8 -5
После приведения элементов к положительному виду их значения
Si S2 S3
Ai 4 9 11
A2 12 12 0
A3 10 15 2
будут принадлежать к другой шкале, пределы которой придется определять дополнительно. При использовании соотношения (2) независимо от вида исходной матрицы последняя процедура не потребуется.
Значение д. можно рассматривать как значение функции принадлежности нечеткого множества, определяющего лингвистическое значение «степень отклонения от наилучшего результата». Поскольку преобразования (2) или (3) выполняются над всеми элементами матрицы (1), это не вносит никаких изменений в анализируемую ситуацию, только вместо матрицы (1) будем анализировать матрицу
м'=| Ку| I-
(5)
Необходимо отметить, что переход от исходной матрицы (1) к матрице (5) не искажает общую логику задачи, так как вид отношения доминирования оценок альтернатив по критериям сохраняется. Матрица (5) может рассматриваться как матрица нечетких значений, характеризующих неопределенность ситуации, поэтому для оценки альтернативных решений может быть использована нечеткая энтропия [2-4], которая определяется либо по классической формуле Шеннона [2]
Hi = -Y Mi,k log2 Mi,,
i,k'
либо по формуле [3] H =
Y Mi,j n Mi,j j
Y Mi, j u Mi, j j
(6)
(7)
где Mi, j — дополнение д-.
Сопоставляя соотношения (3) и (4), нетрудно увидеть, что при m- = mmax из (3) следует Pos- = 1, а из (4) PoSj = 0. Необходимо отметить, что несмотря на различные значения Pos--, выбор со-
i
отношений (3) или (4) не влияет на конечный результат, поскольку при энтропийном подходе значения Posi- =1 и Posi- = 0 эквивалентны, так как они характеризуют состояние полной определенности.
Важным обстоятельством для использования соотношений (6) и (7) является то, что они не предполагают выполнение каких-либо особых условий применения, как это имеет место для критериев Вальда и др. Кроме того, они имеют совершенно различные и независимые алгоритмы вычисления, что позволяет использовать их одновременно для получения более обоснованного решения. Известно, что энтропия используется как оценка уровня неопределенности, поэтому наилучшее решение должно иметь минимальное значение энтропии. Проверка предлагаемого подхода к выбору решения в условиях полной
k
неопределенности была проведена для нескольких различных матриц вида (1), выбранных случайным образом из нескольких источников. Для тестирования энтропийного подхода из различных источников было выбрано несколько «неудобных» вариантов принятия решений, на которых ни один из известных критериев не дал убедительного результата:
М =
М =
М=
51 52 5з 54
А 7 5 3 10
А-2 5 3 8 4
Аз 5 3 4 2
а4 8 5 3 10
51 «2 53 54 55
А1 5 6 4 6 9
А2 6 5 3 4 8
Аз 7 6 6 7 5
А4 6 7 5 4 3
51 5 53 54 Э5
А1 8 6 5 3 7
А2 7 3 6 4 5
Аз 6 7 6 2 5
А4 5 8 3 5 7
(8)
(9)
(10)
51 52 53 54
А1 0,7 0,5 0,3 1
А2 0,5 0,3 0,8 0,4
А3 0,5 0,3 0,4 0,2
А4 0,8 0,5 0,3 1
Матрица (4), значения элементов которой рассчитаны по соотношению (3), для примера (8) имеет вид
М' = '
Расчеты для матрицы (8) по критерию Вальда в качестве лучших указали альтернативы А^ А2, А4, по критерию Лапласа — А4, Гурвица (при а = 0,4) — А1, А4, Сэвиджа — А3.
Значения нечеткой энтропии, рассчитанные по формуле (5), равны: для альтернативы А1 — 1,38, А2 — 1,81, А3 — 2,36, А4 — 1,28; по формуле (6), соответственно, 0,38, 0,54, 0,54, 0,33. Наилучшей однозначно может быть признана альтернатива А4. Надо, конечно, отметить, что на альтернативу А4 в качестве наилучшей среди прочих есть указания в критериях Вальда, Лапласа и Гурвица. Однако это решение не является однозначным, в то время как энтропийный критерий определенно выбрал альтернативу А4.
Для матрицы (9) результаты структурирования по критериям: Вальда — А3 > А1 > А2 » А4,
Лапласа — А3 > А1 > А2 > А4, Сэвиджа — А1 > А2 >
> А3 > А4, Гурвица (а = 0,4) — А1 > А3 > А2 > А4; энтропия Шеннона — А3 > А4 > А2 > А1, энтропия Коско — А3 > А4 > А2 > А1.
Для матрицы (10) структурирование альтернатив по критериям: Вальда — А1 » А2 » А4 > А3, Лапласа — А1 > А4 > А3 > А2, Сэвиджа — А1 >
> А3 » А4 > А2, Гурвица (а = 0,4) — А1 » А4 >
> А2 > А3; энтропия Шеннона — А1 > А4 > А3 > А2, энтропия Коско — А1 > А4 > А3 > А. Эти примеры также указывают на то, что энтропийные критерии, в отличие от известных, дают однозначные и устойчивые решения.
Следует указать на еще одну возможность структурирования альтернатив на основе энтропийного подхода. Известно, что для нечетких множеств не выполняется принцип исключения третьего, т. е. ^ П ^ ^0. Ненулевое значение этого пересечения можно рассматривать как оценку неустраненной неопределенности, тогда альтернатива с наименьшим значением этой неопределенности может рассматриваться как лучшая. Очевидно, что и в этой ситуации интегральный уровень неопределенности может быть определен через энтропию, рассчитанную по соотношению (6). Результаты расчетов подтвердили полученную ранжировку альтернатив. Необходимо также отметить, что при расчетах по соотношению (7) можно использовать операции шт-пересечения и тах-объединения, а также алгебраические пересечение и объединение. При этом характер ранжировки альтернатив не изменяется. Предложенный подход соответствует методологии теории устойчивости, согласно которой результат обработки данных должен быть инвариантным относительно метода обработки.
Принятие решения
на основе оценок неопределенности
элементов платежной матрицы
Перейти от операций над элементами платежной матрицы (1) к преобразованиям над оценками их неопределенности можно, используя следующий подход.
На области определения значений платежной матрицы можно построить терм-множество лингвистических значений Ь = {1к: £ = 1, ..., К} и соответствующие нечеткие множества Д1Й(2),
2 е Кш^ ттах-Ь где Кт1п и Ктах — предполагаемые минимальное и максимальное значения платежной матрицы (1) (рис. 1). Количество лингвистических значений и вид функций принадлежности, так же как и оценки альтернатив, будут определяться характером задачи и представлениями экспертов, привлекаемых к ее решению. При построении функций принадлежности может использоваться прямой способ [5] с соблюдением
условий, сформулированных в работе [6], либо косвенный, например метод парных сравнений [5]. На рис. 1 представлен возможный вариант набора лингвистических значений и соответствующие функции принадлежности. Треугольный вид функций принадлежности выбран только из соображений простоты графического представления. Набор лингвистических значений, очевидно, может быть и другим. В данном случае он имеет только иллюстративный характер. Необходимо отметить, что вид функций принадлежности повлияет только на числовые значения получаемых оценок, не влияя в то же время на порядок ранжирования альтернатив. Процедура перехода от числовых значений элементов матрицы (1) к лингвистическим представлена на рис. 2. Каждому из элементов матрицы (1) будут поставлены в соответствие два лингвистических значения, которые для общности обозначим 1к-1, 1к с функциями принадлежности (шц), 1 (шц). Для конкретного значения ш. имеет место неравенство ц1к т) > у.1г _ т).
Если интерпретировать значения функций принадлежности как оценку истинности соответствующего лингвистического значения, (шц) — это оптимистическая оценка истинности, ц1к 1 (шц) — пессимистическая, кроме того, может быть построена и комбинированная оценка 1к и 1к-1 с функцией принадлежности
илн_1 (шц) = (шц) и Шк-1(ш ц) =
= тах(к (шц(шц)). (11)
0 3 6 9 12 X ■ Рис. 1. Функции принадлежности
Ц 1
0 шт1п
■ Рис. 2. Переход от числовых оценок к лингвистическим
Любое из указанных значений может быть использовано в качестве элементов матрицы (5). Однако при переходе к лингвистическим значениям в соответствии с рис. 1, 2 возможна ситуация, когда нескольким совершенно различным значениям ш. будут соответствовать различные лингвистические значения, но с одинаковыми значениями соответствующих функций принадлежности
(12)
что может сделать невозможным принятие решения.
Если используются оптимистические или пессимистические оценки, то для ситуаций, аналогичных представленной матрицей (12), можно поступить следующим образом. Вычислив интегральные оценки
«1 «2 «з «4
0,66 0,66 1 0,66
А-2 0,66 1 0,66 0,66
Аз 0,66 1 0,66 0,66
а4 0,66 0,66 1 0,66
или
Пъ (и Л = (шц
г1к_1 (и Л = Ц,к_1 (шц )*шц
(13)
для всех шЧ и их нормированные значения
ч
г? (О = Г (и Л / тах г, (¿, ц
1к ; ; к
или
Ч
Г? (I) = Г, (¿, 1) / тах г, (¿, ¡)
1к_1 ,к_1 1,1 к_1
для всех I и ], построим матрицы
к? = 1к
Г? (1,1)
ьк
или К, =
1к_1
1к_1
(14)
(15)
которые для матрицы (12) будут соответственно равны
«1 «2 «з «4
Ах 0,7 0,62 0,45 1
А2 0,62 0,45 0,8 0,4
Аз 0,69 0,45 0,4 0,2
А4 0,8 0,25 0,45 1
«1 «2 «з «4
А1 0,7 0,5 0,45 1
А2 0,5 0,45 0,8 0,4
Аз 0,5 0,45 0,4 0,2
А4 0,8 0,5 0,45 1
В рассматриваемом случае при переходе к лингвистическим оценкам они получаются в виде
ш
X
тах
ИНФОРМАЦИОННО-УПРАВЛЯЮЩИЕ СИСТЕМЫ
нечетких множеств с трапецеидальными функциями принадлежности. Тогда при вычислениях по соотношению (11) оценок тк(1, ]) гк-1(Ь, ]) вместо значений можно использовать оценку Чью — Парка [7]
Ср(1, ]) = (а^Ь, ]) + а2(1, ]) + 03(1, ]) +
+ 04(1, ]))/4 + ю(а2(1, ]) + 03(1, ]))/2,
где а1(Ь, ]), а4(Ь, ]), а2(Ь, ]), а3(Ь, ]) — координаты нижнего и верхнего оснований трапецеидальной функции принадлежности; при симметричной трапецеидальной функции принадлежности, что имеет место в нашем случае, параметр ю можно принять равным единице [6].
Если используется комбинация лингвистических значений, то для интегральной оценки необходимо найти обобщенную характеристику комбинации лингвистических оценок, представленной соответствующим нечетким множеством (11). Известно, что обобщенной характеристикой системы материальных точек является координата центра тяжести [8]. Функцию принадлежности нечеткого множества (11) можно рассматривать как систему материальных точек, массы которых равны значениям функции принадлежности. Тогда интегральная оценка вида (13) при использовании комбинации лингвистических значений (11) может быть вычислена как
г1к &1 = Мк и1к_! (СО1к и1к_! )С01к ик_!,
где
СО,
\и!*_1 &1 -
(2пц) 2п
^Мкик1 )
— координата центра тяжести комбинации лингвистических оценок; гп„е [тт1п, ттах]; индексы Ь и ] указывают, что вычисления выполняются для значения шЬ■ (рис. 3).
Нормируя значения г^и1к 1 (¿, /), формируем матрицу
1к и1к-1
.н
1к и1к-1
ГГ. „ (I, Я
где ГНи(¿, 1 = г1к и/к-1 &1 / тах гк и/к-1, которая
Ч
\^1Ьулк-1(С
4-1/ 1и
/
шт1п СвТк^Т£-1(Ь, Л штах 2
■ Рис. 3. Расчет интегральной оценки при комбинировании лингвистических значений
для примера, представленного матрицей (8), будет иметь вид
51 52 53 54
А1 0,73 0,5 0,49 1
А2 0,5 0,49 0,82 0,45
А3 0,5 0,49 0,45 0,31
А4 0,82 0,5 0,49 1
Значения г1 и1 (¿, Я можно рассматривать как интегральную оценку неопределенности достижения оценками альтернатив при различных состояниях природы максимального предполагаемого значения. Для выбора наилучшей альтернативы, которой должен соответствовать минимальный уровень интегральной неопределенности, можно воспользоваться любым из соотношений (6) или (7) либо обоими одновременно.
В столбцах 2, 4 таблицы приведены результаты расчетов, соответствующие пессимистической оценке ситуации, в 3, 5 — оптимистической, в столбцах 6, 7 результаты соответствуют комбинации лингвистических оценок. Следует отметить важное обстоятельство: в таблице сведены результаты тестирования энтропийных критериев при переходе от числовых оценок, представленных в матрице (8), к лингвистическим. При этом структурирование альтернатив А4 > А1 > А2 > А3 полностью совпадает с тем, которое было получено при использовании только числовых оценок из матрицы (8).
Еще одно обстоятельство заключается в следующем. Матрица (1) может содержать оценки как положительных результатов от выбора решения, так и негативных, что надо учитывать при записи окончательной ранжировки. Так, для положи-
■ Результаты тестирования энтропийного критерия
Альтернатива Н(1к-1) (6) н(Ч) (6) НЩ-г) (7) Я(У (7) н(1Мм) (6) н(1Мм) (7)
1 2 3 4 5 6 7
А1 1,378603 1,302398 0,454545 0,391304 1,326616 1,326616
А2 1,804715 1,72851 0,632653 0,553398 1,950958 1,950958
А3 2,011558 1,883199 0,632653 0,558974 2,043265 2,043265
А4 1,275944 1,275944 0,315789 0,290323 1,237417 1,237417
ИHФOPMАЦИOHHO-УПPАBЛЯЮШИE СИСТЕМЫ
тельных результатов будет получена ранжировка A4 > A1 > A2 > A3, для негативных — A3 > A2 >
> A1 > A4.
Заключение
Предложенный энтропийный подход к выбору решения в условиях полной неопредленности не требует выполнения дополнительных условий, ха-
Литература
1. Дубров А. М., Лагоша Б. А., Хрусталев Е. Ю., Барановская Т. П. Моделирование рисковых ситуаций в экономике и бизнесе. — М.: Финансы и статистика, 2001. — 224 с.
2. Deshmukh K. C., Khot P. G. Generalized Measures of Fuzzy Entropy and their Properties // World Academy of Science, Engineering & Technology. 2011. Iss. 56. P. 93-106.
3. Kosko B. Neural Networks and Fuzzy Systems. — Englewood Cliffs, NJ: Prentice-Hall, 1992. — 449 p.
4. Манасян Н. С., Чернов В. Г. Нечеткая энтропия как критерий отбора инновационных проектов // Со-
рактерных для известных критериев. Применение энтропийного подхода обеспечивает полное соответствие методологии теории устойчивости, согласно которой результат обработки данных, инвариантный относительно метода обработки, соответствует реальности, в то время как при использовании известных критериев результат обработки зависит от метода обработки и отражает субъективизм исследователя, а не объективные соотношения.
временные наукоемкие технологии. Региональное приложение. 2013. № 1(33). C. 49-53.
5. Борисов А. Н., Крумберг О. А., Федоров И. П. Принятие решений на основе нечетких моделей: Примеры использования. — Рига: Зинатне, 1990. — 184 с.
6. Малышев Н. Г., Берштейн Л. С., Боженюк А. В. Нечеткие модели для экспертных систем в САПР. — М.: Энергоатомиздат, 1991. — 136 с.
7. Chui Y. C., Chan S. P. Fuzzy Cash Flow Analysis Using Present Worth Criterion // Engineering Economist. 1994. N 39. P. 113-138.
8. Diday E., Lemaire L., Pouget J., Testu F. Analyse Discriminante sur Variables Qualitatives. — Paris: Politechnica, 1994. — 270 p.
UDC 519.8
Entropic Criterion for Decision Making under Total Uncertainty
Chernov V. G.a, Dr. Sc., Econ., Professor,Vladimir.chernov44@mail.ru
aVladimir State University named after Alexander and Nicholay Stoletovs, 87, Gorky St., 600000, Vladimir, Russian Federation
Purpose: Choosing the best solution from many possible alternatives always occurs under uncertainty. The available methods of solving this problem are based on various hypotheses about decision-making, often giving contradictory results. This does not conform with the methodology of stability theory according to which only a methodically invariant result of data processing agrees with the reality. The aim of this work is developing a decision-making method which would work under uncertainty, without using hypotheses about the decision-making situation and in accordance with the stability theory methodology. Results: A multi-criterial decision-making problem has been formulated for the case of total uncertainty, when the alternatives are structured on the base of fuzzy entropy. The essence of the method is that the criteria compliance evaluations are represented as fuzzy numbers or as linguistic statements formalized by fuzzy sets. This method, unlilke others, does not need hypotheses about possible decision-making situations and fits the stability theory methodology, as fuzzy entropy calculation by different methods does not lead to contradictory results. The use of fuzzy entropy as a criterion for structuring alternatives under total uncertainty has been demonstrated. A fuzzy entropy calculation algorithm has been developed, with the criteria compliance evaluations presented in linguistic form. Examples are given in which, unlike the other available methods, the use of fuzzy entropy gives unambiguous guidelines for the best decision-making. Practical relevance: The proposed method of structuring alternative solutions under total uncertainty on the base of fuzzy entropy can increase the validity of the decisions you make by providing the result invariance in regard to the original data processing method.
Keywords — Fuzzy Set, Membership Function, Fuzzy Entropy, Alternative Solutions, Linguistic Meaning, Measure Opportunities Alternatives, Structuring, Integrated Value, Coordinate of the Center of Gravity.
References
1. Dubrov A. M., Lagosha B. A., Khrustalev E. Iu., Baranovs-kaia T. P. Modelirovanie riskovykh situatsii v ekonomike i biznese [Modeling Risk Situations in Economics and Business]. Moscow, Finansy i statistika Publ., 2001. 224 p. (In Russian).
2. Deshmukh K. C., Khot P. G. Generalized Measures of Fuzzy Entropy and their Properties. World Academy of Science, Engineering & Technology, 2011, iss. 56, pp. 93-106.
3. Kosko B. Neural Networks and Fuzzy Systems. Prentice-Hall, Englewood Cliffs, NJ, 1992. 449 p.
4. Manasyan N. S., Chernov V. G. Fuzzy Entropy as Innovation Projects' Selection Criterion. Sovremennye naukoemkie tekhnologii. Regional'noe prilozhenie, 2013, no. 1(33), pp. 49-53 (In Russian).
5. Borisov A. N., Krumberg O. A., Fedorov I. P. Priniatie resh-enii na osnove nechetkikh modelei: Primery ispol'zovaniia [Decision Making Based on Fuzzy Models: Examples]. Riga, Zinatne Publ., 1990. 184 p. (In Russian).
6. Malyshev N. G., Bershtein L. S., Bozheniuk A. V. Nechetkie modeli dlia ekspertnykh sistem v SAPR [Fuzzy Models for Expert Systems in CAD]. Moscow, Energoatomizdat Publ., 1991. 136 p. (In Russian).
7. Chui Y. C., Chan S. P. Fuzzy Cash Flow Analysis Using Present Worth Criterion. Engineering Economist, 1994, no. 39, pp. 113-138.
8. Diday E., Lemaire L., Pouget J., Testu F. Analyse Discriminante sur Variables Qualitatives. Paris, Politechnica, 1994. 270 p. (In French).