£1----------------
УДК 577.71:519.95
ОПТИМАЛЬНОЕ УПРАОЛЕНИЕ ПАРАМЕТРАМИ РАЗЛАДКИ О ЗАДАЧЕ МАКСИМИЗАЦИИ ЭНЕРГОПРОДУКТИОНОСТИ И РЕЗУЛЬТИРУЮЩАЯ ГЕТЕРОГЕННОСТЬ ПОПУЛЯЦИИ
А. А. Бутов, М. А. Волков Ульяновский государственный университет, г. Ульяновск
Решена задача оптимального управления параметрами разладки энергопродуктивности. Показана неунимодальность целевой функции при определенных ограничениях, приводящая к возникновению гетерогенности популяции в ходе процессов старения.
ВВЕДЕНИЕ
Определение структур популяций (выщеление субпопуляций) и решение обратной задачи — идентификации целевой функции на основе анализа структуры — оказывается наиболее полезным и актуальным при анализе таких объектов, как системы с разладками. В технических приложениях момент разладки зачастую интерпретируется как момент перехода прибора или машины в “форсированныш” режим работы (например, переход работы двигателя на бензин с более низким октановым числом), в биологических — как момент перехода организма в состояние кортизолового стресса, в результате которого может развиться гипертония или диабет, и т. п. В качестве момента разладки также может рассматриваться момент дифференцировки тканей, который сопровождается онтогенетическими событиями (например, переходом из личиночной стадии в фазу зрелого организма). Во многих таких случаях после разладки приближается момент выхода из строя или смерти (и, таким образом, меняется скорость старения организмов), но увеличивается вероятность выполнения основных функций в текущий момент. Возможность этого увеличения вероятности и трактуется здесь как исходная предпосылка формулировки задачи оптимального управления параметрами разладки (моментом перехода в форсированный режим и его интенсивностью).
ЗАДАЧА ОПТИМАЛЬНОГО УПРАВЛЕНИЯ ПАРАМЕТРАМИ РАЗЛАДКИ КАК МОДЕЛЬ СТАРЕНИЯ ОРГАНИЗМОВ
В настоящей работе предлагается следующая постановка задачи: управление моментом разладки с целью оптимизации целевой функции; при этом целевая функция, зависящая от показателей смертности, определяет структуру формируемой популяции. Задачи в такой по-
становке восходят к анализу управляемых моментов остановки (см. работы [1—9]). Основное отличие заключается в том, что мы рассматриваем не только управление моментами остановки, но и управление поведением случайных процессов, характерным для систем с разладками.
В биологии часто рассматриваются физиологические показатели, которые до момента нарушения нормального состояния (момента разладки) находятся около своего среднего значения, а затем начинают расти до пересечения критической границы, после чего и наступает смерть организма (либо в иных приложениях — разрушение системы). В популяционной биологии естественно возникает задача максимизации средней энергопродуктивности в течение всей жизни организмов. Теоретические результаты в области оптимизации квадратичных стохастических целевых функций были получены в работе [10].
Анализ задачи максимизации энергопродуктивности показал наличие при некоторый параметрах двух локальных максимумов построенной целевой функции, что объясняет наблюдаемую природную неоднородность (гетерогенность) рассматриваемой популяции. Из этого следует, что она делится, по крайней мере, на две группы (соответствующие этим экстремумам): особи, у которых аллостатическая болезнь развивается с большой скоростью (но момент заболевания наступает в старших возрастах), и особи с рано возникающими (но медленно текущими) хроническими заболеваниями. У первой группы момент разладки наступает позже, чем у второй, но скорость развития заболевания выше после разладки, чем у хронически больных. У хронических — скорость меньше, но момент разладки наступает в начале жизни. Данное утверждение может быть биологически обосновано для болезней адаптации. В качестве примера гетерогенности популяции можно рассмотреть деление митохондрий на две группы, которые формируются по
541
сотої КСІЕИСЕК ™ 4 • 2004
стратегиям выработки энергии в организме (см., например, статью [11]).
В случае гибели организмов в момент пересечения некоторой границы случайным процессом с разладкой возникает ряд задач, связанных с выбором такого момента, целевыми функциями, определяемыми такими процессами, эволюционным отбором по стратегиям разладок и др.
Пусть процесс с разладкой X = (Х)( О 0 записывается в классическом виде (см., например, работу [3]):
ЛХ( = а1(? > 9)Л? + , (1)
где 9 — детерминированный момент разладки, а — скорость нарастания энергопродуктивности, I — индикаторная функция, принимающая значения 0 или 1, : — стандартный винеровский процесс. Пусть момент смерти (выгхода из строя) т наступает при выполнении условия
т = : I О 0, X? = 1}. (2)
Возникает задача нахождения максимума целевой функции:
т
М = Е Г ХЛ + рЕт о тах, (3)
! 1 а, 9
0
где р — неотрицательный коэффициент.
Таким образом, функция /(?) = Х( + р представляет собой вырабатываемую мощность в момент ?, а ее инте-
т
грал м = Г /(V) Ля — совокупную выработанную энергию
0
за все время жизни. Заметим, что целевая функция м является компромиссной в энергопродуктивности и продолжительности жизни. Ее оптимизация осуществляется на основе решения задачи управления моментом разладки 9 и скоростью а роста энергопродуктивности.
Эта задача соответствует эволюционно обусловленному режиму максимальной совокупной (за все время жизни индивидуума) энергопродуктивности. Такая постановка задачи также находит экспериментальное подтверждение при изучении уровней плодовитости и продолжительности жизни насекомых [12]. В приведенных обозначениях справедлива следующая
Теорема. Для целевой функции м существует область значений параметра р е (С; 0,5], С < 0,5, в которой существуют два локальных максимума м при 9 е [0; +да). Доказательство теоремы см. в Приложении. Настоящая теорема может служить основанием и для решения обратной задачи — идентификации целевой функции “по итогам” формирования неоднородный популяций. При этом допускается следующая гипотеза. Исходя из экспериментально установленных параметров 9, а и линейно го приближения целевой функции (3), определяются ее максимумы. Положения полученных максимумов целевой функции соответствуют положениям максимумов функции распределения индивидуумов в популяции. В результате эволюционного отбора в популяции будет больше всего индивидуумов, характеристики которых соответствуют этим максимумам; таким образом, определяется структура популяции.
Главный результат теоремы состоит в том, что полученная гетерогенность была выявлена при абстрактном
рассмотрении популяции (не бышо привязки к экспериментальным данным). Кажущаяся простота и линейность (по параметрам и процессам) в постановке задачи (3) обманчива — решение существенно нелинейно и вид целевой функции подтверждает это. Таким образом, этот подход можно применить и при решении других задач, в которых присутствуют процессы с разладкой, и можно предположить, что рассматриваемая система распадается на несколько подсистем. Например, при анализе данных по экспрессии генов: до моментов смены онтогенетических фаз в организме (моментов разладки) определяются группы генов, вместе экспрессирующиеся или супрессирующиеся, после моментов разладки — гены могут переходить в другие группы или образовывать новые. При этом необратимые нарушения (выбывание объекта) в геноме происходят при пересечении процессом экспрессии некоторой критической нижней или верхней границы. Если гены распределяются в соответствии со значениями целевой функции, то состав группы может быть определен. Возникновению подгрупп (т. е. структуры) соответствует наличие нескольких локальных максимумов целевой функции.
ЗАКЛЮЧЕНИЕ
Главный резулытат настоящей работы заключается в выводе (в форме теоремы) о существовании (при определенный ограничениях) двух локалыных максимумов целевой функции — кумулятивной энергопродуктивности. При этом текущая мощносты предполагается классическим процессом с разладкой.
Из теоремы вытекает следствие, состоящее в том, что по значению параметра р можно определиты значения параметров целевой функции 0 и а. Это позволяет осу-ществиты идентификацию целевой функции (решение обратной задачи). В случае, когда эволюционное развитие завершено и известно распределение индивидуумов в популяции, можно сделаты предположение о соответствии максимумов функции распределения и целевой функции. В этом случае, учитывая линейное приближение целевой функции (3), можно установиты ее параметры.
ПРИЛОЖЕНИЕ
Доказатель ство теоремы. Исследуем с помощью семимартингальных методов распределение т — момента пересечения границы процессом с разладкой. Найдем:
Т /ТА0 Т \
Е|Х^ = ЕI Г Х(Л + Г Х^1 . (4)
0 ^ 0 т а 9 '
Учитывая выражения (1) и (4), получаем
Т I Т а9 Л
ЕГХ^ = ЕI Хт А 9(т а 9) - Г sdWs I +
0 ^ 0 '
+ Е|ХТТ - X А 9(т А 9) - Г яЛХ5Л.
т а9
В силу того, что для мартингала : математическое
т а9
ожидание Е | = 0, а значение процесса Х( = 1 при
0
ПРОБЛЕМЫ УПРАВЛЕНИЯ № 4 • 2004
155
а О 0 (так как после пересечения границы процесс X равен этой границе), запишем (т а 9 означает тш{т, 9})
т
Е Г = Е (Хт А 9(т а 9)) + Е (т - Хт А 9(т а 9)) -
- Е
І t(aI(t O е) dt + dWt
т2 е2)) = |т — а Е(т2 _ е2)+
= Ет - Е [1(т>9)а[2 _ 52^ = Ет - а ^ 1 2 ц ; . (5)
2
Заметим, что ЕХт = ЕХ( = 1, так как Х{ = 1. В свою
очередь, ЕХт2 записывается в виде: ЕХт2 = Е(а(т - 9)+ +
+ :т)2 = Е(а2((т - 9)+)2 + 2а(т - 9)+ • : + Жт2.
Подставим в выражение (1) ? = т и получим, что : = 1 - а(т - 9)+. Возьмем математическое ожидание : и получим, что 1 = аЕ (т - 9)+ (Е: = 0, поскольку Ет < да). Учитывая эти преобразования, получаем
ЕХт2 = Е (а2((т - 9)+)2 + 2а(1 - а(т - 9)+)(т - 9)+ +
+ Wj = ЕI 2а(т - е)+ - а2((т - е)+)2 + І2 WsdWs + т
= 2 - а2Е ((т - е)+)2 + Ет = 2 - а2Е ((т - 0)+((т + е) -- 2е)) + Ет = 2 - а2Е((т2 - е2)+ - 20(т - е)+) + Ет = = 2 — а2Е(т2 — е2)+ + 2ае + Ет.
Следовательно,
Е(т2 _ е2)+ = 1 ^ е ^ Ет
а——г—— = — + е + — .
2 2а 2а
(б)
Из выражений (5) и (б) получаем
Е І = Ет - 2і — е — е- =
О
= Ет (1 _ 2- — 2а — 0 (7)
Найдем величину Е . Представим в виде
т = ((т - е)+ + 0)I(т > е) + т I(т P е) =
= (т - е)+ + OI(т > е) + т I(т P е).
Тогда
1 е
Ет = 1 + 0(1 - F(T)) + І xdF(x), (8)
О
где F(x) — функция распределения первого момента пересечения границы винеровским процессом F(x) =
x l _2L
= P( sup W O 1) = І ^ е Ldv. Исходя из того, что
О dLdx oT2S7
І xdF(x) = 0F(0) — І F(x)dx, запишем выражение (8) в виде
Ет = - + 0 —
0 - 0F(0) + 0F(0) - І F(x)dx =
О
1 + f (1 - F(x))dx = 1 + І G (x)dx, (9)
аа
где G (x) = 1 — F(x). Таким образом, из выражений (7) и (9) получаем
е і X,dt = і - +
О 1 О
l
І G(x)dxY 1 _ 2-
l
| ^ 2a1 2a
и целевая функция принимает вид
- 0,
м = If xtdt + pЕт = I 1 + І G(x)dx\ і 1 _ 2-
2а
1 — 0 + p [ a + f G (x)dx | =
Обозначим V = 1/а, тогда полученная целевая функция записывается как
м = Iv + f G(x)dx| і 1 + p _
Приравняем нулю частные производные целевой функции м по 9 и V для последующего нахождения ее экстремумов:
|о = G(о) (1 + p _ v) - 1 = 0
(10)
I = (1 + p _ 2\ - 1 I v+І G(x)dx^ - 1 = 0. (ll)
О
Выразим v из уравнения (11): v = 2 + p — 1 f G(x)dx;
подставим в уравнение (10):
G(0*) = 2
l е* -
+ p + — f G(x)dx
(12)
В соответствии с функцией распределения первого момента пересечения границы винеровским процессом функция С ([) принимает вид (по определению (2) граница для процесса Х = (Х)( О 0 равна 1):
о 1 _-
G(0) = 1 - F(0) = І - f —1— е 2tdt.
0 л/2яТЗ
Выразим p из формулы (l2):
p = 2
З 1
G(0*) 2 2
2 І G(x)dx.
(1З)
(14)
Подставим формулу (1З) в выражение (14): „ _ 1 -,_! p = 2 1
/ 9* _1 9* _1 Л
- I [о* - 9* ( —е 2‘Л< +Г —е 21Л1\. (15) 21 ^ 0 ^ >
Подсчет интегралов в формуле (15) производился численным методом. Рассматривая поведение целевой
56
CONTROL SCIENCES № а • 2004
функции м(9, V) при различных значениях параметра р, приходим к выводу, что при р е (С; 0,5] и ограничении 9 О 0 целевая функция м имеет три точки, подозрительные на экстремум. Выполнив численный анализ их окрестностей, получим, что две из них являются локальными максимумами, а третья — седловая точка.
Таким образом, численно установлено, что целевая функция имеет два локальный максимума при Ь е (С; 0,5] и значение константы С = 0,445 ± 0,0001. При значениях р Р С единственный локальный максимум целевой функции находится при 9 = 0. При р > 0,5 целевая функция имеет один локальный максимум при 9 О 0. Теорема доказана.
ЛИТЕРАТУРА
1. Ширяев А. Н. Некоторые точные формулы в задаче о разладке // Теория вероятностей и ее применение. — 1965. — Т. 10, вып. 2. — С. 380—385.
2. Ширяев А. Н. Об оптимальных методах в задачах скорейшего обнаружения // Теория вероятностей и ее применение. — 1963. — Т. 8, вып. 1. — С. 26—51.
3. Ширяев А. Н. Статистический последовательный анализ. — М.: Наука, 1976.
4. Пресман Э. Л., Сонин И. М. Последовательное управление по неполным данным. — М.: Наука, 1982.
5. Яшин А. И. Теоретические и прикладные задачи оценивания скачкообразных процессов. Препринт. — М.: Институт проблем управления, 1978.
6. Гихман И. И., Скороход А. В. Управляемые случайные процессы. — Киев: Наукова думка, 1977.
7. Дынкин Е. Б., Юшкевич А. А. Управляемые марковские процессы и их приложения. — М.: Наука, 1975.
8. Севастьянов Б. А. Ветвящиеся процессы. — М.: Наука, 1971.
9. Крылов Н. В. Управляемые процессы диффузионного типа. — М.: Наука, 1977.
10. Butov A. A., Kuznetsov N.A., Liptser R.Sh., et al. Generalized observations control in problems of stochastical optimization // IFAC Control Science and Technology (8th Triennial World Congress). Kyoto, Japan, 1981. — P. 851—856.
11. Скулачев В. П. Эволюция, митохондрии и кислород // Со-ровский образовательный журнал. — 1999. — № 9. — C. 4—10.
12. Carey J. R., Liedo P., Muller H. G., et. al. Dual modes of aging in Mediterranean fruit fly females // Science. — 1998. — № 281 (5379). — P. 996—998.
в (8422) 63-66-78
E-mail: [email protected] □
УДК 577.71:519.95
НОРМАЛЬНОЕ СТАРЕНИЕ КАК СЛЕДСТВИЕ РЕАКЦИИ УПРАВЛЯЮЩИХ СИСТЕМ ОРГАНИЗМА НА ВНЕШНИЕ СИГНАЛЫ, НЕ СПОСОБСТВУЮЩИЕ ЕГО ПОЛНОМУ САМОПОДДЕРЖАНИЮ I. Биологические предоосылки
А. В. Халявкин1, А. И. Яшин2 1Институт биохимической физики, Москва Университет Дьюка, г. Дюрам, США
Дан обзор результатов новейших исследований, подтвердивших способность клеток и других компонентов сложных организмов противостоять их старению. Поставлена задача поиска подходов к пониманию первопричины старения особей, состоящих из потенциально нестареющих клеток. Предположено, что старение организма скорее результат определенных сдвигов параметров его управляющих систем, чем фатальный изменений составляющих его клеток. Показано, что это может быть связано с тем, что способность организма к самоподдержанию зависит не только от его структурно-функциональныгх особенностей, но и от внешних условий, индуцирующих различные режимы жизнедеятельности. Приведены факты, совместимые с предложенным подходом.
ВВЕДЕНИЕ
Известно, что показатель ожидаемой продолжительности жизни людей, построенный по странам — текущим рекордсменам по этому параметру — растет линейно уже более 160-ти лет (каждые 10 лет на 2,5 года у
женщин и несколько меньше у мужчин) [1]. С успехами в целенаправленном контроле и регулировании процесса старения это не связано, поскольку до сих пор не поняты причины, по которым регуляция и координация жизненных процессов в организме становятся с возрастом все менее эффективными, а сам стареющий организм все более уязвимым к факторам окружающей сре-
ПРОБЛЕМЫ УПРАОЛЕНИЯ № а • 2004
57