УДК 519.216.3
УСЕЧЕННОЕ ОЦЕНИВАНИЕ ПАРАМЕТРОВ НЕПРЕРЫВНОЙ АВТОРЕГРЕССИИ
© Т. В. Емельянова, Ю. В. Иванюк*
Национальный исследовательский Томский государственный университет Россия, 634050 г. Томск, пр. Ленина, 36.
Тел.: +7 (923) 422 88 09.
*Етай: уиНуа. ¡уапуик. 90@тай. ги
Предлагается усеченная последовательная процедура для оценивания неизвестных параметров устойчивого процесса авторегрессии с непрерывным временем, обеспечивающая контроль за среднеквадратической точностью оценок. Получены формулы для асимптотической длительности оценок, проведено численное моделирование по методу Монте-Карло. Результаты могут найти применение в задачах идентификации динамических систем, подверженных действию шумов, адаптивного прогнозирования, а также для оценивания параметров спектров гауссовских процессов с непрерывным временем.
Ключевые слова: гарантированная среднеквадратическая точность, авторегрессионный процесс, последовательное оценивание, момент остановки, гауссовский процесс с рациональной плотностью.
Введение
Модели с непрерывным временем, описываемые стохастическими дифференциальными уравнениями, широко используются в задачах обработки временных рядов, идентификации, прогнозировании и управлении в динамических системах. Первоначальной задачей является задача идентификации, заключающаяся в оценке неизвестных параметров модели. Для решения этой задачи разработаны различные эффективные методы: наименьших квадратов, максимального правдоподобия, стохастической аппроксимации и т.д. (см. [1-7]). В теории идентификации наиболее полно изучены асимптотические свойства оценок, полученных в предположении, что процесс наблюдений динамической системы может продолжаться достаточно долго. При практическом использовании оценок обычно исходят из того, что даже для малых и умеренных объемов данных свойства оценок несущественно отличаются от асимптотических. Однако это не всегда имеет место и его использование может приводить к ошибочным выводам. Поэтому представляет интерес задача неасимптотического анализа свойств оценок[8-11]. В [12] рассматривается один из подходов к решению задач идентификации динамических систем в неасимптотической постановке, связанный с использованием последовательного анализа, характеризующегося тем, что длительность наблюдений не фиксируется заранее, а определяется специальными правилами накопления данных. Ноэто правило может привести к затягиванию процедуры оценивания и необходимости использования реализации большой длительности, которой в прикладных задачах может и не быть. Уменьшить число наблюдений, требуемых для получения оценок с нужными свойствами, позволяет подход, связанный с усеченным последовательным анализом.
Постановка и краткий обзор некоторых методов оценивания параметров
Пусть наблюдаемый р-мерный процесс
описывается системой линейных дифференциальных уравнений
с начальным условием Х0 = (X ! ( 0 ).....Хр ( 0 ) ) . (1)
Здесь А и В -квадратные матрицы постоянных коэффициентов размера р х р, при этом все характеристические числа матрицы А имеют отрицательные вещественные части, - стандартный р-мерный процесс броуновского движения.
Задача состоит в том, чтобы оценить неизвестные коэффициенты матрицы по наблюдениям процесса . К этой задаче сводится задача оценивания параметров стационарного гауссовского процесса авторегрессии р-го порядка (АР(р))
с1хР~ 1 = ( 01 хР " 1 + ... + 0р х4) сИ + стсЩ. (2) с рациональной спектральной плотностью, имеющей вид
т = - "
I ода I 2' (3)
Известно, что таким процессом можно аппроксимировать любой стационарный гауссовский процесс [13].
Предполагается, что неизвестные параметры , таковы, что все корни характеристического полинома имеют отрицательные вещественные части. Процесс (2) можно представить в виде (1), если положить
х4 =
Л \
УхГ/
о
А =
Vе
р 0р-1
О
01/
/О ... 04 В = ( 0 ... О ) . (4)
\0 ... ст/
Одним из основных методов оценивания вектора неизвестных параметров
0 = ( 81( Э2 ,..., 0р) является метод наименьших квадратов (МНК), согласно которому оценка имеет вид
0Т = Му 1;0ТХяс1<Х1> р, (5)
где < а> ; обозначает ¡-ю координату вектора столбца а = (а 1,а 2,...,ар) ';
Мт = /0ТХ5Х5' ds - выборочная информационная матрица Фишера, М у -1- обратная к ней, если она не вырождена, и М у 1 = 0 - в противном случае. Асимптотические свойства вектора оценок по методам максимального правдоподобия и наименьших квадратов изучались в ряде работ [1, 7, 8, 14 и др.]; показано, что они являются сильно состоятельными и асимптотически нормальными. В прикладных задачах использование асимптотических свойств оценок обычно основывается на предположении, что эти свойства сохраняются для малых и умеренных объемов данных.Однако, как отмечено выше, поведение оценок при малых и умеренных длительностях наблюдений может привести к неточным выводам при принятии решений. Поэтому представляется важным изучение свойств оценок в неасимптотической постановке. Изучение задач оценивания параметров диффузионных процессов в неасимптотической подстановке восходит к работам Новикова, Липцера и Ширяева [3, 17, 18], которые предложили последовательный план для оценивания неизвестного параметра диффузионного процесса
сСх4 = 0Х(- ск + стсСШь а также двумерного процесса специального вида с двумя неизвестными параметрами. В этих работах было доказано, что последовательная оценка имеет преимущества перед классической оценкой МНК: она является несмещенной и гауссовской [подробнее см., например, 17-19]. Но этот метод не работает в ситуации, когда число неизвестных параметров превышает размерность наблюдаемого процесса. В [20] была предложена последовательная процедура, позволяющая получать гарантированные оценки с любой заданной среднеквадратической точностью для авторегрессии с непрерывным временем любого порядка по конечной реализации процесса. Эта процедура может оказаться, однако, достаточно сложной для практической реализации в случае многих неизвестных параметров, поскольку она включает два этапа и требует построения целой системы оценок МНК, вычисляемых в специальные моменты времени. На первом этапе строится последовательность модифицированных оценок МНК, каждая со своим правилом прекращения наблюдений, на втором этапе проводится процеду-
ра сглаживания оценок, полученных на первом этапе, причем при сглаживании используется случайное число оценок, зависящее от требуемой точности оценивания неизвестных параметров. В [23] предлагается одноэтапная процедура оценивания параметров модели (1) с заданной среднеквадрати-ческой точностью. При решении практических задач имеющихся данных может быть недостаточно для применения вышеупомянутых процедур.
В настоящей работе предложена одноэтапная процедура оценивания, использующая специальное усеченное правило остановки наблюдений и позволяющая контролировать среднеквадратическую точность оценок.
Эта процедура, как и предложенная в [20, 23], является последовательной модификацией оценок МНК и может использоваться при наличии некоторой априорной информации о параметрах.
Построение усеченной последовательной процедуры
При построении последовательного плана будет использоваться следующаялемма, доказанная в [12], дающая оценку нормы уклонения оценки (4) от ее истинного значения.
Лемма 1. [12]. Пусть матрица Мгв (5) невырождена. Тогда квадрат нормы уклонения оценки (4) удовлетворяет неравенству
| | бг-б | | 2<| | Mf 2 | |-| | шг | | 2, (6)
где
mr = /orXsd Ws. (7)
Как было показано в [12] (см. лемму 3), с вероятностью 1 существует предел
lim ^ = F, (8)
Г->оэ Т
где матрица F положительно определена. Отсюда следует, что множитель | | Mf 2 | | в правой части (6) монотонно убывает с ростом , причем l im || Mf 2 | | = 0.
7"->оэ
Это позволило использовать в работе [12] следующий план оценивания.
Пусть . Определим длительность на-
блюдений процесса и оценку неизвестных параметров по формулам
Т = т(Я) = inf{t > 0: ||Mf2||1/2 < i},
t e [ 0 , Г] (9)
б* (Я) = MT-(^ • /; (Ю Xsd <Xt> p. (10)
Момент остановки наблюдений в последовательном плане (9), (10) является случайной величиной, зависящей от выбора порога , которая может принимать достаточно большие значения. В прикладных задачах длительность реализации процесса, используемая для идентификации неизвестных параметров, часто ограничена некоторой величиной . В этом случае вместо последовательной оценки (9), (10) будем использовать усеченный последовательный план, определенный следующими формулами:
N(H) = тт(т(Я), T)
(11)
б* (Я) = М"1
X <xt> (w (г) sr)> (12)
J0
где определен в (9).
Используя этот план, получим верхнюю границу для среднеквадратической точности оценок.
Лемма 2. Пусть матрица (5) удовлетворяет условию (8). Тогда для любого Н > 0 оценка б* (Н) , определенная в (11) и (12), удовлетворяет неравенству
Ев\\в*{Н)-в\\2 <
EgtrMN(H)
(13)
Доказательство. Заменяя в лемме 1 Г на N (Я) , получим
и.Нг^^ж I I 2.
W{H)-er<
Учитывая (6),
\\1V1N(H) И || J0
имеем
<
»(И)
— £е | | J0 Ж; | | . Переходя к усеченным мо-
ментам и используя свойства стохастического интеграла (см., например, [3]), получаем
Отсюда и из (14) следует утверждение леммы. Лемма 2 доказана.
Свойства выборочной информационной матрицы Фишера
В этом разделе будут установлены некоторые свойства выборочной информационной матрицы Фишера.
Предположим, что значения параметров процесса (2) таковы, что все корни характеристического полинома имеют отрицательные вещественные части, причем
m axReA г(Л (б ) ) < — у < 0 где у - некоторая поло-
1 <i<p
жительная постоянная.
Введем параметрическое множество
Яу = |0 6 RrmaxReXi(Л(0) ) < —у|. (14)
Далее потребуются следующие свойства из работы [12].
Лемма 3. Пусть в уравнении (1) Е | | | | 4 < +оо. Тогда матрица (5) удовлетворяет предельному
М т
соотношению Pg — Ii m — = F, где F - положи-
t-> oo Г
тельно определенная матрица, являющаяся единственным решением уравнения
F4 ' + 4F' + BB ' = 0 , (15)
где .
■'O
Лемма 4. Пусть начальное условие в уравнении (1) таково, что , где множе-
06 Ау
ство Лу определено в (14). Тогда для любого компакта справедлива оценка
Г IIМТ Е-П4 - L s up Ее I I — F I I <-j,
бек- 11 ' 11 ' где - некоторая постоянная.
Лемма 5. Для всякого Я > 0 справедливо неравенство
EetrMN{H) < trF ■ EeN(H) +
(16)
Доказательство. Аналогично доказательству леммы из работы [12].
Асимптотическое поведение средней длительности процедуры дает следующая теорема.
Теорема 1. Пусть N (Н) определяется формулой (11) и выполнены условия леммы 4. Тогда для любого компакта
Ит5ирк^р-||Р-2Р| = 0
Н^содек I Н I
при неограниченной длине промежутка .
Доказательство. Сначала покажем, что 1 плб ир + с». Учитывая (9) и (11), имеем
Я->оодек Н
ЕвМ(Н) = /0°°Рв(Л(Я) > Т)йТ =/0°°Ре (\\Мг2Ф >
1нст.
Выбирая 8 > 0, такое, что
sup||F
|2 <■
25'
(17)
век
получаем оценку Нс1Т= Н<С Р0Т2 МТ— 212>1 СТ.
Для подынтегральной функции во втором интеграле имеем оценку
Рв (\\Т2М^ > ±) < Рв (||Р"2р > + +Ре(|||Г2М^||5-ЦР-2||5|
<
<РЙ
Mj*
т
| <i7,|||r2Mf2||i-||F-2||i| +
+Рв( I I ^ I j<i/),0 6/f. (18)
Поскольку lim — = F п.н. и функция | | F 2 | | 2
Г-> oo 71
равномерно непрерывна по на компакте , то для
1
4 < — найдутся такие 70 > 0 и 77 > 0 , что при
Т > Тп
,„, если | | ^ —Р | |<7, то || | Т2М^ | |2—
Р— 212<Поэтому первое слагаемое в правой части (18) равно нулю и неравенство (18) примет вид
(lir2Mf2||bi)<pe(||^.
■Р < 77) <
- п* У II Т
| . (19)
Используя лемму 4, получаем требуемую асимптотическую равномерную ограниченность
с
величины Я«-.
" н
Покажем, что для любого 77 > 0
II I I»')^- (20)
Имеем
Ml\^-F\\^v)<Pe(N(H)<m) +
+ £ "= sup I I ^-P I I >7). (21)
\k<T<k +1 " ' 11 /
Оценка ряда в правой части (21) целиком повторяет оценку аналогичного ряда в теореме 1 работы [12] и имеет вид
2j=mPe( sup II^-fII >л)<
\k<T<k +1 11 ' 11 /
< 1 у°° _
— L ¿-ik=m ¡¿2 '
(22)
Первое слагаемое в (21) допускает оценку
Рв(т(Н)<т) =
( 1 11 = Рп -
V4i(Mm)
+ ••• +
<
<
< Рд(А1(Мт) > Я) < Рд (trMm > Я) =
im \ / т
J tr(XsXs') ds > HJ = Рв I J ||Xs||2ds > Я I <
<
Подставляя эту оценку и оценку (27) в (21), получаем
sup Рд (
век \
М,
N{H)
N(H)
-F
4 ifr(m+jp(e-2ym-i
+
X k2'
к=т
Переходя к пределу сначала при , затем
при т — с», приходим к (20). Учитывая, лемму (1.1.1) из [21], получим
Ре(т(Я) < ш) < ^(^{т + ~ 1)^
-> 0.
Остается убедиться в том, что для любого г] > 0
lim sup Eg
н->00век
Рассмотрим
М,
N(H)
N(H)
-F
= Е(
+Eg
Л/(Я) /
Ев я Ч
N(H) AW)
Я А 1
N(H) Г
Я А 1
M;
N(H) - F
■-F
>v) =
> rj^jx(N(H) < m) 4 >rj^)x(N(H)>m) <
<
m (
я 4
M,
N(H)
N(H)
>v)+E(
N(H) H
X(N(H) > m).
Выбирая т из условия т > — с 5, удовлетворяющим (17), имеем
£Рд (М(Ю > Т)йТ = £Рд (||Г2Мг-2||^ > 3 йТ; отсюда и из (19) получаем требуемое. Теорема 1 доказана.
Найдем верхнюю границу для среднеквадра-тической точности оценки вектора неизвестных параметров в уравнении (2) с
помощью последовательного плана (11), (12).
Теорема 2. В условиях теоремы 1 для любого компактного множества
5ирЯе( | | в* (Я) - в| | 2 ) < ^(1 + о (1) ), (23) век н
" 2"i где о(1) ^ 0
где
век при .
Доказательство. Поскольку ^ | | в* - в| | 2 =
, то
используя оценки (13) и (16) из лемм 2 и 5, приходим к неравенству Ед{\\в*{Н) - в\\2)
<—( trF ■ EgN (Я)
ии
+ I tr(eAsEg(X0X0')eA's)
ds .
В силу теоремы 1 отсюда следует неравенство (23). Теорема 2 доказана.
Результаты численного моделирования
В этом разделе представлены результаты численного моделирования предлагаемой последовательной процедуры (11), (12) оценивания параметров регрессии с непрерывным временем на примере процесса
. (24)
В матричной форме процесс имеет вид = ЛХ, + В И/,,
где ,, = (^ = (2, в,)=В = (0 =
- стандартный двумерный винеровский процесс, причем .
Множество устойчивости процесса (24) задается равенством
Л,
= {(б1,б2):б2 <г-в1+г2,в1 < 0},к> 0.
Разрешая уравнение (15) относительно F, получаем
F = diag (—,—), \\F
а Чге^г -29J 11
1 216»!! Ji+ej
2 = -
Поэтому при больших средняя длительность процедуры оценивания удовлетворяет соотношению
2\81\4[1+в% ЕдТ(Н)~Н-±-
для всех , где - компакт в пара-
метрической области Лу, у > 0. При этом средне-квадратическая точность оценивания равномерно по компакту определяется неравенством (28), причем
ф(б) = trF\\F~
(i-e2)Ji+e. ¡eü
Априорную область для параметров модели б х и б 2 зададим следующим компактом К{ (бх , б2 ): - 0 . 6 < бх < - 0 . 2 ; - 0 . 6 < б2 < - 0 . 2 }.
Максимизация функции ф (б ) по этой области дает следующую постоянную
в Е.К
6. 002 399, используемую в теореме 2.
На рис. 1 приводятся графики спектральной плотности процесса (24) с б х = — 0 . 3 и б 2 = — 0 . 2 (сплош-
ная линия) и ее оценки при полученных значениях оценок параметров б 1 и б 2 (пунктирная линия) с помощью последовательного плана (10), (11).
Рис. 1. График спектральной плотности.
Для проверки согласия выборочных свойств оценок (11), (12) с теоретическими результатами теорем 1, 2 проводилось моделирование по методу Монте-Карло, включавшее 50 повторений процедуры при различных значениях порога , определяющего момент остановки .
В табл. 1 приводятся значения оцениваемых параметров и , величина порога , выборочная средняя длительность процедуры N (Н) ,
удельная средняя длительность и ее
' 1 асимптотическое теоретическое значение | | Р "2 | | 2.
При сравнении последних двух строк табл. 1 видно, что с увеличением величины порога выборочная характеристика стремится к теоретическому значению, что свидетельствует о согласии результатов моделирования с утвержде-
нием теоремы 1.
Выборочные характеристики, касающиеся точности последовательных оценок, полученных по 50 реализациям процедуры с порогом Н = 3 00, представлены в табл. 2.
Здесь наряду со значениями параметров модели б 1 и б 2 , в следующих за ними строках, приводятся среднеквадратические точности полученных последовательных оценок. В строках и
даются среднеквадратические уклонения обычных оценок МНК (5), вычисленных по реализации длины . При этом значение находилось из условия Т = N(5 0)=^£^ ( 5 0) , где N (5 0 ) определяет длительность последовательной процедуры в -м эксперименте, - верхняя граница доверительной области для среднеквадратиче-ской точности последовательной оценки. Результаты численного моделирования показывают хорошую согласованность с теоретическими результатами. Сравнение последовательных и обычных оценок МП показывает, что они близки по точности. При этом, однако, следует учитывать, что последовательные оценки позволяют контролировать среднеквадратическую точность путем выбора порога .
Заметим, что при моделировании оценок МНК с фиксированной длительностью наблюдений , эта длительность выбиралась с помощью последовательной процедуры.
ЛИТЕРАТУРА
1. Арато М. Линейные стохастические системы с постоянными коэффициентами. Статистический подход. М.: Наука, 1989.
2. Ибрагимов И. А., Хасьминский Р. З. Асимптотическая теория оценивания. М.: Наука, 1979. 528 с.
3. Липцер Р. Ш., Ширяев А. Н. Статистика случайных процессов. М.: Наука, 1974.
4. Яглом А. М. Введение в теорию стационарных случайных функций // УМН. 1955. Т.7. Вып.5. С. 3-168.
Таблица 1
Результаты моделирования, показывающие согласованность с теоремой 1_
1 0! 1 -0.3 | -0.3 1 -0.3 1 -0.3 1 -0.3 | -0.4 1 -04 | -0.5 1 -05 |
02 Я ЛР(Я) ЛР(Я) я ||р~2||1/2 -0.2 50 100.1 2.002 -0.2 100 131.2 1.312 -0.2 300 232 0.7733 -0.2 500 315.6 0.6312 -0.2 1000 605.6 0.6056 -0.2 50 100.7 2.014 -0.2 300 232.1 0.7737 -0.2 50 100.4 2.008 -0.2 300 245.8 0.8193
0.6002 0.6002 0.6002 0.6002 0.6002 0.8003 0.8003 1.0004 1.0004
Таблица 2
Результаты моделирования, показывающие согласованность с теоремой 2._
1 вл | -0.3 | -0.4 | -0.5 1 -0.2 1 -0.2 1 -0.2 1 -09 |
02 -0.2 -0.2 -0.2 -0.3 -0.4 -0.5 -0.5
(в;) 0.00100 0.004502 0.000033 0.000098 0.004646 0.000161 0.000719
5£> (02*) 0.00002 0.000767 0.000007 0.000048 0.001121 0.000052 0.000467
5£>(ег) 0.00062 0.000101 0.006962 0.000904 0.001988 0.004831 0.000016
5£>(02") 0.00098 0.000445 0.000021 0.003240 0.000322 0.001887 0.005249
Ф(0)/я 0.02001 0.020008 0.020008 0.020008 0.020008 0.020008 0.020008
5. Андерсон Т. Статистический анализ временных рядов. М.: 15. Мир, 1976. 756 с.
6. Brockwell P. J. Introduction to time series and forecasting / P. J. Brockwell, R. A. Davis. Second Edition. Springer, 2002. 449 p.
7. Вазан М. Стохастическая аппроксимация. М.: Мир, 1972. 296 с. 16.
8. Конев В. В. Последовательные оценки параметров стохастических динамических систем / В. В. Конев, Ф. П. Тарасенко. Томск: Издательство Томского университета, 1985. 267 с.
9. Galtchouk L. On sequential estimation of parameters in con- 17. tinuous time stochastic regression / L. Galtchouk, V. V. Konev //Statistics and Control of Stochastic Processes. 1997. P. 123— 138. 18.
10. GaltchoukL. On sequential estimation of parameters in semimartingale regression models with continuous time parameter / L. Galtchouk, V. Konev //Annals of statistics. 2001. 19. V. 29. No. 5. P. 1508-1536.
11. Конев В. В. О гарантированном оценивании параметров линейной регрессии при зависимых помехах / В. В. Конев, 20. С. М. Пергаменщиков // Автоматика и телемеханика. 1997.
№2. С. 75-87.
12. Емельянова Т. В., Конев В. В. О последовательном оценивании параметров непрерывной авторегрессии // Вестник 21. Томского государственного университета. 2013. .№5(25), с
12-25.
13. Brillinger D. R. Asymptotic properties of spectral estimates of
second order // Selected Works of David Brillinger / Guttorp 22.
P., Brillinger D. (Eds.) Springer New York, 2012. P. 179-194. 23.
14. Розанов Ю. А. Стационарные случайные процессы. М.: Физматгиз, 1963.
Тараскин А. Ф. Об асимптотической нормальности стохастических интегралов в оценках коэффициента переноса диффузионного процесса //Мат. физика. Киев: Наукова думка, 1970. Вып. 8. с. 149-163.
Тараскин А. Ф. Об асимптотической нормальности некоторых стохастических интегралов и оценках параметров переноса многомерного диффузионного процесса // Теор. вероятн. и мат. статистика. Киев: Наукова думка, 1970. Вып. 2. с. 205-220.
Новиков А. А. Последовательное оценивание параметров диффузионных процессов // Теор. вероятн. и ее примен. 1971. Т.16. Вып.2. с. 394-396.
Новиков А. А. Последовательное оценивание параметров процессов диффузионного типа // Мат. заметки. 1972. Т.12. Вып. 5. с. 627-638.
Арато М., Колмогоров А. Н., Синай Я. Г. Об оценках параметров комплексного стационарного гауссовскогомарков-ского процесса //ДАН СССР. 1962. Т. 156. №4. с. 747-750. Konev V. V. and Pergamenshchikov S. M. Sequential Estimation of the Parameters in a Trigonometric Regression Model with the Gaussian Coloured Noise // Statistical Inference for Stochastic Processes 6: 215-235, 2003. Конев В. В., Пергаменщиков С. М. Последовательное оценивание параметров линейных неустойчивых стохастических систем с гарантированной среднеквадратической точностью // Проблемы передачи информации. 1992. Т. 28. №4. Беллман Р. Ведение в теорию матриц. М.: Наука, 1969. Kabanov Yu. M. and Pergamenshchikov S. M. Two Scale Stochastic Systems: Asymptotic Analysis and Control // Springer, Berlin, New York, 2002.
Поступила в редакцию 11.01.2016 г. После доработки - 25.03.2016 г.
TRUNCATED ESTIMATION OF PARAMETERS IN A CONTINUOUS AUTOREGRESSION MODEL
© T. V. Emelyanova, J. V. Ivanyuk*
National Research Tomsk State University 36 Lenin Ave., 634050 Tomsk, Russia.
Phone: +7 (923) 422 88 09.
*Email: yuliya. ivanyuk. 90@mail. ru
There is a lot of literature devoted to the development of efficient methods for estimating parameters in a continuums time regression models. The most popular applied methods are the least squares method (LSM) and maximum likelihood method (MLM). It is difficult to estimate a number of properties due to their nonlinearity. One of the ways to overcome this difficulty is to apply the sequential analysis approach. Sequential estimation has advantages over the classical method of least squares estimation: it is unbiased and guarantees mean square accuracy. However, this method does not work in a situation where the number of unknown parameters exceeds the dimension of the observed process. This article considers the problem of parameters estimating in a stable autoregressive model. We propose truncated sequential sampling scheme with a special stopping time based on the observed Fisher information matrix. This scheme guarantees mean square accuracy of the estimator of unknown parameters. The results of Monte-Carlo simulation of the truncated procedure are in good accordance with the analytical solutions. The results can be applied to the problems of dynamic-system identification, adaptive forecasting, and parametric spectral estimation of Gaussian processes in a continuous time. In addition, as a result, the properties of truncated sequential procedures relating to its average duration and mean squared accuracy were studied in detail.
Keywords: guaranteed mean-square accuracy, sequential estimation, stopping time, Gaussian process with rational spectral density.
Published in Russian. Do not hesitate to contact us at [email protected] if you need translation of the article.
REFERENCES
1. Arato M. Lineinye stokhasticheskie sistemy s postoyannymi koeffitsientami. Statisticheskii podkhod [Linear stochastic systems with constant coefficients. Statistical approach]. Moscow: Nauka, 1989.
2. Ibragimov I. A., Khas'minskii R. Z. Asimptoticheskaya teoriya otsenivaniya [The asymptotic theory of estimation]. Moscow: Nauka, 1979.
3. Liptser R. Sh., Shiryaev A. N. Statistika sluchainykh protsessov [Statistics of stochastic processes]. Moscow: Nauka, 1974.
4. Yaglom A. M. UMN. 1955. Vol. 7. No. 5. Pp. 3-168.
5. Anderson T. Statisticheskii analiz vremennykh ryadov [Statistical analysis of time series]. Moscow: Mir, 1976.
6. Brockwell P. J. Introduction to time series and forecasting / P. J. Brockwell, R. A. Davis. Second Edition. Springer, 2002.
7. Vazan M. Stokhasticheskaya approksimatsiya [Stochastic approximation]. Moscow: Mir, 1972.
8. Konev V. V. Posledovatel'nye otsenki parametrov stokhasticheskikh dinamicheskikh system [Successive estimates of the parameters of stochastic dynamical systems] / V. V. Konev, F. P. Tarasenko. Tomsk: Izdatel'stvo Tomskogo universiteta, 1985.
9. Galtchouk L.Statistics and Control of Stochastic Processes. 1997. Pp. 123-138.
10. GaltchoukL.Annals of statistics. 2001. Vol. 29. No. 5. Pp. 1508-1536.
11. Konev V. V. Avtomatika i telemekhanika. 1997. No. 2. Pp. 75-87.
12. Emel'yanova T. V., Konev V. V. Vestnik Tomskogo gosudarstvennogo universiteta. 2013. No. 5(25), s 12-25.
13. Brillinger D. R. Selected Works of David Brillinger / Guttorp P., Brillinger D. (Eds.) Springer New York, 2012. Pp. 179-194.
14. Rozanov Yu. A. Statsionarnye sluchainye protsessy [Stationary stochastic processes]. Moscow: Fizmatgiz, 1963.
15. Taraskin A. F.Mat. fizika. Kiev: Naukova dumka, 1970. No. 8. s. 149-163.
16. Taraskin A. F. Teor. veroyatn. i mat. statistika. Kiev: Naukova dumka, 1970. No. 2. s. 205-220.
17. Novikov A. A. Teor. veroyatn. i ee primen. 1971. Vol. 16. No. 2. s. 394-396.
18. Novikov A. A. Mat. zametki. 1972. Vol. 12. No. 5. s. 627-638.
19. Arato M., Kolmogorov A. N., Sinai Ya. G.DAN SSSR. 1962. Vol. 156. No. 4. s. 747-750.
20. Konev V. V. Statistical Inference for Stochastic Processes 6: 215-235, 2003.
21. Konev V. V. Problemy peredachi informatsii. 1992. Vol. 28. No. 4.
22. Bellman R. Vedenie v teoriyu matrits [Introduction to the theory of matrices]. Moscow: Nauka, 1969.
23. Kabanov Yu. M. Springer, Berlin, New York, 2002.
Received 11.01.2016. Revised 25.03.2016.