CC BY
41
В.В. Лукашенко, В.А. Романчук
РАЗРАБОТКА МАТЕМАТИЧЕСКОЙ МОДЕЛИ РЕСТРУКТУРИЗУЕМОГО ПОД КЛАССЫ ЗАДАЧ, ВИРТУАЛИЗУЕМОГО КЛАСТЕРА ВЫЧИСЛИТЕЛЬНОЙ GRID-СИСТЕМЫ НА БАЗЕ НЕЙРОПРОЦЕССОРОВ
В статье предлагается математическая модель кластера, реструктуризуемого по заданным структурам под определенные классы задач, рабочие узлы (машины) которого работают на базе нейропроцессоров. Детально представлена модель диспетчера кластера и управляющего модуля планирования задач на машины кластера.
распределенные вычисления, неропроцессоры, кластеризация.
В настоящее время наибольшее распространение нейроподобные сети (НПС) и соответственно нейрокомпьютерные системы (НКС) получили для решения трудно формализуемых и в основном неформализуемых задач.
В перечисленных случаях применение традиционных универсальных компьютеров неэффективно. Отличительными чертами таких задач являются:
1. Нестандартные характеристики обрабатываемой информации.
2. Информация запоминается и содержится не в отдельных ячейках памяти, а в связях между нейронами и в их величине, при этом состояние каждого отдельного нейрона определяется состоянием многих других, связанных с ним нейронов.
3. Потеря одной или нескольких связей между нейронами не оказывает
существенного влияния на результат работы системы в целом. Кроме того, высокая естественная помехоустойчивость и функциональная надежность нейро-подобных сетей не зависят от зашумляющих потоков и отказов отдельных процессорных элементов Тем самым в нейронной системе обеспечиваются высокая © Лукашенко В.В., Романчук В.А., 201 4 ии.
4. Возможность обучения, дообучения и переобучения нейроподобной сети при изменении внешних факторов. Вышеперечисленные операции позволяют сделать нейроподобные сети универсальными, позволяющими легко перестроить их на новые виды решаемых задач.
Однако производительность современных нейропроцессорных модулей не позволяет добиться оптимальной скорости решения подобных задач. В связи с этим совершенно логично использовать опыт распределенных вычислений для наращивания суммарных мощностей объединенной виртуализуемой системы нейромикроконтроллеров.
Распределенный виртуализуемый реструктуризуемый (под задачу) вычислительный кластер на базе нейропроцессоров может быть описан в виде полного взвешенного графа следующим образом:
G = (CN, A, Pi, Ki, Ei, VO, F(CN), q, l, b, c, m, d, 5), (1)
где: CN = {CN1, ... CNi}, I = [1,®] - множество вычислительных машин (узлов, вершин) на базе нейропроцессоров, входящих в состав кластера; F(CN) : CN ^ 2VO \{0} - функция принадлежности каждого узла к одной или нескольким виртуальным организациям, в рамках которых осуществляется разделение вычислений.
Отображение q:CN U{A}*CN U {A}^ Z + U {0} определяет среднюю пропускную способность через сеть Интернет между каждой парой вычислительных узлов, а также между узлами и диспетчером A и измеряется в байтах в секунду. Функция l:CN U {A}*CN U {A}^Z+U:{0} задает среднюю задержку в секундах. Так как граф (1) неориентированный, то выполняется следующее свойство:
Vu, v^ CN U {A} q(u, v) = q(v, u)&l(u, v) = l(v, u) (1.1)
Предлагаемая модель работает по принципу коммутации пакетов при передаче данных между вычислительными узлами.
A - выделенная вершина кластера (диспетчер кластера), управляющая работой кластера. Формализуем вершину A:
A = {S, H, Z, SC}, (2),
где:
- функции S: CN^ AP и H: CN ^20 определяют соответственно аппаратную архитектуру всех узлов вычислительного кластера и набор предустановленного программного обеспечения; в предлагаемой модели все рабочие единицы (вершины) кластера работают на базе нейропроцессоров серии NM640X, подключенных через стандартный интерфейс (PCI, PCI-E), и имеют предустановленную операционную систему семейства *NIX;
- Z - управляющий модуль (группа алгоритмов) планирования задач на определенные машины кластера, при этом Z можно выразить в виде множества:
Z ={Ad, Az, Asc[i], Af(sc[i]), Ar)}, (3)
где:
Ad (3.1) - алгоритм определения сложности задачи, выполнение которой осуществляется в вычислительном кластере. Алогоритм разбивает задачу на конкретные операции и по их количеству относит ее к одному из возможных классов нейропроцессорных структур обработки информации.
Az (3.2) - алгоритм разбиения задач на подзадачи. Планируется использование сочетания алгоритмов выбора задачи из очереди Most Processors First Served Scan и Backfill со следующими методами назначения, учитывающими топологию вычислительной системы: Paging, Multiple Buddy System, Adaptive
NoneeContiguous Allocation, Greedy AvailableBusy List, Minimizing Contention, Minimizing Contention Incrémental.
Asc[i] (3.3) - алгоритм выбора необходимой нейропроцессорной структуры из множества возможных структур SС = {SQ, SС2,..., SСi...} из (3), где SСІ -конвейер, вектор или их сочетание в виде комбинаций конвейерновекторной или векторно-конвейерной структур и др.
Af(sc[i]) (3.4) - алгоритм формирования выбранной нейропроцессорной структуры из пула виртуализованных ресурсов кластера (1).
Ar (3.5) - алгоритм распределения сформированных в (3.2) подзадач по узлам структуры, полученной в результате работы (3.3) и (3.4).
Pi = {pi 1, pi2,..., pig[i] } - множество вычислительных узлов, Ki = {kil, ki2, ..., kiz[i]} - множество коммутаторов, Ei - множество направленных сетевых связей между ними. В данном случае в качестве вершин рассматривается Pi U Ki, представляющее сосбой совокупность узлов и коммутаторов кластера (1).
Пусть Р = и ; = 1 Pj , К = U -=1 К, - Е = и ; = 1 Et - соответственно объединения вычислительных узлов, коммутаторов и направленных сетевых связей кластера, тогда в формуле (1) b: E ^ Z+ U{0} - отображение, характеризующее пропускную способность каждой сетевой связи в байтах в секунду.
Функции c, m, d: P ^ Z+ определяют для каждого вычислительного узла
pij количество вычислительных ядер c(pij) = Cij, объемы оперативной m(pij) = = Mij и дисковой памяти d( pij) = Dij в мегабайтах.
Отображение S: P ^ R+ для узла pij задает относительную производительность S( pij ) = Sij каждого его вычислительного ядра, которая определяет, во сколько раз ядра данного узла работают быстрее вычислительных ядер самого непроизводительного узла кластера. В кластере G все вычислительные узлы множества Pi связаны с выделенным управляющим узлом А с помощью отдельной управляющей сети, которая используется для передачи сигналов управления, доставки к ним файлов программ и входных данных, а также для возврата выходных файлов с результатами. Узел А в вычислениях не участвует.
Статические параметры Cij, Mij, Dij и S описывают конфигурацию вычислительного узла pij, а динамические параметры характеризуют его состояние в произвольный момент времени tE [0; +œ); uij(t) - загруженность вычислительных ядер; mij(t) и dij(t) - объемы доступной оперативной и дисковой памяти. Имеют место следующие неравенства:
0 < uij(t) <1, 0 mij (t) <Mij, 0 < dij (t) <Dij. (4)
Структура типичного вычислительного узла pij кластера G изображена на рисунке 1. Вычислительные ядра могут относиться как к отдельным процессорам, так и к нескольким многоядерным процессорам. С целью упрощения модели они рассматриваются как единое множество вычислительных ядер узла pij :
Xij = {xij,1, Xij,2,..., xij,C[ij]} (5)
Таким образом, X = и ¡ = ±шТ ^ - множество вычислительных ядер всех
узлов всех кластеров.
network connection
Рис. 1. Структура узла pij, кластера G
Процессы, выполняющиеся на вычислительных ядрах, могут непосредственно считывать и записывать информацию в оперативную и дисковую память данного узла, взаимодействуя с ними через системную шину или коммутатор. При необходимости передачи сообщения другому вычислительному узлу в рамках одного кластера задействуется сетевая подсистема, осуществляющая разбиение сообщения на пакеты и передачу их по высокопроизводительной коммуникационной сети. Сетевая подсистема каждого узла также содержит коммутатор, выполняющий функции маршрутизации собственных и транзитных пакетов.
Обозначим в качестве id(x, t) номер задачи, которая выполняется на ядре Xе Х в момент времени t. Если же ядро х в момент времени t было свободно, то id(x,t) = 0. Пусть state(x,t) = (free, communication, computation} - состояние вычислительного ядра х е Х в момент времени t (free - свободно, communication -исполняет процесс на стадии коммуникации, computation - исполняет процесс на стадии вычислений).
Значения динамических параметров узла pij в момент времени t могут быть вычислены по следующим формулам:
(6)
где mre и dre - соответственно объемы оперативной и дисковой памяти, необходимой каждому процессу параллельной подзадачи.
Таким образом, предложенная в работе математическая модель кластера, в инструментальную основу вычислительных мощностей узлов которого положены нейропроцессорные модули, имеет явное преимущество в обработке задач как перед одиночными машинами на базе нейропроцессоров (за счет использования технологий распределенных вычислений), так и перед стандартными вычислительными кластерами для трудно формализуемых и в основном неформа-лизуемых классов задач.
СПИСОК ИСПОЛЬЗОВАННОМ ЛИТЕРАТУРЫ
1. Foster, I. The anatomy of the GRID [Text] // I. Foster, C. Kesselman, St. Tuecke // International Journal of High Performance Computing Applications. - 2001. - No 3/15. -P. 200-222.
2. Lublin, U. The workload on parallel supercomputers: modeling the characteristics of rigid job [Text] / U. Lublin, G. Feitelson // Journal of Parallel and Distributed Computing archive. - 2003. - Vol. 63. - Iss. 11. - P. 542-546.
3. Grigorenko, D. Improving recoverability cluster neuroprocessor data processing systems [Text] / D. Grigorenko, V. Ruchkin // Digital signal processing. - 2012. - No 3. - P. 67-72.
4. Polezhaev, P. Experimental study of scheduling algorithms for computational grid problems-system [Text] // Control Systems and Information Technology. - 2011. - No3.2/45. -P. 266-270.
V.V. Lukashenko, V.A Romanchuk
MATHEMATICAL MODELING OF VIRTUAL CLUSTERS OF GRID-ENABLED SYSTEM PROGRAMS ON THE BASIS OF NEUROPROCESSORS
The paper provides a survey of mathematical modeling of virtual clusters reconfigured for some specific tasks. Production nodes of such clusters function on the basis of neuroprocessors. The paper also provides detailed models of executive programs and control modules for certain nodes.
Distributed computing, neuroprocesses, clusterization.
