Типовые информационные структуры

Рассмотрим некоторые примеры графов конкретных алгоритмов. Мы не будем строить графы в пространствах итераций и не будем описывать их покрывающие функции. Со всем этим можно познакомиться в [ 1 ] . Мы будем размещать графы в подходящих пространствах малой размерности. Выбор размещения будет определяться только тем, чтобы можно было легко показать информационную структуру самих алгоритмов и продемонстрировать возможные наборы линейных разверток. В соответствии с определением графа алгоритма не нужно указывать дуги, связанные с рассылкой одних и тех же входных данных по вершинам графа. И очень часто они показываться не будут, главным образом, из-за сложности их изображения. Но иногда мы будем отступать от этого правила.

Перемножение матриц. Пусть решается классическая задача вычисления произведения двух квадратных матриц порядка . Будем считать элементы матриц числами и обозначим их . Согласно определению операции умножения матриц имеем

Эти формулы довольно часто используются для непосредственного вычисления элементов матрицы . Сами по себе они не определяют алгоритм однозначно, так как не определен порядок суммирования произведений bikckj под знаком суммы. Однако заметим, что явно виден параллелизм вычислений. Выражается он отсутствием указания о соблюдении какого-либо порядка перебора индексов .

Если операции сложения и умножения чисел выполняются точно, то все порядки суммирования эквивалентны и приводят к одному и тому же результату. Пусть из каких-то соображений выбран следующий алгоритм реализации формул:

Снова явно указан параллелизм перебора индексов . Однако по индексу параллелизма нет, так как этот индекс должен перебираться последовательно от 1 до .

Построим теперь граф этого алгоритма. Будем считать, что вершины графа соответствуют операциям вида . Чтобы не вносить в исследование графа алгоритма неоправданные дополнительные трудности, вершины графа нельзя располагать произвольно. Приемлемый способ их расположения подсказывает сама форма записи. Рассмотрим прямоугольную решетку в трехмерном пространстве с координатами . Во все целочисленные узлы решетки для поместим вершины графа. Анализируя запись, нетрудно убедиться в том, что в вершину с координатами для будет передаваться результат выполнения операции, соответствующей вершине с координатами .

Граф алгоритма устроен достаточно просто. Он распадается на не связанных между собой подграфов. Каждый подграф содержит вершин и представляет один путь, расположенный параллельно оси . Как и следовало ожидать, в графе отражен тот же параллелизм, который был явно указан в записи. Для граф алгоритма представлен на рис. 9.1. Граф имеет полный набор линейных разверток, в качестве направляющих векторов которых могут быть взяты, например, координатные векторы. Векторы вдоль осей дают обобщенные развертки, вектор вдоль оси - строгую.

Системы с треугольной матрицей. Пусть теперь решается система алгебраических линейных уравнений с невырожденной треугольной матрицей порядка методом обратной подстановки. Обозначим через элементы матрицы, правой части и вектор-решения. Предположим для определенности, что матрица левая треугольная с диагональными элементами, равными 1. Тогда имеем

Эта запись также не определяет алгоритм однозначно, так как не определен порядок суммирования. Рассмотрим, например, последовательное суммирование по возрастанию индекса . Соответствующий алгоритм можно записать следующим образом

Основная операция алгоритма имеет вид . Выполняется она для всех допустимых значений индексов . Все остальные операции осуществляют присваивание. В декартовой системе координат с осями построим прямоугольную координатную сетку с шагом 1 и поместим в узлы сетки при вершины графа, соответствующие операциям . Анализируя связи между операциями, построим граф алгоритма, включив в него также вершины, символизирующие ввод данных и . Этот граф для случая представлен на рис. 9.2 слева. Верхняя угловая вершина на левом рис. 9.2 находится в точке с координатами . Граф имеет полный набор линейных разверток, в качестве направляющих векторов которых могут быть взяты, например, координатные векторы. Векторы вдоль оси дает обобщенную развертку, вектор вдоль оси - строгую.

Если при вычислении суммы мы останавливаемся по каким-то соображениям на последовательном способе суммирования, то выбор суммирования именно по возрастанию индекса был сделан, вообще говоря, случайно. Так как в этом выборе пока не видно каких-либо преимуществ, то можно построить алгоритм обратной подстановки с суммированием по убыванию индекса . Соответствующий алгоритм таков:

Его граф для случая представлен на рис. 9.2 справа. Теперь верхняя угловая вершина находится в точке с координатами .

Пытаясь размещать вершины, соответствующие операциям типа , по ярусам хотя бы какой-нибудь параллельной формы, мы обнаруживаем, что теперь в каждом ярусе может находиться только одна вершина. Объясняется это тем, что все вершины графа на правом рис. 9.2 лежат на одном пути. Этот путь показан пунктирными стрелками. Граф алгоритма имеет только одну линейную развертку, причем обобщенную. Ее направляющий вектор направлен вдоль оси .

Полученный результат трудно было ожидать. Действительно, оба рассмотренных алгоритма предназначены для решения одной и той же задачи. Они построены на одних и тех же исходных формулах и в отношении точных вычислений эквивалентны. Оба алгоритма совершенно одинаковы с точки зрения их реализации на однопроцессорных компьютерах, так как требуют выполнения одинакового числа операций умножения и вычитания и одинакового объема памяти. На классе треугольных систем оба алгоритма даже эквивалентны с точки зрения влияния ошибок округления. Тем не менее, графы обоих алгоритмов принципиально отличаются друг от друга. Если эти алгоритмы реализовывать на параллельной вычислительной системе, имеющей универсальных процессоров, то первый алгоритм можно реализовать за время пропорциональное , а второй - только за время пропорциональное . В первом случае средняя загруженность процессоров близка к 0,5, во втором случае она близка к 0.

Таким образом, алгоритмы, совершенно одинаковые с точки зрения реализации на "обыкновенных" компьютерах, могут быть принципиально различными с точки зрения реализации на параллельных компьютерах.

Система с блочно-двухдиагональной матрицей. Среди многих задач линейной алгебры, возникающих при решении уравнений математической физики сеточными методами, часто встречается задача решения систем линейных алгебраических уравнений с блочно-двухдиагональными матрицами. При этом вне диагональные блоки представляют диагональные матрицы, диагональные блоки — двухдиагональные матрицы. Будем считать для определенности, что матрица системы является левой треугольной. Пусть она имеет блочный порядок и порядок блоков, равный . Итак, рассмотрим систему линейных алгебраических уравнений следующего вида:

где