3.8. Система показателей оценки информационных систем туризма

В основе оценки функционирования ИСТ лежит система показателей. Эту систему можно представить в виде классификационного поля (табл. 3.11).

В данной классификации основания деления выбраны с учётом их важности и частоты применяемости. В основе оценки лежит распознавание разносторонних свойств ИСТ и информационного обеспечения бизнес-процессов в целом – «свойство информационной системы туризма – это объективная характеристика, отображающая отдельную характеристику ИСТ». Количественная оценка ИСТ выполняется посредством выделения количественной формы проявления свойств, в частности, такой категории как параметр – «параметр ИСТ – это количественная величина, отображающая интенсивность проявления отдельного свойства ИСТ». С учётом выделенного параметра определим понятие «показатель ИСТ туризма – совокупность параметров, отображающая количественную характеристику свойства ИСТ, и обеспечивающая оценку определённого свойства ИСТ».

В иерархической системе показателей низший уровень занимают единичные показатели – «единичный показатель ИСТ – это количественная характеристика одного из свойств ИСТ, значение которой определяется на основе набора соответствующих параметров». Примером может служить значение достоверности информации по определённому виду обрабатываемой документации на отдельном этапе технологии обработки данных ИСТ. На основе единичных показателей могут быть построены групповые показатели ИСТ.

«Групповой показатель ИСТ – это количественная характеристика качества ИСТ, значение которой определяется на основе набора единичных показателей ИСТ». Например, определить значение группового показателя можно путём расчёта средневзвешенного значения своевременности обработки данных по набору этапов технологического процесса ИСТ. На базе групповых показателей определяются значения интегральных показателей. «Интегральный показатель ИСТ – это количественная характеристика ИСТ, значение которой определяется на основе набора групповых показателей ИСТ». Так, например, средневзвешенная сумма значений показателей достоверности, полноты и своевременности информации отображает значение комплексного показателя по групповым фактическим, базовым и относительным показателям ИСТ.

Важную роль в квалиметрии ИСТ играют обобщённые показатели. Обобщённый показатель, как правило, отображает несколько свойств ИСТ и учитывает взаимовлияние параметров весомости всех входящих в него групповых (абсолютных или удельных) показателей. «Обобщённый показатель ИСТ – это количественная характеристика ИСТ, значение которой определяется функциональной зависимостью от набора значимых свойств ИСТ, близких по весомости и содержанию». В моделях определения значений обобщённых показателях весомость отображается через коэффициенты весомости того или иного показателя, включённого в структуру обобщённого показателя. Функциональная зависимость может быть отображена различными средствами, например, регрессионной зависимостью [59]. Весомость может быть отображена в форме удельных показателей, например, достоверность данных в рамках шкалы от 0 до 1. В форме абсолютных показателей весомость может быть представлена количеством дефектов по определённым показателям, например, достоверности, полноты, своевременности обработки информации и др. «Коэффициент весомости показателя ИСТ – это количественная характеристика значимости определённого показателя ИСТ в системе её показателей».

На основе групповых, интегральных, обобщённых и других показателей можно определить значения комплексных показателей ИСТ. «Комплексный показатель ИСТ – это количественная характеристика ИСТ, значение которой определяется как средневзвешенная арифметическая величина набора различных по содержанию, но сопоставимых по измерению показателей ИСТ». В принципе комплексный показатель может быть определён по набору свойств на уровне отдельных компонентов (подсистем), ИСТ в целом и (или) набору ИСТ. Так, например, значение этого показателя можно рассчитать по набору базовых интегральных и обобщённых показателей, отображающих набор различных свойств ИСТ, но измеряемых по удельной шкале.

Очень часто приходится решать задачу оценки ИОТ по какому-либо отдельному показателю, который играет доминирующую роль и является определяющим в системе показателей качества ИСТ. «Определяющий показатель ИСТ – это количественная характеристика ИСТ, по которой принимается окончательное решение по оценке ИСТ». Назначение статуса определяющего показателя может получить показатель, занимающий верхний уровень иерархии в системе показателей ИСТ. Чаще всего этот статус приобретают комплексные, обобщённые и интегральные показатели, то есть показатели кумулятивного характера. В процессе управления ИОТ в роли критерия может быть выбран, например, или обобщённый показатель производительности ИСТ, или интегральный показатель относительного уровня ИСТ и др. Выбор определяющего показателя обусловлен прагматикой решения задач оценки и зависит от пространственно-временных характеристик конкретной задачи оценки. При оценке ИСТ в роли определяющего показателя может быть применён показатель экономической эффективности – отношение суммарного эффекта от эксплуатации ИСТ к суммарным затратам на её создание и эксплуатацию.

К разряду определяющих показателей ИСТ можно причислить «относительный показатель ИСТ – это отношение фактического значения показателя ИСТ к базовому значению этого показателя». Для общей оценки ИСТ по системе показателей в целом может быть применён показатель «относительный уровень ИСТ» или «уровень ИСТ – относительная характеристика ИСТ, получаемая путём сопоставлении фактических и базовых значений показателей ИСТ». С учётом сформулированного нами ранее определения понятия «оценка ИСТ» дадим определение понятию «оценка уровня ИСТ – это совокупность процедур по выбору номенклатуры показателей ИСТ, расчёту фактический значений показателей и сопоставлению их с базовыми значениями». На основе вышеприведённой дефиниции определим понятия оценки уровня отдельных подсистем ИСТ, в частности, «оценка информационного уровня ИСТ – это совокупность процедур по выбору номенклатуры показателей, характеризующих информационную составляющую ИСТ, определению фактических значений этих показателей и сопоставлению их с базовыми значениями», «оценка технического уровня ИСТ – это совокупность процедур по выбору номенклатуры показателей, характеризующих техническое состояние ИСТ, определению фактических значений этих показателей и сопоставлению их с базовыми значениями», «оценка программного уровня ИСТ – это совокупность процедур по выбору номенклатуры показателей, характеризующих состояние программного комплекса оцениваемой ИСТ, определению фактических значений этих показателей и сопоставлению их с базовыми значениями», «оценка организационно-правового уровня ИСТ – это совокупность процедур по выбору номенклатуры показателей, характеризующих организационно-правовое состояние ИСТ, определению фактических значений показателей и сопоставлению их с базовыми значениями».

Так как численный показатель уровня ИОТ может быть одновременно комплексной, интегральной и обобщённой характеристикой, то следует учитывать условие относительности. При расчёте количественного значения показателя привлекаются как минимум два параметра ИСТ. Например, расчёт достоверности информации, прежде всего, базируется на относительности количества ошибок и объёма обрабатываемой информации, содержащего эти ошибки. Фактическое значение показателя должно определяться путём расчёта по определённым формулам. В роли базовых значений обычно выступают значения показателей ИСТ, принятые за базовые эталоны или образцы. Можно сказать, что «базовый образец ИСТ туризма – это информационная система, представляющая передовые научно-технические достижения в развитии соответствующего класса ИСТ, и потенциально применяемая как эталон для оценки конкретных ИСТ соответствующего класса». Тогда «базовое значение показателя ИСТ – это значение показателя базовой ИСТ, принятое за основу при её сравнительной оценке». По своему назначению близко расположен к базовому значению показателя ИСТ другой показатель – «регламентированное значение показателя ИСТ – это значение показателя, которое устанавливается управляющим органом туризма и фиксируется в нормативной документации». В видовой состав нормативной документации могут быть включены приказы, инструкции, стандарты, создаваемые на различных уровнях управления.

В решении задач оценки ИОТ следует учитывать условия отклонений значений показателей. Эту особую группу составляют: номинальное значение, предельное значение и допускаемое отклонение показателя ИСТ. «Номинальное значение показателя ИСТ – это регламентированное значение показателя, от которого отсчитывается допустимое отклонение в решении задач оценки ИСТ». По существу номинальное значение выступает в определённых случаях в роли базового значения показателя качества ИСТ. В соответствии с дефиницией понятия «номинальное значение показателя ИСТ» в практических задачах оценки ИОТ понятие «допустимое отклонение показателя ИСТ» ничто иное, как степень свободы, или своеобразный «люфт» в задачах управления и оценки ИОТ. «Допустимое отклонение показателя ИСТ – это отклонение фактического значения показателя ИСТ от номинального значения, находящееся в пределах, установленных нормативной документацией». Пределы должны устанавливаться с учётом фактуры показателя и условий решения задачи КУИОТ. В задачах оценки ИСТ они обозначают предельные значения показателя, устанавливаемые проектом ИСТ [27]. Таким образом, «предельное значение показателя ИСТ – это наибольшее или наименьшее регламентированное значение показателя ИСТ». Так, например, в контрольной карте КУИОТ предельные значения параметра обозначаются линиями пределов области допустимых значений или «фазового пространства ИСТ» [26].

В практике совершенствования ИСТ часто становится необходимым и важным выполнить оценку отдельных компонентов ИСТ. В структуру ИСТ туризма входит техническое обеспечение ИСТ – средства вычислительной техники, аппаратуры передачи данных и связи, оргтехники и другие аппаратные ресурсы. Техническая составляющая ИСТ оценивается показателями её технического уровня (ТУ) – уровня на всех этапах жизненного цикла техники: при проектировании и конструировании, при изготовлении и в процессе эксплуатации [29].

При определении численного значения технического уровня учитывают совокупность технических, технологических, эксплуатационных и других показателей. Они призваны отображать степень совершенства технического компонента ИСТ и его соответствия установленным требованиям. Заметим, что в оценке ИСТ вполне правомерно наличие и такой категории как «экономический уровень ИСТ» [27]. Понятие «уровень» относится и к таким категориям как «программное обеспечение» – «программный уровень ИСТ», «информационное обеспечение» – «информационный уровень ИСТ», «организационное обеспечение» – «организационный уровень ИСТ» и др. Эти понятия по своему содержанию входят в выше рассмотренную группу понятия «оценка уровня ИСТ».

В оценке ИСТ значимыми оценочными показателями являются показатели работоспособности устройств ИСТ. В данном случае понятие «устройство» включает в себя широкий спектр: ЭВМ, её отдельные компоненты, периферийные устройства, изделия, комплексы устройств, сетевые коммуникации, составляющие структуру подсистемы «Техническое обеспечение» ИСТ и др. Эти показатели могут отображать ТУ, а также могут быть задействованы в качестве исходных для определения комплексных показателей ИСТ в целом. Оценка ТУ устройства состоит в установлении соответствия мировому, национальному уровню или уровню отрасли туризма. Соответствие оцениваемой продукции мировому или другому уровню устанавливается на основе сопоставления параметров устройств оцениваемой ИСТ и соответствующих базовых образцов.

Следующим является этап определения численных значений показателей, характеризующих свойства оцениваемых и базовых образцов техники ИСТ. Этот этап выполняется путём сбора информации, измерений, испытаний, расчётов и т. д. Затем в соответствии с принятым методом оценки ТУ производятся расчёты показателей, а потом уровней, т. е. технического уровня оцениваемого и базового образца аналогичной техники.

Результаты определений всех показателей и технического уровня устройств отражаются в специальной карте – «Карта технического уровня и качества изделий» или в сопоставительной «Таблице уровня». Данные карты (таблицы) уровня анализируются по специальным методикам, учитывающим специфику устройства. Образцы аппаратных средств ИСТ для оценки их технического уровня могут иметь несколько градаций (таблица 3.12).

Выбор методов и системы показателей для оценки относительно узкого класса технических устройств определяется в основном прагматической стороной оценки. Особенно это проявляется в решении маркетинговых задач. При этом можно выявить зависимость, чем проще класс устройств, тем менее обширным и более конкретным представляется состав применяемых показателей для оценки. К примеру, при оценке современных модификаций репрографических комплексов по соотношению «производительность/цена» на первое место выходят иногда модификации отнюдь не самые лучшие по производительности [26]. В оценке технической базы ИО туризма особого внимания заслуживает Интернет. Возможности этой системы были рассмотрены выше.