Принципиальные подходы к проблеме оценке эффективности ИТ.

Возникновение феномена новых возможностей предприятия в условиях всепроникающего развития ИТ, новых возможностей воздействия на социально-экономическую и производственную сферы, заставляет по-новому взглянуть на проблемы оценки эффективности вложений в информационные технологии, с учетом влияния информационных технологий на исполнение системных функций предприятия.

Менеджеры, со своими навыками, опытом, профессионализмом, и управленческая информация, представляют собой два важнейших ресурса, от качества которых зависит ожидаемый эффект при автоматизации бизнеса, качество принимаемых решений. Структурно-функциональные преобразования в сочетании с высоким качеством своевременной и содержательной информации, поднимая производственно-технологический потенциал предприятий, обеспечивают менеджерам возможность, изменяя стратегию выводить предприятия на более высокий уровень своего предназначения и миссии. Представленная здесь «стоимость, добавленная управленческим трудом» П. Страссмана, открывает обзор и сравнительный анализ активно используемых в отечественной и зарубежной практике методов (методик) оценки с целью выявления областей и границ рационального использования наиболее популярных и приемлемых из них.

Несмотря на отсутствие подтверждающих официальных статистических данных, условность представляемых оценок, их преимущественно экспертный, методически несогласованный и статистически необеспеченный характер, для большинства пользователей и разработчиков результативность информатизации всех сторон жизнедеятельности общества и предприятий представляется очевидной и безусловной. Но подходы к оценке этой результативности у различных авторов существенно различаются, проявляя противоречивые, зачастую, принципиально расходящиеся позиции

Традиционно, все понятия экономической эффективности строились на соотношениях результатов и затрат (продукция и услуги – затраты труда и средств производства, прибыль – авансируемый основной и оборотный капитал, и др.). Понятие эффективности постоянно употребляется в различных областях экономики, но применительно к информационным технологиям оно дискутируется уже в течение нескольких десятилетий. Рассмотрим, для примера, определения эффективности собранные и обобщенные в статье Евгения Зиндера «Что такое эффективность ИТ?» [].

С точки зрения стандарта ISO:9000 third edition. 2005-09-15. Quality management systems - Fundamentals and vocabulary «эффективность — это связь между достигнутым результатом и использованными ресурсами» [].

Международный стандарт МЭК 50 (191)-90, ориентируется на удовлетворении заинтересованного лица: «эффективность услуги — свойство услуги, заключающееся в том, что потребитель может легко и успешно пользоваться ею» [].

Наиболее полное определение эффективности представлено в Методические рекомендациях по оценке эффективности инвестиционных проектов Минэкономики РФ: «Эффективность инвестиционного проекта — категория, отражающая соответствие инвестиционного проекта целям и интересам его участников» [].

Как видим, расхождения в видении проблемы очень существенное. Но, ведь это – официальные документы, предназначенные, в первую очередь, для лиц, принимающих решения: быть или не быть, внедрять или не внедрять, тратить или не тратить!

Технический прогресс в области информационных технологий (ИТ) ставит перед руководителями различного уровня задачу получения адекватных оценок экономической эффективности внедрения этих технологий. Изменения финансовых и экономических показателей функционирования предприятий, за редким исключением, не поддаются формализованной увязке с инвестициями в развитие информационных систем (ИС) и отдельных информационных технологий. Традиционные экспертные оценки, зависящие от уровня конъюнктурности, компетентности, информированности, рейтингов, предшествующих оценок и других субъективных факторов, по-прежнему являются основой для принятия решений в этой области.

Руководители компаний различного уровня сегодня, как правило, понимают сложность вопросов эффективности ИС (или хотя бы сроки оценки безубыточности проектов по их внедрению) и неоднозначность ответов на них. Сложность методов и методик оценки экономического эффекта от внедрения и эксплуатации ИС непосредственно зависит от сложности и многообразия современных информационных технологий.

Проблема оценки эффективности внедрения ИТ возникла с появлением автоматизированных систем управления (АСУ). Первые отечественные методические разработки по эффективности применения ЭВМ в управлении появились в 65-69 годах [][]. Затем стали разрабатываться методические материалы по оценке экономической эффективности АСУ [][][][].

В 1975 г. Постановлением Государственного комитета по науке и технике Совета Министров СССР и Президиума академии наук СССР была утверждена «Методика определения экономической эффективности автоматизированных систем управления предприятиями и производственными объединениями». []. Поздние методические материалы основывались, как правило, на этом официальном документе.

Первоначально обоснование экономической целесообразности создания автоматизированных система управления предприятием (КИС) происходило по схеме расчета экономической эффективности от внедрения новой техники в производство. Схема строилась на традиционном определении экономической эффективности капитальных вложений. Рассчитывался годовой экономический эффект путем сравнения исходных показателей по себестоимости и затрат на увеличение производственных основных и оборотных фондов с показателями, полученными после внедрения мероприятия по новой технике, и умножения полученных результатов на годовой объем производства.

Практика внедрения КИС потребовала своей методологии и специфических подходов для оценки экономической эффективности. Оказалось недостаточным рассматривать создание АСУ только как внедрение новой техники в производство. Внедрение новой техники подразумевало автоматизацию отдельных технологических операций, отдельных производственных процедур, в то время как функционирование автоматизированной системы управления влияло на качество управления предприятием в целом.

Специфика определения размера эффекта от автоматизации управления свелась к четырем основным отличиям от задачи определения экономической эффективности использования новой техники:

· Трудоемкость определения количественных параметров использования КИС в ряде областей производственно-хозяйственной деятельности предприятия, где возможна только качественная оценка (в ряде случаев эти параметры не подлежат экономической оценке);

· Широкая взаимозаменяемость технических средств и высокая вариантность комплектования технической базы КИС;

· Высокая значимость первоочередности решения проблем и задач на последующее развитие АСУ;

· Комплексность и взаимосвязь всех подсистем АСУ.

При этом выявились факторы экономической эффективности АСУ на базе ЭВМ:

· высокая скорость выполнения операций по сбору, передаче, обработке и выводу информации за счет высокой производительности средств;

· применение современных методов планирования, обеспечивающих рациональное использование производственных ресурсов;

· непрерывный оперативный контроль за ходом выполнения плана на основе своевременной и достоверной информации о состоянии производства;

· повышение качества учета, планирования, контроля и регулирования.

Экономическая оценка эффективности автоматизированных систем управления предприятиями тесно связана с определением источников экономической эффективности, то есть реальных возможностей улучшения производственно-хозяйственной и финансовой деятельности предприятия, потенциально существующих на предприятии резервов производства и упущенных выгод, а также возможностей повышения эффективности производства за счет совершенствования системы управления им []. Количественной оценке, в принципе, поддаются следующие направления повышения эффективности:

· увеличение выпуска продукции за счет более рационального использования производственных и трудовых ресурсов, оптимизации производственной программы предприятия;

· повышение производительности труда производственных рабочих вследствие сокращения потерь рабочего времени и простоев производственного оборудования;

· установление оптимального уровня запасов материальных ресурсов и объемов незавершенного производства;

· повышение качества выпускаемой продукции (сокращение брака, повышение сортности) и экономия, получаемая потребителями;

· снижение затрат на выпуск продукции за счет возможного сокращения административно-управленческого персонала, оптимизации технико-экономического и оперативно-календарного планирования, улучшения оперативного регулирования производства, экономии условно-постоянных расходов.

Перечисленные источники экономической эффективности автоматизации управления производством обеспечивают снижение себестоимости производимой продукции, и получение соответствующей прибыли на предприятии, внедрившем систему управления. Выбор этих источников во многом определяет достоверность будущих расчетов.

Традиция создания отечественных ИС практически прервалась по причинам кардинальной перестройки структуры собственности и экономического коллапса 1991-1998 гг. С конца 80-х годов в течение более десяти лет в условиях почти полного отсутствия финансирования отечественные разработки в этой области носили случайный, фрагментарный характер. Имевшиеся методики определения экономической эффективности АСУ не удовлетворяли требованиям современного производства в условиях рыночной экономики. Реформы методов управления экономическими объектами в России повлекли за собой распространение новых форм управленческой деятельности, перестройки организации процесса ее автоматизации.

Наряду с рядом других причин, это привело к широкому проникновению на российский рынок не только зарубежных технических средств и информационных систем, но и зарубежных методов и методик оценки их эффективности. Многие отечественные разработчики, по – существу, скатились к внедрению и модернизации применительно к местным условиям наиболее ярко зарекомендовавших себя зарубежных систем. То же самое наблюдается и в области оценки эффективности. Повторение и тиражирование имеет при этом и свои плюсы – отбрасываются заведомо не оправдавшие себя структурно - организационные и технические решения.

В настоящее время пользователи и разработчики ИС оперируют, как правило, совокупностью разнообразных, зачастую не стыкующихся между собой, построенных на разных принципах, методах и методиках, заимствуют там, где это возможно, рациональные зерна, принципы, идеи, элементы расчетов и оценок. В условиях отсутствия единой, общепризнанной, универсальной, всеобъемлющей методики, работа по разработке, внедрению и оценке экономической эффективности ИС превращается, в значительной степени, в исследовательскую, с необходимостью проектной привязки к конкретному объекту.

Отечественный и зарубежный опыт пока не подтверждает возможность создания такой, построенной на универсальных или специализированных методах, методики, которая обеспечивала бы однозначную и достоверную оценку любого проекта внедрения ИТ. Тем не менее среди большинства разработчиков и пользователей коренится убеждение, что средства, вложенные в разработку, внедрение и развитие ИС целесообразно оценивать как инвестиционные затраты, затраты на инвестиционные проекты (ИП).

В настоящее время в качестве эталона выполнения анализа инвестиционных проектов вводится стандартизированный подход к методам оценки инвестиций, разработанный Международным Центром промышленных исследований при ЮНИДО. Этот подход предусматривает общий порядок работы по оценке любого инвестиционного проекта (независимо от отраслевой принадлежности и степени сложности) и общие критерии коммерческой привлекательности: "Финансовая состоятельность" (финансовая оценка) и "Эффективность" (экономическая оценка).

Финансовая оценка включает в себя отчет о движении денежных средств, отчет о прибыли, баланс и соответствующие финансовые оценки. Экономическая оценка эффективности предусматривает использование простых (статистических) методов для расчета простой нормы прибыли и сроков окупаемости, а также методы дисконтирования для расчета текущей отчетности проекта (NPV) и внутренней нормы прибыли (IRR ). Изложенный в Рекомендациях ЮНИДО [] подход, в целом, отражен с учетом российских особенностей в «Методических рекомендаций по оценки эффективности инвестиционных проектов и их отбору для финансирования» 1994 года [] и «Методических рекомендаций по оценке инвестиционных проектов». Эти официальные издания утверждены Министерством экономики РФ, Министерством финансов РФ, государственным комитетом РФ по строительной, архитектурной и жилищной политике в 1999 году [].

Общая схема оценки эффективности состоит из двух этапов.

Первый этап: рассчитываются показатели эффективности проекта в целом. Ставится цель, получения агрегированной экономической оценки проектных решений и создания необходимых условий для поиска инвестиционных ресурсов. Поскольку ИП, связанные с информационными технологиями на предприятиях, как правило, рассматриваются, как локальные (в отличие от общественно значимых), то оценивается только их коммерческая эффективность (общественная эффективность не оценивается, хотя, по нашему мнению, в связи с масштабным проявлением проблемы институциональности это положение в дальнейшем может быть пересмотрено).

Второй этап: определяется финансовая реализуемость и эффективность участия предприятия в проекте. Определяется организационно - экономический механизм реализации проекта и состав его участников. Вырабатываются схемы финансирования, обеспечивающие финансовую реализуемость ИП для предприятия. Оценивается эффективность проекта для предприятия.

Оценка эффективности ИП должна осуществляться на стадиях [][]:

· разработки инвестиционного предложения и декларации о намерениях (экспресс-оценка инвестиционного предложения);

· разработки «Обоснования инвестиций»;

· разработки технико-экономического обоснования (ТЭО) или бизнес-плана проекта;

· осуществление ИП (экономического мониторинга).

«Классические» показатели, рекомендуемые для использования в расчетах экономической эффективности ИП:

· чистый доход (ЧД, Net Value, NV);

· чистый дисконтированный доход (ЧДД, интегральный эффект, Net Present Value, NPV);

· внутренняя норма доходности (ВНД, внутренняя норма дисконта, внутренняя норма рентабельности, Internal Rate of Return, IRR);

· потребность в дополнительном финансировании (ПФ – проектное финансирование, стоимость проекта, капитал риска);

· индексы доходности затрат и инвестиций (простые – не дисконтированные, дисконтированные, ИД, ИДД);

· срок окупаемости;

· группа показателей, характеризующих финансовое состояние предприятия – участника проекта.

В большинстве современных методов и методик оценки эффективности ИС в той или иной степени присутствуют представленные выше этапы, стадии, показатели. Отраслевые корпоративные методики и методические рекомендации, в основном, повторяют эти стандартные подходы. Общность методических подходов здесь очевидна, но конкретные фирмы – разработчики ИС, фирмы, внедряющие ИС, в каждом конкретном случае, на каждом объекте используют собственные методы, привязывая их непосредственно к объекту.

Показатели эффективности инвестиционных проектов рассчитываются на разных этапах инвестиционного цикла (времени жизни проекта) – от разработки инвестиционного предложения до мониторинга хода реализации проекта, различаясь требованиями по составу и степени детализации исходных данных. Эти данные являются, как правило, многовариантными, то есть предполагают варьирование состава и численных значений, но в рамках представленных выше «рекомендаций» структура этих данных является инвариантной.

Проведение на практике расчетов эффективности ИТ – проектов, в соответствии с приведенными Рекомендациями, носит ограниченный характер из-за ряда не поддающихся учету, косвенных эффектов. Такие расчеты применимы, как правило, только к отдельным разделам проектов, к отдельным задачам, подразделениям или видам производств, лишь иногда к целым предприятиям, специфика которых позволяет вести адекватный и объективный учет затрат и доходов (например, транспортные предприятия).

При этом у заказчика или разработчика проблема полного упорядочения альтернатив выбора остается неразрешенной. Формирование целевой функции как количественного показателя качества заданных альтернатив выбора представляется абстрактной, труднореализуемой задачей. Для множества типов конкретных организаций и предприятий трудно получить достаточно адекватное описание цели в одной общепринятой шкале экономических измерений.

Многообразие современных информационных технологий требует уточнения и корректировки используемого методического материала по конкретному проекту. Сложность заключается в правильном выборе источников эффективности, которых на практике может оказаться значительно больше, чем обозначено выше. Поэтому, как правило, требуется специализированное обследование.

В настоящее время довольно активно формируется распространенное мнение об общей принципиальной убыточности автоматизации: «Автоматизация предприятия в большинстве случаев была, и зачастую остается, как ни парадоксально это звучит, убыточной». «Применение вычислительной техники лишь добавляет новое качество (управления – авт.), но не меняет суть. Происходит просто смена поколений инструментов работы с информацией» []. На первый план выдвигается задача сделать управление с помощью компьютера значительно эффективнее за счет модернизации бизнес-процессов, совершенствования структуры и наполнения ИС, обеспечивающих в совокупности новое качество их функционирования.

Тратить время и деньги на расчет «экономического эффекта внедрения корпоративных (комплексных - авт.) информационных систем - значит еще больше увеличить убытки, связанные с этим внедрением». Выразители такой позиции, как правило, считают, что для обоснования автоматизации достаточно факта глобальной смены поколений инструментов работы с информацией, что само по себе является сущностью происходящих революционных изменений.

Признавая право конкретных практиков – разработчиков больших информационных систем на подобные заявления, мы, вместе с тем, будем исходить из необходимости делать предварительные выводы для каждого конкретного объекта, проводить для каждой внедряемой системы на начальном этапе подробный анализ затрат и выгод от ее внедрения, и, по возможности, давать количественные сопоставления (таблица 4.1). При этом основными свойствами системы можно считать: полноту, функциональность, гибкость, производительность, надежность, ресурсоемкость.

Анализ такого рода существенно упрощается при одновременном достаточно высоком уровне верификации результатов в случае широкого использования нормативной базы предприятия. В доперестроечной России система нормирования охватывала практически весь спектр экономических, финансовых и производственных показателей на всех уровнях. От внутризаводского (внутрифирменного) до уровня государственных программ.

Таблица 4.1. Принципиальная схема анализа затрат и выгод от внедрения ИС на начальном этапе.

Первоначальные затраты. Оборудование Системное ПО Прикладное ПО Затраты на повышение квалификации.	Первичные выгоды. Информированность руководства. Снижение трудозатрат на учет. Уменьшение потерь от погрешности учета. Повышение точности и оперативности текущих управленческих процедур.
Текущие затраты. Рабочее время по вводу данных. Текущее сопровождение аппаратных средств. Текущее сопровождение программных средств. Текущее сопровождение.	Вторичные выгоды. Повышение управляемости. Повышение выживаемости на рынке, конкурентоспособности. Снижение издержек от ошибок управления. Улучшение взаимодействия с партнерами.

На предприятиях существовали, развивались, обновлялись и пополнялись огромные массивы формируемых расчетным путем, и по аналогии, норм и нормативов по трудоемкости работ, по запасам, затратам ресурсов (нормы расхода сырья и материалов, электроэнергии, энергоносителей и пр.) по видам

деятельности. Этим во многом объяснялась приемлемость и дееспособность названных выше методик оценки эффективности АСУ

Потребность в восстановлении значительной части прежней нормативной базы и в формировании баз данных с современными нормативами, в том числе с нормативами по внедрению и использованию ИС, сегодня ощущают большинство руководителей не только производственных, но и иных предприятий. При принятии решения о приобретении и использовании информационной системы, база нормативов по элементам систем – аналогов могла бы существенно облегчить положение руководителей этих предприятий. При этом возрастает роль нормативного прогнозирования в управлении, достоверность которого с использованием ИТ существенно увеличивается или, по крайней мере, сопровождается достаточно обоснованными оценками.

В противоположность тем, кто заявляет об отсутствии необходимости вообще заниматься определением экономической эффективности вложений в ИТ, распространение получили еще две «экстремальные» точки зрения. Выразители одной из них, как правило, представители консалтинговых подразделений фирм-разработчиков обещают заказчикам уже в ходе предпроектного обследования просчитать эффективность предлагаемых к внедрению систем, заранее обозначая этот эффект, как положительный []. После детального изучения этого вопроса заказчики, по мнению автора, должны увидеть здесь элементы маркетинга или безответственной рекламы.

Вместе с тем, абстрагируясь от конъюнктурных соображений, предпроектное обследование представляется необходимым для всех типов предприятий и задач по внедрению ИТ. На крупных предприятиях также представляется целесообразным проводить пилотное проектирование для демонстрации основных возможностей внедряемой системы и выявления возможных сложностей внедрения. Такой подход хорошо зарекомендовал себя на ряде крупных отечественных предприятий (например, НПО им. Хруничева).

В рамках предпроектного обследования могут, в принципе, получить развитие инфологические модели, позволяющие обеспечить вполне адекватное, доступное по ясности и последовательности изложения, описание объекта. Понятие инфологической модели, введенное в теории баз данных, начинает распространяться на информационные системы.

Другая позиция, которой придерживается ряд теоретиков-разработчиков: еще немного средств и, опираясь на лавинообразный рост возможностей технического и программного обеспечения, будут, наконец, реализованы супермодели, достаточно адекватные реальным объектам исследования, в том числе, большим организационно-экономическим системам, аналогам большинства современных предприятий. Схема таких построений обычно единообразна: задается принадлежность состояния системы некоторому заданному множеству возможных состояний при всех возможных (описываемых) изменениях окружающей среды.

Изменения обычно носят стохастический характер, следовательно, возникает задача максимизации вероятности выживания объекта моделирования. Содержательный анализ системы, в принципе, позволяет с требуемой степенью адекватности выделить существенные факторы, определяющие выживание, и по ним построить векторную задачу оптимизации.

При оценке эффективности ИС сегодня, ввиду отсутствия надлежащего методического обеспечения и соответствующей нормативной базы, нет возможности говорить об интегральном эффекте, то есть эффекте как суммы эффектов различных подсистем, эффекте свертывания (по аналогии со свертыванием критериев). Можно говорить только о синергическом эффекте, эффекте функционирования системы как единого целого. Но он, хотя и способен в ряде случаев увязывать, рассматривавшиеся ранее прямые и косвенные эффекты [][], по определению, не поддается формальным оценкам, поскольку консолидирует множество различных невзаимосвязанных, зачастую и противоречивых эффектов (технических, технологических, социальных, временных и др.).

Формирование адекватных динамических моделей, использующих интегрированные критерии, позволяющих, в принципе, не только количественно оценивать эффективность, но и связывать вместе все основные временные параметры жизненного цикла рассматриваемых систем, что давало бы возможность выбирать оптимальные, с точки зрения оценки функционирования всей системы, в целом, параметры жизненных циклов составляющих элементов, в частности, время их развития и деградации, сегодня не представляется осуществимым, как в методическом, так и в техническом плане.

Для решения задачи оценки эффективности инвестиций в такой строгой постановке в перспективе понадобятся экспертные системы на основе мощной базы данных интерфейсов с высокой производительностью, использующих статистику наработок по аналогичным системам, нормативную базу рассматриваемых предприятий и альтернативы по элементам дерева целей, формируемым на основе системного анализа этих предприятий.

Вместе с тем продолжаются попытки формализации объектов инвестирования поэтапно, помодульно, по группам, подразделениям, по функциональному разделению. Инвестиционная привлекательность ИТ в этих случаях оценивается по сопоставлению расчетного дисконтированного и нормативного (условно-нормативного, заданного) сроков окупаемости, с выделением точки финансового равновесия. При этом может использоваться гибкая системная методология "Организационного развития" для получения достаточно обоснованных и согласованных схем процесса организационного развития. Но проблема субоптимизации остается нерешенной.

Альтернативой здесь представляется применение теории сложности к оценке инвестиций в ИТ по аналогии с инвестициями в интеллектуальную собственность на предприятиях, относящихся к разряду больших организационно-экономических систем. Внедрение любых информационных технологий и их элементов приводит к росту сложности, как самого предприятия, так и его продукции. Предлагаемые методы основаны на получении оценок изменения единицы сложности и стоимости единицы сложности в рассматриваемых областях ИТ с соответствующим расчетом функций влияния изменений. Для оценки стоимости единицы сложности возможно применение любых сопоставимых оценок для аналогов и прототипов. Стоимость при этом рассматривается, как результат торга продавца и покупателя, определяется на основе доступной информации, а также спецификой покупателя [].

Это положение обуславливает необходимость построения логической цепи рассуждений и на ее основе модели расчета стоимости, связывающей технические решения с параметрами, для которых известны рыночные стоимостные эквиваленты. При этом субъективизм полученных оценок будет определяться субъективизмом значений рыночных стоимостей подобных решений.

В перспективе могут оказаться приемлемыми подходы с использованием теории чувствительности, нетрадиционного факторного анализа с применением ограниченной статистики, и других средств анализа больших организационно-экономических и технических систем.

Во многих случаях, к решению обозначенной проблемы можно также подходить с позиций оценки эффективности разных институциональных устройств взаимодействия между экономическими агентами. Вопрос количественной оценки эффективности ИТ, напрямую связан с измерением общественно необходимого уровня трансакционных издержек. Минимизация этих издержек – обязательная цель любого предприятия.

Развитая ИС способствует проявлению независимости от услуг посредников с оппортунистическим поведением, которые нередко достаточно изощренно искусственно формируют завышенный объем своих услуг на рынке, монополизируя или навязывая отдельные виды услуг, стремясь к управлению взаимодействием контрагентов. На рынке, где от имени агентов выступают элементы информационных систем, происходит обязательное перераспределение трансакцонных издержек, выгод и рисков контрактации между агентами. Выгоды и риски становятся «прозрачнее», что влияет на скорость принятия решений.

Перераспределение трансакционных издержек, в свою очередь, создает новые возможности контрактации, появляются новые трансакционные и трансформационные возможности, новые предприятия, новые производства, меняются институциональные условия взаимодействия, меняются относительные цены, существенно снижается проблема асимметрии информации между контрагентами – субъектами рынка [][].

Имеющие место сегодня десятки методов, методик, принципов и подходов к задачам оценки эффективности инвестиций в информационные технологии и, прежде всего, в информационные системы, выросли из практических решений этих задач, уровень их разработки, обоснованности и адекватности отражает, в целом, уровень знаний в данной области. Ниже рассматриваются наиболее отработанные и популярные, апробированные зарубежными и отечественными фирмами методы и методики оценки эффективности ИТ. По нашему мнению не должна иметь место идеализация рассматриваемых методов, но положительные моменты, рациональные подходы и решения, вместе с тем, присутствуют в каждом из них. В условиях имеющегося «методического голода» в данной области даже детальное рассмотрение и сопоставимый анализ приводимых методов представляется конструктивным.