УЗАГАЛЬНЕНА МАТРИЦЯ МЕТОДІВ/СИТУАЦІЙ, ПОВ'ЯЗАНИХ З ПРИЙНЯТТЯМ РІШЕНЬ

7.2. Методи оцінювання програмного забезпечення СППР

Запорукою успіху в придбанні будь-якого апаратного чи програмного забезпечення є використання однозначної і сис­тематичної стратегії. Критерії і припущення, покладені в її осно­ву, мають бути якомога чіткішими і деталізованішими, а процедура проведення фактичного оцінювання за можливості система-

тизованою, прямою і (де це потрібно) повторюваною. Ця умова, передусім, стосується підтримки прийняття рішень у разі оціню­вання програмного забезпечення СППР, незалежно від того, чи це куплене ПЗ чи власна розробка задачі, яка має важливе зна­чення і характеризується високою складністю.

Оцінювання програмного забезпечення має проводитися сто­совно трьох ключових аспектів СППР — задач, користувачів і середовища на етапах її проектування, макетування та експлуа­тації. Важливим наслідком цього процесу може стати отримання необхідної інформації для колективів розроблювачів, кінцевих користувачів і ОПР, яка буде використовуватися в межах відве­деного для проектування СППР часу з метою проведення потріб­них коректив щодо проектованої системи.

Для оцінювання системи і засобів підтримки прийняття рі­шень використовуються різні аналітичні й емпіричні методики. В їх основу покладено три методи:

1) техніко-економічний аналіз (метод витрат / вигід);

2) метод визначення цінності (вартості) інформації, оснований на концепціях і допущеннях, прийнятих в інформаційній еконо­міці;

3) моделі багатоатрибутної корисності.

4) Нижче подані детальні описи цих концепцій і аналіз ре­зультатів їх використання.

7.2.1. Техніко-економічний аналіз

Техніко-економічний аналіз, тобто одночасний аналіз вартості й ефективності, передбачає упорядкування, вимірювання і подальше порівняння витрат і вигід (прибутків, користі), які отримує користувач комп'ютерної системи чи готового проекту програмного забезпечення. Всі витрати і вигоди потрібно вирази­ти в грошовому еквіваленті й на підставі цифр балансового звіту прийняти відповідне рішення.

Найбільші складності виникають за розрахунку кількісної оцінки ефективності від упровадження програмного продукту. В такому разі необхідно провести детальний аналіз фактичної користі від упроваджуваної системи і визначити чинники, які ха­рактеризують різні напрями отримання вигоди.

Можна виділити шість напрямів отримання вигоди:

— від розв'язання обчислювальних задач і друку;

— від реєстраційних завдань;

— від завдань пошуку записів;

— від можливості переструктурування системи;

— від можливості аналізу і моделювання;

— від можливості керування процесами і ресурсами. Потенційними факторами отримання можливої користі є:

• зниження або запобігання витрат (ЗЗВ);

• зменшення кількості помилок (ЗКП);

• збільшення гнучкості системи (ЗГС);

• підвищення швидкості операцій (ПШО);

• удосконалення управління і контролю технологічними про­цесами (УУК).

У табл. 7.7 наведено зіставлення компонентів напрямів от­римання вигід і факторів (знак «+» означає дію відповідного фактора).

Таблиця 7.7

АНАЛІЗ ВИГІД

Закінчення табл. 7.7

Каталог можливих витрат на створення інформаційної систе­ми, або її підсистем включає такі види витрат:

1. Вартість придбання: оплата консультацій; фактичні затра­ти на придбання або орендування обладнання; вартість установ­лення обладнання; витрати на підготовку місця під обладнання (кондиціонування повітря, засоби безпеки та ін.); капітальні ви­трати; управлінські витрати на персонал, зайнятий придбанням обладнання.

2. Початкові витрати: затрати на придбання операційної сис­теми (її програмного забезпечення); затрати на встановлення ко­мунікаційного обладнання (телефонних ліній, ліній даних та ін.); оплата праці персоналу, зайнятого пусконалагоджувальними ро­ботами; витрати на діяльність, пов'язану з пошуком і найманням персоналу; витрати, зумовлені перешкодами в роботі решти ор­ганізацій; оплата за керування пусконалагоджувальними робо­тами.

3. Витрати на проектування: вартість закупленого приклад­ного програмного забезпечення; витрати на модифікацію про­грамного забезпечення відповідно до специфіки локальних сис­тем; заробітна плата персоналу; накладні та інші витрати, пов'я­зані з розробленням програмного застосування власними силами; затрати на забезпечення взаємодії з користувачами під час розроб­лення системи; затрати на навчання користувачів системи; за­трати на збір даних і на введення у дію процедур збору даних; вартість підготовки документації; оплата праці керівництва.

4. Поточні витрати: затрати на обслуговування системи (апа­ратних та програмних засобів, допоміжного обладнання); оренд­на плата, оплата за використану електроенергію, послуги теле­фонного зв'язку, заробітна плата персоналу, який залучається до діяльності, пов'язаної з керуванням, експлуатацією і плануван­ням роботи інформаційної системи.

Проводячи техніко-економічний аналіз, важливо також виді­лити ті характеристики інформаційних систем, які впливають на затрати і вигоди, отримувані від функціонування системи.

До таких факторів належать: точність розрахунків; часова харак­теристика — тривалість очікування реакції (відповіді); захист інфор­мації (забезпечення безпеки і секретності); надійність (мінімізація невиробничих затрат часу, простою обладнання); гнучкість.

Крім того, в процесі переходу від звичайних інформаційних систем до досконаліших або систем підтримки рішень з'явля­ється новий критерій — ефективність рішень, яка визначається вкладом вихідних даних інформаційної системи в підвищення продуктивності праці і (або) якості висновків аналітика чи рі­шень керівника (або групи користувачів).

Техніко-економічний аналіз для оцінювання СППР застосову­вався багаторазово для їх оцінювання як на стадії їх створення, так і в процесі експлуатації. Але, як показав досвід розроблення СППР, результати — невтішні. Наприклад, для одного проекту було запропоновано вісім варіантів оцінки затрат на розроблення ПЗ СППР: кількісні показники розрахунків змінювались від 362 000 до 2 766 000 доларів. Цей результат підкреслює той факт, що затрати на розроблення програмного забезпечення важко пе­редбачити. Крім того, визначення вартості готового програмного забезпечення, яке буде ефективно застосовуватися в даній систе­мі, не завжди є тривіальним. Проблематичні також розрахунки в грошовому виразі вигід, які отримують користувачі систем. Інак­ше кажучи, затрати і вигоди можуть бути неправильно або не до­сить точно визначені.

Отже, можна дійти висновку, що техніко-економічний аналіз (як метод) не придатний для оцінювання програмного забезпе­чення підтримки рішень. Програмне забезпечення СППР має від­повідати ряду корисніших і концептуально складніших критеріїв, пов'язаних з вартістю, привнесеною системою до загального ефекту від прийняття рішень. Показники техніко-економічного аналізу були розроблені для простіших інформаційних систем, зокрема адміністративних, де успішно й використовуються.

7.2.2. Метод визначення цінності (вартості) інформації

Ключовою перевагою будь-якої інформаційної систе­ми, включаючи СППР, є цінність інформації, яка надається сис­темою користувачам: елемент інформації зовсім не потрібний користувачу, якщо він не здатний (хоч би потенційно) впливати на рішення.

Рішення, що грунтуються на достовірній або хибній інформа­ції, можуть прийматися в результаті таких обставин:

— необхідна інформація недоступна;

— зусилля на одержання необхідної інформації потребують величезних затрат;

— бракує відомостей про існування корисної інформації;

— інформація є, але вона подана в неприйнятній формі (на­приклад, зашифрована).

Цінність інформації визначається тією мірою, в якій вона ро­бить знання надійнішими, повнішими і точнішими.

Другий метод оцінювання програмного забезпечення СППР потребує визначення ціни (вартості) інформації, одержаної на виході комп'ютерної системи з розв'язання задач. У результаті нейтралізації дії перелічених вище причин СППР дає додаткову або просто таку інформацію, яка безумовно цінна і раціональна, якщо необхідні для цього витрати не дуже високі. Проведення розрахунків фактичних оцінок вартості програмного забезпечен­ня являє собою складне в концептуальному плані завдання. Іс­нують дві альтернативні стратегії визначення ціни програмного забезпечення: використання парадигм з інформаційної економіки і емпірична стратегія.

Інформаційна економіка як формальна і аксіоматична наука може служити теорією, в якій атрибути інформації сформульова­ні чітко і послідовно. У моделі Фелтама щодо цінності інформації потенційний вклад СППР може оцінюватися за кількома різними критеріями: релевантністю (доречністю), своєчасністю та точніс­тю інформації.

Релевантність — це показник, згідно з яким сигнали (тобто продукти СППР, що є реакціями на виникаючі події в процесі її функціонування), виробляються лише в тому разі, коли відповідні затрати менші від ціни поданої інформації. Слід зауважити, що сигнал від СППР може бути недоречним, якщо описувану в ньо­му подію можна досить чітко оцінити в результаті узагальнення одержаних раніше інших сигналів.

Своєчасність — це критерій, який відображає той очевидний факт, що момент надходження інформації може впливати на ви­годи, отримувані від неї за прийняття рішень. Затримка повідом­лення — це інтервал між моментом відбування події і моментом прийняття сигналу. Зменшення цього параметра, як правило, ви­магає змін у СППР, які зумовлюють підвищення витрат. Але ви­годи від зменшення затримки мають перевищувати додаткове зростання затрат. В ідеальному випадку інтервали повідомлень мають відповідати інтервалам рішення.

Точність інформації має важливе значення в процесі прийнят­тя рішення, оскільки помилки при вимірюваннях і обробленні даних призводять до появи розбіжностей між сигналами і відпо­відними їм подіями. Помилки системи зумовлюють невизначено­сті стосовно минулих подій, що, у свою чергу, створює ще біль­шу невизначеність по відношенню до майбутніх подій. Остання обставина може привести до зниження якості рішень. Усунення або зменшення кількості помилок потребують відповідних змін у СППР.

У літературі з СППР виділяються й інші ознаки цінності інфор­мації: цикл повідомлення (часовий інтервал); достатність (повнота); зрозумілість (простота); неупередженість; надійність; економічна ефективність; порівнянність (подібність форматів, сумісність); квантифікація (можливість зводити якісні ознаки до кількісних).

В інформаційній економіці існують і інші підходи до визна­чення вартості інформації, зокрема, на основі нормативної еко­номічної теорії. Концепцію вартості інформації необхідно побу­дувати так, щоб визначити такі міркування, які змушували б користувачів платити за інформацію. Одна з причин, яка змушує йти на грошові витрати, полягає в прагненні зменшити невизначе­ність за рахунок набуття знань про невідомі раніше факти, а також (що особливо важливо для колективного прийняття рішень) за ра­хунок нагадування про те, що знали, але забули.

Невизначеність можна скоротити, зменшуючи розмах розбіж­ностей оцінок користувачам для однієї або кількох змінних, мож­ливо, шляхом збільшення кількості експериментів або викорис­тання оціночної моделі. Засобом для зменшенням таких інтер­валів за допомогою СППР можуть служити програми формаль­ного моделювання та тести на чутливість (з використанням бази моделей СППР) і (або) вибирання та маніпуляція даними (знан­нями), які містяться в базі даних системи.

Якщо поступаюча інформація має відношення до розв'язу­ваної задачі, тобто є релевантною, то її цінність також підвищу­ється. Крім того, корисність інформації залежить від факту наяв­ності її в той момент, коли вона може вплинути на прийняття рі­шення. Третім виміром вартості інформації є придатність її форми; інформація може бути такою, що знижує невизначеність і є релевантною, але не має цінності через непридатну форму (на­приклад, виражена незнайомою користувачеві мовою).

Альтернатива стратегії інформаційної економіки — емпірична стратегія, що ґрунтується на узагальненні даних спеціальних спо­стережень. Наприклад, було проведено обстеження відношення до інформаційних каналів. До уваги бралися два атрибути інформа­ції — її якість і якість доступу до неї залежно (в контексті) від струк­тури інформаційного попиту і пропозиції та структури попиту і пропозиції каналів. Для ідентифікації розмірності структури розмі­щення інформаційних каналів використовувався факторний аналіз, у результаті чого отримали п'ятифакторний простір.

Перший фактор відображає інформаційну техніку, відповідні йому питання стосуються читабельності, точності, своєчасності, всебічності й компактності інформації, а також технологічніших

аспектів якості доступу. Другий фактор відображає величину по­казників загальної доступності інформації; третій фактор стосу­ється обсягу інформації. Інтерес до інформації (суб'єктивна оцін­ка якості інформації) утворює четвертий фактор. Останній, п'я­тий фактор стосується неоднозначності вимірювання.

Слід зауважити, що емпіричний підхід, який базується на ре­альних даних, поки що не привів до емпірично обґрунтованої ти­пології атрибутів інформації, яка б отримала досить широке ви­знання в літературі. Разом з тим, цінність цієї стратегії полягає в генеруванні точних і прямих вхідних даних від потенційних ко­ристувачів СППР стосовно їх уявлень про інформаційну структу­ру предметної галузі.

7.2.3. Моделі багатоатрибутної корисності

Для оцінювання ефективності конкуруючих СППР (чи проектів СППР) можна використати теорію багатоатрибутної ко­рисності для формалізації атрибутів корисності комп'ютерної си­стеми для користувачів. Найпоширеніша модель багатоатрибут­ної корисності включає чотири основні елементи для аналізу:

систему підтримки прийняття рішень;

користувача;

організацію, яка приймає рішення;

зовнішнє середовище.

Головна ідея визначення оцінки систем полягає в проведенні аналізу зв'язків (інтерфейсів) між цими елементами:

1) користувацький інтерфейс (СППР — користувач);

2) інтерфейс між парою елементів «СППР—користувач» і ор­ганізацією, яка приймає рішення;

3) інтерфейс між організацією, яка приймає рішення, і середо­вищем.

Для цих трьох критеріїв, які підходять для загального оціню­вання системи, можна виділити множину атрибутів ефективності, кожний із яких об'єктивно чи суб'єктивно піддається вимірюван­ню і певною мірою впливає на загальну ефективність (табл. 7.8).

Атрибути ефективності, наведені в табл. 7.8, утворюють єрар-хічну структуру, яка являє собою граф оцінювальної єрархії. Вер­шина (рис. 7.3) графа (дерева) відображає загальну корисність або цінність СППР. Три верхні рівні (три інтерфейси) поділяють­ся на окремі елементи для виділення чітких і кількісно вимірюва­них атрибутів ефективності (рис. 1А —7.6).

У такий спосіб, завдання оцінювання СППР трансформувало­ся в завдання визначення оцінок вузлів нижнього рівня в оціню­вальній єрархії. Зіставляючи відносні значення вузлів (категорій) уверх по ієрархії, можна отримати структурну схему для просте­жування оцінок і аналізу сумарної величини показника, що харак­теризує загальну цінність системи, а також відносних переваг і не­доліків СППР.

Критерії оцінювання якості користувацького інтерфейсу СППР поділяються на дві групи: критерії, за якими оцінюють по­годженість між СППР, кваліфікацією користувачів і операційни­ми потребами; критерії, за котрими оцінюють адекватність харак­теристик СППР (простота в користуванні, тривалість реакції, адекватність файлів даних таблицям).

На дві групи також поділяються критерії визначення якості ін­терфейсу, (користувач — СППР) — організація, що приймає рі­шення. До першої групи, за якою оцінюється ефективність СППР з погляду організації, належать такі характеристики як кількість часу, необхідного для розв'язання задачі за допомогою СППР (СППР не обов'язково прискорює розв'язання задачі в порівнянні з існуючим порядком; вона має підвищувати ефективність рішен­ня); потрібний час для підготовки даних і керування ними, а також надійність і здатність до підтримки за реальних умов та інші показ­ники. За другою групою критеріїв аналізується узгодженість сис­теми і організації, зокрема, зосереджується увага на потенційно­му ефекті СППР стосовно організаційних процедур, роботи ін­ших людей, потоку інформації, а також цінність СППР для роз­в'язання інших завдань.

Нарешті, критерії ефективності для оцінювання якості інтер­фейсу «організація», яка приймає рішення, — зовнішнє середо­вище поділяють на три категорії: спостережувана якість рішень, досягнутих за допомогою СППР; ступінь відповідності технічно­го підходу СППР технічним вимогам задачі; ступінь покращання якості процесу прийняття рішень за рахунок СППР.

Оцінювання критеріїв всіх вищих рівнів здійснюється шляхом визначення середніх значень зважених оцінок показників відпо­відних нижніх рівнів. Як правило, кожному критерію надається однакова вага в єрархії. На рис. 7.3 наведено приклад оцінювання СППР: на основі єрархії оцінювання комп'ютерна система отри­мала оцінку корисності (вузол 0.0) 7,36 балів (із 10 можливих). Інтерфейс СППР—користувач має найвищу серед інтерфейсів оцінку — 7,81. Величина 7,36 є середнім значенням оцінок трьох інтерфейсів: 7,81; 7,17; 7,09.

Поиск по сайту: