ТПР. Практика2 (1). Практична робота 2метод експертних оцінок

• Название: Практична робота 2метод експертних оцінок
• Дата: 11.03.2023
• Размер: 2.21 Mb.
• Имя файла: Практика2 (1).pdf
• Тип: Документы; #981128

ПРАКТИЧНА РОБОТА № 2
МЕТОД ЕКСПЕРТНИХ ОЦІНОК
Мета:
1. Організація експертного оцінювання методом Делфі.
2. Оволодіння методикою застосування експертних оцінок для ранжування факторів, які впливають на ефективність системи.
3. Використання структурних і функціональних можливостей MS Excel для реалізації відповідних методів
Порядок виконання роботи
1. Опрацювати необхідний теоретичний матеріал.
2. Розробити анкети для експертного опитування з відповідної проблемної ситуації.
За експертами залишається право доповнити список можливих напрямків.
3. Включити в експертне опитування процедуру визначення коефіцієнта компетентності методом самооцінки.
4. Сформувати групу експертів та провести експертне оцінювання методом Делфі.
5. Результати експертного оцінювання звести в таблицю. За результатами експертного оцінювання вияснити:
- узагальнену оцінку важливості кожного чинника без та з урахуванням коефіцієнта компетентності експерта;
- проранжувати всі чинники за ступенем їх важливості;
- визначити відносні коефіцієнти значимості чинників.
Навчальний матеріал
Основні етапи методу Дельфи такі:
1) уточнення проблем або об'єктів для експертизи;
2) формування групи експертів;
3) розробка анкети для опитування експертів;
4) індивідуальне анкетне опитування експертів;
5) математичне опрацювання результатів опитування;
6) уточнення експертами своїх оцінок.
Для формування стійкої узагальненої оцінки, етапи 4, 5, 6 можуть проводитися 3-4 рази.

Конкретний склад і чисельність групи експертів визначається характером аналізованих проблем, можливістю притягнення до експертизи компетентних спеціалістів.
Ступінь компетентності експертів можна визначити за формулою:
2
a
з
k
K
K
K


,
(4.1) де К
з
– коефіцієнт ступеня знайомства експерта з проблемою; К
з
 1;
К
а
– коефіцієнт аргументованості рішень експерта, К
а
 1.
Коефіцієнт ступеня знайомства К
з визначається самооцінкою експерта за десятибальною шкалою і множенням оцінки на 0,1.
Може бути використана шкала оцінок ступеня знайомства експерта з проблемою, представлена табл.4.1:
Таблиця 4.1
0 балів
- експерт не знайомий із проблемою;
1 - 3 бали
- погано знайомий, але проблема входить до кола інтересів
4 - 6 балів
- задовільно знайомий, але практично не займається;
7 - 9 балів
- добре знайомий і займається практично;
10 балів
- вузький фахівець із проблеми.
Для одержання значення К
а може бути використана шкала аргументованості, приведена в табл.4.2.
Експерт відмічає відповідну графу по кожному виді джерел, а потім числа з відзначених граф підсумовуються.
Таблиця 4.2
Джерело аргументів
Ступінь впливу аргументів високий середній низький
Теоретичний аналіз
0,3 0,2 0,1
Досвід
0,5 0,4 0,2
Література
0,1 0,08 0,04
Інтуїція
0,05 0,04 0,02
При упорядкуванні анкети необхідно додержуватися таких вимог:
 анкета не повинна містити багато питань; відповіді на питання не повинні займати багато часу;
 відповіді повинні даватися суворо в заданій шкалі оцінок;
 анкета, як правило, повинна бути анонімною.
Доцільно застосовувати 10 або 100 – бальні шкали оцінок із невеличким числом градацій, кожна градація повинна бути однозначно описана.
Всі оцінки, отримані в ході опитування групи експертів, зводяться в матрицю:
mn
m
m
n
n
C
C
C
C
C
C
C
C
C
C







2 1
2 22 21 1
12 11

При цьому деякі з оцінок можуть бути відсутніми, якщо експерт утримався від оцінки якогось чинника.
Узагальнена оцінка важливості чинника обчислюється за формулою:

j
m
j
ij
j
m
c
M



1
, j = 1, n,
(4.2) де M
j
– узагальнена оцінка важливості j-го чинника; m
j
– кількість експертів, що оцінили j-ий чинник, (mj  m); с
ij
– оцінка в балах, дана i-м експертом j-му чиннику .
З урахуванням коефіцієнта компетентності:
j
m
j
ij
k
j
m
c
K
M



1
(4.3)
Після того, як усі узагальнені оцінки важливості кожного чинника обраховані можна їх проранжувати. Очевидно, що чим важливіший чинник, тим більше його узагальнена оцінка і тим менший ранг йому відводиться у загальному ранжуванні.
Приклад виконання роботи
Робота умовно поділяється на декілька етапів.
1. Розробка анкети для опитування експертів.
Можливий варіант анкети приведений нижче.
Шановний експерт __________________(П.І.П)!
Просимо Вас оцінити ступінь важливості (пріоритетності ) таких напрямків дослідження ... далі відповідно до завдання
№ з/п
Назва напрямку дослідження
Оцінка у балах
1
(перелік можливих напрямків)
2 3
Оцінку кожному із запропонованих напрямків просимо виставити по такій 10- бальній шкалі:
0
Напрямок не впливає на дослідження кон'юнктури ринку
1–2
Напрямок робить слабкий вплив, його варто врахувати в майбутньому
3–5
Напрямок впливає, але важко реалізовано
6–7
Напрямок має істотний вплив
8–10
Напрямок є важливим і актуальним, реалізується в першу чергу
2. Формування групи експертів та оцінка їх компетентності
В умовах виконання даної лабораторної роботи в якості експертів виступають студенти, що об'єднуються по 3-5 чоловіка в одну групу. Таким чином, подальше виконання роботи здійснюється окремо кожною групою студентів.
Кожний експерт, користуючись шкалою оцінки ступеня знайомства і таблицею оцінок аргументованості думок, приведених у методичних вказівках, визначає коефіцієнт

компетентності. Припустимо, що експерт вважає, що він задовільно знайомий із проблемою, але практично нею не займається, тоді його коефіцієнт ступеня знайомства дорівнює:
К
з
= 4 × 0,1 = 0,4.
Якщо при цьому він вважає, що для нього характерний високий ступінь впливу
інтуїції і матеріалів із літератури, а такі джерела аргументів як теоретичний аналіз і досвід вплинуть на його думку незначно, то його коефіцієнт аргументованості дорівнює:
К
а
= 0,3 + 0,5 + 0,1 + 0,04 = 0,94.
Тоді значення К
к для цього експерта за (4.1) буде дорівнювати:
К
к
= (0,4 + 0,94)/2 = 0,67.
У табл.4.3 представлено результати оцінки компетентності експертів:
Таблиця 4.3
Джерела аргументiв
№
експерта
ступінь
знайомства
теор. аналіз
Досвід
Література
Інтуіція
К
к
1 0,4 0,3 0,5 0,1 0,04 0,67 2
0,6 0,3 0,4 0,08 0,02 0,7 3
0,7 0,1 0,2 0,04 0,05 0,545 4
0,1 0,2 0,4 0,08 0,02 0,4
3. Математичне опрацювання результатів опитування
Всі оцінки, отримані в ході опитування групи експертів зводяться у відповідну таблицю. В табл.4.4 наведено оцінки чотирьох експертів, дані ними у процесі оцінювання часткових критеріїв за ступенем значимості. Кількість критеріїв n = 6.
Таблиця 4.4
Вихідні експертні дані
Експерти
Часткові критерії
f
1
f
2
f
3
f
4
f
5
f
6
1 8
10 9
8 5
6 2
10 10 10 9
10 6
3 1
4 2
7 3
2 4
4 8
6 3
2 4
Для кожного критерія за (4.3) обрахуємо узагальнену оцінку його важливості з урахуванням компетентності експертів, наприклад для f
1
:
08
,
4 4
4 4
,
0 1
545
,
0 10 7
,
0 8
67
,
0 4
4 1
1












j
ij
k
c
K
M
Потім проранжуємо: чим вища узагальнена оцінка важливості критерія, тим нижче його ранг. На перше місце ставимо критерій з найвищою оцінкою, на друге – з меншою, на останнє – із найменшою оцінкою.
Наостанок, для визначення відносних коефіцієнтів значимості часткових критеріїв, можна використати просту функцію ранжирування:











)
1
(
)
1
(
2
n
n
i
R
n
i

,
n
i
,
1

,
00
,
1


i
i

, де n – кількість рангів ; R
i
– ранг і-го критерія.
У табл.4.5 представлено результати обчислень:
Таблиця 4.5
Експерти
Часткові критерії
f
1
f
2
f
3
f
4
f
5
f
6
1 8
10 9
8 5
6 2
10 10 10 9
10 6
3 1
4 2
7 3
2 4
4 8
6 3
2 4
М
i
4,07625 5,67 4,805 4,50625 3,42125 3,1775
R
i
4 1
2 3
5 6
λ
0,142857143 0,285714286 0,238095238 0,19047619 0,095238095 0,047619048
Таким чином, результуюче ранжування часткових критеріїв виглядає як f
2
>f
3
>f
4
>f
1
>f
5
>f
6
Варіанти завдань для виконання
Варіант 1.
За допомогою експертного аналізу визначити пріоритетні напрямки удосконалення вищої освіти в країні.
Уточнення проблем або об'єктів експертизи.
Можна запропонувати такі напрямки удосконалення вищої освіти:
1. Поліпшення матеріального забезпечення ВНЗ.
2. Зниження оплати за навчання.
3. Підвищення вимог до абітурієнтів і до оцінки знань студентів.
4. Об'єднання навчання у ВНЗ з роботою на виробництві за фахом.
5. Підвищення заробітної плати викладачам ВНЗ.
6. Підвищення вимог до атестації професорсько-викладацького складу.
7. Притягнення виробничників до читання лекцій і керівництва курсовими і дипломними проектами.
Варіант 2.
За допомогою експертного аналізу визначити пріоритетні напрямки дослідження кон'юнктури ринку продукції А.
Уточнення проблем або об'єктів експертизи.
Можна запропонувати такі напрямки дослідження кон'юнктури ринку продукції:
1. Динаміка виробництва даної продукції і її аналогів усередині країни і за кордоном.
2. Вплив науково-технічного прогресу на споживчі властивості і конструкторсько- технологічні параметри продукції.
3. Динаміка навантаження виробничих потужностей і наявність їх резерву на даному підприємстві й інших підприємствах усередині країни і за кордоном.

4. Динаміка поточних витрат виробництва і потреб у капітальних вкладеннях.
5. Динаміка споживання (попиту) продукції і причини її зміни усередині країни і за кордоном.
6. Динаміка поточних витрат і супутніх капітальних вкладень у споживачів продукції, пов'язаних із споживанням цієї продукції.
7. Тенденції науково-технічного прогресу в галузях – споживачах продукції і вплив їх на споживання (попит).
Варіант 3.
За допомогою експертного аналізу визначити пріоритетні напрямки визначення експертного потенціалу.
Уточнення проблем або об'єктів експертизи.
Можна запропонувати такі основні показники експертного потенціалу:
1. високий рівень інтелекту;
2. великий досвід роботи;
3. визнання колег;
4. активна наукова діяльність;
5. наявність серйозних публікацій;
6. престижна освіта;
7. високий особистий статус.
Варіант 4.
За допомогою експертного аналізу визначити пріоритетні напрямки підвищення рівня відповідальності державних органів та прозорості
Уточнення проблем або об'єктів експертизи.
Можна запропонувати такі основні низки заходів для підвищення рівня відповідальності державних органів та прозорості
:
1. проведення громадських експертиз діяльності органів виконавчої влади;
2. подання запитів на публічну інформацію до органів державної влади з метою отримання суспільно важливої інформації;
3. оскарження незаконних відмов у доступі до інформації до компетентних органів державної влади та до суду;
4. створення «гарячої лінії» для громадських організацій та представників ЗМІ;
5. моніторинг прозорості діяльності органів державної влади;
6. лобіювання та підтримка прогресивних змін і доповнень до чинних нормативно- правових актів;
7. популяризація демократичних стандартів у сфері доступу до інформації через проведення освітніх заходів та публікації у ЗМІ.
Варіант 5.
За допомогою експертного аналізу визначити пріоритетні напрямки використання
ІКТ студентами.
Уточнення проблем або об'єктів експертизи.
Можна запропонувати пріоритетні напрямки використання ІКТ студентами:
1. для презентації матеріалів, тем на заняттях;
2. для розвитку навичок мислення високого рівня;

3. для пошуку інформації, щоб підготувати завдання;
4. для самостійних навчальних досліджень;
5. для спілкування та розваг;
6. для проведення дозвілля, показу фільмів, перегляду фото тощо.
Варіант 6.
За допомогою експертного аналізу визначити пріоритетні напрямки вдосконалення радіоаматорської сфери діяльності.
Уточнення проблем або об'єктів експертизи.
1. комп’ютеризація радіо передаючої апаратури;
2. заміщення аналогових видів діяльності цифровими;
3. нових стандартів та розширення діапазону радіоаматорських частот;
4. співпраця зі службами спасіння та пошуку людей, зокрема службою «112»;
5. залучення радіоаматорів до участі у глобальних проектах, наприклад, «Вивчення
Місяця»;
6. популяризація радіоаматорства серед молоді шляхом організації радіоаматорських кружків на базі шкіл.
Варіант 7.
За допомогою експертного аналізу визначити пріоритетні напрямки оцінювання фахових якостей претендентів на роботу в офісі.
Уточнення проблем або об'єктів експертизи.
Можна запропонувати пріоритетні напрямки оцінки претендентів:
1. вищий учбовий заклад, який закінчив претендент;
2. володіння комп’ютером;
3. володіння іноземною мовою;
4. водіння автомобілем;
5. стаж роботи;
6. віковий ценз.
Варіант 8.
За допомогою експертного аналізу визначити пріоритетні напрямки для вибору побутової техніки пересічними споживачами .
Уточнення проблем або об'єктів експертизи.
Можна запропонувати пріоритетні напрямки вибору техніки:
1. ціна;
2. гнучкість розрахунку;
3. простота експлуатації;
4. дизайн;
5. відмовостійкість;
6. країна-виробник
Варіант 9.
За допомогою експертного аналізу визначити пріоритетні напрямки діяльності дитячих громадських організацій.
Уточнення проблем або об'єктів експертизи.

Можна запропонувати пріоритетні напрямки діяльності дитячих громадських організацій:
1. соціально-правовий захист дітей;
2. самоврядування, формування лідерських навичок;
3. надання додаткових знань;
4. проведення благодійних акцій;
5. соціальна робота;
6. патріотичне виховання.
Варіант 10.
За допомогою експертного аналізу визначити пріоритетні критерії вибору замовника для розробки інформаційної системи.
Уточнення проблем або об'єктів експертизи.
Можна запропонувати пріоритетні критерії вибору замовника для розробки
інформаційної системи:
1. пропозиції замовника щодо вартості роботи;
2. репутація замовника;
3. терміни виконання;
4. країна виконавця;
5. можливості фірми щодо виконання роботи.
Варіант 11.
За допомогою експертного аналізу визначити пріоритетні напрямки оптимізації роботи колл-центру.
Уточнення проблем або об'єктів експертизи.
Можна запропонувати такі напрямки оптимізації роботи колл-центру:
1. Оновлення архітектури програмного та апаратного забезпечення.
2. Навчання персоналу на спеціальних тренінгах.
3. Використання автоматичної системи інтерактивної взаємодії (IVR) для економії часу.
4. Переведення операторів на надомну працю.
5. Ведення статистики та бізнес-аналізу.
6. Маршрутизація викликів за їх специфікою.
7. Система заохочень та штрафів для персоналу
Варіант 12.
За допомогою експертного аналізу визначити пріоритетні за фінансуванням держави напрямки розвитку науки і техніки.
Уточнення проблем або об'єктів експертизи.
Можна запропонувати такі основні напрямки розвитку науки і техніки:
1. Фундаментальні наукові дослідження.
2. Інформаційні та комунікаційні технології.
3. Енергетика та енергоефективність.
4. Раціональне природокористування.
5. Науки про життя, нові технології профілактики та лікування найпоширеніших захворювань.

6. Нові речовини і матеріали.
Варіант 13.
За допомогою експертного аналізу визначити пріоритетні напрямки оптимізації соціального захисту громадян.
Уточнення проблем або об'єктів експертизи.
Можна запропонувати такі напрямки оптимізації соціального захисту громадян:
1. Узгодження соціальної політики з політикою зайнятості, фінансово-економічною та фіскальною політикою.
2. Перегляд наявних пільг і соціальних виплат з метою посилення їх адресності й обґрунтованості.
3. Розширення інфраструктури надання соціальних послуг за місцем проживання.
4. Залучення громадськості до обговорення та участі у визначення державних соціальних стандартів.
5. Приведення державних соціальних стандартів у відповідність із міжнародно- правовими актами .
6. Координація та моніторинг надання тих соціальних послуг, які найбільше відповідають потребам населення конкретної території.
Варіант 14.
За допомогою експертного аналізу визначити пріоритетні напрямки оптимізації бізнес-процесів.
Уточнення проблем або об'єктів експертизи.
Можна запропонувати такі основні напрямки оптимізації бізнес-процесів:
1. Скорочення витрат, тривалості та кількості помилок у кожному з проаналізованих процесів.
2. Інтегрування працівників та керівників підприємства зі стратегією компанії та ключовими показниками її ефективності.
3. Ефективне впровадження інформаційних технологій.
4. Поліпшення взаємодії між працівниками та підрозділами підприємства.
5. Зростанні інвестиційної привабливості підприємства
6. Ефективний організаційний редизайн.
Варіант 15.
За допомогою експертного аналізу визначити пріоритетні напрямки вдосконалення
інформаційного бізнесу
Уточнення проблем або об'єктів експертизи.
Можна запропонувати такі основні напрямки вдосконалення інформаційного бізнесу
:
1. Удосконалення механізму правового захисту програмних продуктів як об’єкта
інтелектуальної власності.
2. Удосконалення договірних відносин за розроблення та продажу програмних продуктів, наданні інформаційно-обчислювальних послуг.
3. Запобігання розробленню і поширенню програмних зловживань (вірусні програми).
4. Розроблення механізму електронного документообігу та електронної звітності тощо.

5. Формування інформаційної інфраструктури об’єктів різних рівнів і статусу.
6. Розробка методичних основ оцінювання конкурентоспроможності апаратних і програмних засобів.
7. Формування системи інформаційного маркетингу тощо.
Варіант 16.
За допомогою експертного аналізу визначити суттєві прояви групових ефектів під час спільної колективної діяльності колег.
Уточнення проблем або об'єктів експертизи.
Можна запропонувати такі прояви групових ефектів під час спільної колективної діяльності:
1. Ефект групового мислення.
2. Ефект конформізму, коли коли фіксується наявність конфлікту між думкою
індивіда і думкою групи і подолання цього конфлікту на користь групи.
3. Ефект групового егоїзму, коли цілі групи досягаються за рахунок інтересів усієї спільноти та окремих особистостей групи.
4. Ефект маятника, коли позитивні (негативні) події підвищують (знижують) загальний рівень групової продуктивності.
5. Ефект пульсара: підвищення групової активності під впливом різних стимулів, або ж зниження групової активності за відсутності таких.
6. Ефект хвилі: поширення позитивних ідей, цілей тощо, які не суперечать інтересам групи.
7. Ефект «ми» і «вони»: співучасність, емоційна підтримка членів групи, груповий егоїзм.
Варіант 17.
За допомогою експертного аналізу визначити пріоритетні напрямки удосконалення педагогічного процесу у вищій школі.
Уточнення проблем або об'єктів експертизи.
Можна запропонувати такі основні напрямки удосконалення педагогічного процесу у вищій школі:
1. Інтеграція науки, освіти і практики.
2. Підвищення науково-теоретичного рівня і зміцнення практичної спрямованості.
3. Вдосконалення підготовки викладачів ВНЗ та їх педагогічної майстерності.
4. Використання сучасних концепцій і методів навчання.
5. Технічне переобладнання педагогічного процесу.
6. Гуманізація та демократизація педагогічного процесу.
Варіант 18.
За допомогою експертного аналізу визначити пріоритетні напрямки інформаційної безпеки корпоративних інформаційних систем.
Уточнення проблем або об'єктів експертизи.
Можна запропонувати такі основні напрямки удосконалення інформаційної безпеки корпоративних інформаційних систем:
1. Контроль використання зйомних носіїв і запуск додатків.

2. Забезпечення безпеки міжмережевої взаємодії.
3. Криптографічний захист інформації.
4. Управління подіями безпеки.
5. Контроль використання Інтернет-ресурсів і фільтрація веб-трафіку.
6. Захист від поштового спаму.
7. Управління доступом до інформаційних ресурсів корпоративних інформаційних систем.
Варіант 19.
За допомогою експертного аналізу визначити пріоритетні напрямки інноваційної діяльності.
Уточнення проблем або об'єктів експертизи.
Можна запропонувати такі стратегічні напрямки інноваційної діяльності:
1. Модернізація електростанцій; нові та відновлювальні джерела енергії; новітні ресурсозберігаючі технології.
2. Нанотехнології, мікроелектроніка, інформаційні технології, телекомунікації.
3. Вдосконалення хімічних технологій, розвиток біотехнологій; нові маетріали.
4. Високотехнологічний розвиток сільського господарства
і переробної промисловості.
5. Транспортні системи: будівництво і реконструкція.
6. Охорона і оздоровлення людини та навколишнього середовища.
7. Розвиток інноваційної культури суспільства.
Варіант 20.
За допомогою експертного аналізу визначити пріоритетні за фінансуванням держави напрямки розвитку науки і техніки.
Уточнення проблем або об'єктів експертизи.
Можна запропонувати такі основні напрямки розвитку науки і техніки:
1. Фундаментальні наукові дослідження.
2. Формування демографічної політики, розвиток людського потенціалу.
3. Інформаційні та комунікаційні технології.
4. Новітні ресурсозберігаючі технології в енергетиці, промисловості та агропромисловому комплексі.
5. Раціональне природокористування.
6. Нові біотехнології, діагностика і методи лікування найпоширеніших захворювань.
7. Нові речовини і матеріали.
Контрольні запитання
1. У чому полягає метод експертних оцінок Делфі?
2. Яким чином можна перевірити значимість інформації, отриманої від експертів?
3. Як розраховується сумарний (результуючий ) ранг?
4. Як визначається вага факторів (цілей), визначених експертами?