Декабрь 2017
 Скачать 0.82 Mb.
|
 AGREE II: РУКОВОДСТВО ПОЛЬЗОВАТЕЛЯ 6 РУКОВОДСТВО ПОЛЬЗОВАТЕЛЯ: ИНСТРУКЦИИ ДЛЯ ИСПОЛЬЗОВАНИЯ AGREE II. Настоящее Руководство пользователя специально разработано для того, чтобы ориентировать оценивающих в использовании инструмента. Мы рекомендуем прочитать следующие инструкции перед использованием инструмента.  I. Подготовка к использованию AGREE II Сопроводительные документы Перед применением AGREE II пользователи должны вначале тщательно полностью ознакомиться с текстом руководства. В дополнение к основному документу пользователи должны попытаться идентифицировать всю информацию о процессе разработки руководства до оценки. Эта информация может содержаться в том же документе, что и рекомендации руководства, или может быть суммирована в отдельном техническом отчете, методическом руководстве или директивном заявлении разработчика. Эти подтверждающие документы могут быть опубликованы или могут быть доступны публично на веб-сайтах. Хотя это ответственность авторов рекомендаций, информировать пользователей о наличии и местонахождении соответствующих дополнительных технических и вспомогательных документов, пользователям AGREE II следует приложить все усилия, чтобы найти и включить их как часть материалов, подходящих для оценки. Число (оценивающих) экспертов Мы рекомендуем, чтобы каждое руководство оценивалось, по меньшей мере, двумя экспертами, а предпочтительно 4, как так это повысит надежность оценки.  Структура и Содержание AGREE II AGREE II состоит из 23 пунктов, объединённых в 6 доменов и завершающих 2 общих пунктов оценки (Общая оценка). Каждый домен фиксирует отдельную сферу качества руководства. ДОМЕН 1. ОБЛАСТЬ ПРИМЕНЕНИЯ И ЦЕЛЬ касается общей цели руководства,конкретноговопроса здоровья / здравоохранения и целевой популяции (пункты 1-3). ДОМЕН 2. УЧАСТИЕ ЗАИНТЕРЕСОВАННЫХ СТОРОН фокусирует внимание на том,в какойстепени руководство было разработано соответствующими заинтересованными сторонами и представляет взгляды предполагаемых пользователей (пункты 4-6). ДОМЕН 3. ТЩАТЕЛЬНОСТЬ РАЗРАБОТКИ относится к процессу,использованному длясбора и синтеза доказательства, методам формулирования рекомендаций и их обновления (пункты 7-14). ДОМЕН 4. ЯСНОСТЬ ИЗЛОЖЕНИЯ касается языка,структуры и формата руководства(пункты 15-17). ДОМЕН 5. ПРИМЕНЕНИЕ / ВНЕДРЕНИЕ относится к вероятным барьерам и фасилитаторамдля реализации, стратегиям для улучшения восприятия и ресурсным последствиям применения руководства (пункты 18-21). ДОМЕН 6. РЕДАКЦИОННАЯ НЕЗАВИСИМОСТЬ рассматривает формулированиерекомендаций, чтобы они не были не долженствующим образом смещены (предвзяты) из-за конкурирующих интересов (пункты 22-23). ОБЩАЯ ОЦЕНКА включает в себя общий рейтинг качества руководства,и будет лируководство рекомендовано для использования в практике. 7 Шкала оценки и разделы Руководства ПользователяКаждый из пунктов AGREE II и два общих пункта оцениваются по 7-балльной шкале (1 – совершенно не согласен и 7 – совершенно согласен). В Руководстве пользователя приведены рекомендации о том, как оценивать каждый пункт с использованием шкалы оценки, а также включает в себя 3 дополнительных раздела для дальнейшего облегчения оценки пользователем. Разделы включают Описание, Где искать, Как оценивать. Шкала оценки Все пункты AGREE II оцениваются по 7-бальной шкале: 
Оценка 1 (Совершенно не согласен). Оценку 1 следует дать, когда нет информации, имеющей отношение к пункту AGREE II, плохо представлена концепция, или авторы прямо заявляют, что критерии не были соблюдены. Оценка 7 (Совершено согласен). Оценку 7 следует дать, если качество отчетности является исключительным и соблюдены все критерии и соображения, изложенные в Руководстве пользователя. Оценки между 2 и 6. Оценка между 2 и 6 дается, когда описываемый пункт AGREE II не соответствует полностью всем критериям или соображениям. Оценка дается в зависимости от полноты и качества представления информации. Оценки увеличиваются по мере соответствия большему числу критериев и соображений. Раздел «Как оценивать» для каждого пункта включает сведения о критериях оценки и конкретных соображениях. Описание Этот раздел определяет концепцию, лежащую в основе этого пункта в широком смысле, и дает примеры. Где искать Этот раздел направляет пользователя, где обычно можно найти информацию в руководстве. В этот раздел включены общие термины, используемые для обозначения разделов или глав руководства. Это только предложения. Ответственность за оценку всего руководства и сопроводительных материалов несет оценивающий эксперт, чтобы обеспечить справедливую оценку. Как оценивать этом разделе приведены сведения о критериях оценки и особенностях каждого конкретного пункта. Критерии определяют точные элементы,которые отражают подходящее(рабочее) определение пункта. Чем больше критериев удовлетворяется, тем более высокую оценку руководство должно получить по этому пункту. Дополнительные соображения направлены на то,чтобы помочь информироватьоценку. Как и в любой оценке, необходимы суждения оценивающих экспертов). Чем больше соображений (мнений) было учтено в руководстве, тем более высокую оценку руководство должно получить по этому пункту. Важно отметить, что оценка руководств требуют определенного уровня суждений. Критерии соображения предназначены для помощи, но не для замены этих суждений. Таким образом, ни один из пунктов AGREE II не дает ясных ожиданий по каждому из 7 баллов шкалы. 8 Другие соображения при использовании AGREE II Иногда, некоторые пункты AGREE II могут быть не применимы к конкретному рассматриваемому руководству. Например, узкопрофильные руководства могут не предоставить весь спектр вариантов ведения состояния (см. пункт 16). AGREE II не включает в шкалу оценки ответ «Не применимо». Существуют различные стратегии управления этой ситуацией, в том числе, когда эксперты пропускают этот пункт в процессе оценки или оценивают пункт как 1 (отсутствие информации) и предоставляют комментарий по поводу оценки. Независимо от выбранной стратегии, решения должны приниматься заранее, описываться подробно, и если пункты пропускаются, должны быть внесены соответствующие изменения в расчет оценок раздела. В принципе, исключение предметов из процесса оценки не рекомендуется. IV. Подсчет баллов в AGREE II Оценка качества в баллах рассчитывается для каждого из шести доменов AGREE II. Шесть оценок разделов являются независимыми и не должны быть объединены в единый показатель качества. Расчет оценки домена Оценки в баллах каждого домена рассчитываются путем суммирования всех баллов за отдельные пункты домена и вычисления процента от максимально возможного балла за весь домен. Например: Если 4 эксперта дают следующие баллы для Домена 1 (Область применения и цель):
 Максимально возможная оценка = 7 (совершенно согласен) * 3 (пункта) * 4 (эксперта) = 84 Минимально возможная оценка = 1 (совершенно не согласен) * 3 (пункта) * 4 (эксперта) = 12 Оценка домена в баллах будет следующая: Полученный бал - Минимально возможный бал Максимально возможный бал - Минимально возможный бал 
Если пункт не включен в оценку (пропущен), необходимы соответствующие изменения в подсчете максимально и минимально возможных оценок. Интерпретация Балльных Оценок Домена Оценки доменов в баллах могут использоваться для определения сильных сторон и ограничений клинических руководств, для сравнения методологического качества руководств или выбора руководств высокого качества для адаптации, одобрения или реализации. В настоящее время нет эмпирических данных для связи определенной оценки качества с конкретными результатами имплементации (например, скорость принятия, распространение принятия) или конкретные клинические исходы; это делает выбор пороговых оценок качества руководств для различения высокого, среднего и низкого качества сложным. При отсутствии этих данных, мы приводим примеры подходов, которые могут использоваться для установки пороговых значений качества. Приоритизация одного Домена: посредством обсуждений или на основе решений руководства, один домен качества может быть приоритетным по сравнению с другими. Таким образом, пороги могут быть созданы на основе оценок для приоритетного домена (например, руководства высокого качества – это те, что имеют оценку более 70% в Домене 3). Поэтапная оценка AGREE II: если пользователи рассматривают ценность одного домена как более высокую, чем других, они могут сначала оценить рекомендации, используя только этот домен. Только те руководства, которые соответствуют порогу качества для этого домена (например, больше 70%), затем оцениваются с использованием других пяти доменов AGREE II. Учет оценок всех домена: пользователи могут создать пороговые значения для всех шести доменов на основе консенсуса или решений руководства (например, руководствами высокого качества считать те, оценки всех доменов которых выше 70%). Альтернативно, пользователи могут установить разные пороги качества для каждого домена отдельно. Пороги для улучшения с течением времени: при анализе изменений в оценках руководств с течением времени, пользователи могут создавать пороговые значения для улучшения (например, минимум 10%-е улучшение в балльной оценке каждого домена руководства от конкретного разработчика за период времени в 5 лет). Любые решения о том, как определять пороговые значения качества, должны приниматься группой всех соответствующих заинтересованных сторон до начала оценки AGREE II. Решения должны руководствоваться контекстом, в котором руководство будет использоваться, и оценкой важности разных доменов и пунктов в этом контексте. V. Общая оценка По завершении 23 пунктов, пользователи AGREE II предоставят 2 общие оценки руководства. Общая оценка требует от пользователя вынесения суждения относительно качества с учетом критериев, рассмотренных в процессе оценки. Пользователю также задается вопрос, будет ли он рекомендовать руководство к использованию. Следующие страницы включают, по доменам, направляющие советы по балльной оценке каждого из 23 пунктов AGREE II при анализе рекомендаций. Каждый пункт включает описание, предложения по нахождению информации по этому пункту, и советы, как оценивать. 10 | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||