Методология. А. М. Новиков д. А. Новиков методология
Скачать 3.22 Mb.
|
4. Снижение размерности. Часто в результате экспери- ментальных исследований возникают большие массивы ин- формации. Например, если каждый из исследуемых объектов 42 Простой называется регрессия одной переменной по другой. 208 Глава 2 описывается по нескольким критериям (измеряются значения нескольких переменных – признаков), то результатом изме- рений будет таблица с числом ячеек, равным произведению числа объектов на число признаков (показателей, характери- стик). Возникает вопрос, а все ли переменные являются ин- формативными. Конечно, исследователю желательно было бы выявить существенные переменные (это важно с содержа- тельной точки зрения) и сконцентрировать внимание на них. Кроме того, всегда желательно сокращать объемы обрабаты- ваемой информации (не теряя при этом сути). Чем тут могут помочь статистические методы? Существует целый класс задач снижения размерности, цель которых как раз и заключается в уменьшении числа анализируемых переменных либо посредством выделения существенных переменных, либо/и построения новых показа- телей (на основании полученных в результате эксперимента). Для снижения размерности используется факторный анализ, а основными методами являются кратко рассматри- ваемый ниже метод главных компонент и многомерное шка- лирование [183]. Метод главных компонент заключается в получении не- скольких новых показателей – главных компонент, являю- щихся линейными комбинациями исходных показателей (напомним, что линейной комбинацией называется взвешен- ная сумма), полученных в результате эксперимента. Главные компоненты упорядочиваются в порядке убывания той дис- персии, которую они «объясняют». Первая главная компо- нента объясняет бóльшую часть дисперсии, чем вторая, вто- рая – бóльшую, чем третья и т.д. Понятно, что чем больше главных компонент будет учитываться, тем большую часть изменений можно будет объяснить. Преимущество метода главных компонент заключается в том, что зачастую первые несколько главных компонент (одна-две-три) объясняют бóльшую часть (например, 80- 90 %) изменений большого числа (десятков, а иногда и сотен) показателей. Кроме того, может оказаться, что в первые не- Методология научного исследования 209 сколько главных компонент входят не все исходные парамет- ры. Тогда можно сделать вывод о том, какие параметры яв- ляются существенными, и на них следует обратить внимание в первую очередь. Решив задачи описания данных, установления сходст- ва/отличий, проанализировав качественно и количественно зависимости между переменными и выявив существенные переменные, можно анализировать соотношение групп пере- менных и пытаться прогнозировать значения одних перемен- ных в зависимости от значений других переменных или вре- мени развития того или иного процесса. 5. Классификация. Обширную группу задач анализа данных, основывающихся на применении статистических методов, составляют так называемые задачи классификации. В близких смыслах (в зависимости от предметной области) используются также термины: «группировка», «систематиза- ция», «таксономия», «диагностика», «прогноз», «принятие решений», «распознавание образов». Обсудим некоторые различия между этими терминами. В [183] предложено выде- лить три подобласти теории классификации: дискриминация (дискриминантный анализ), кластеризация (кластерный ана- лиз) и группировка. Здесь мы кратко остановимся на сути этих методов. Тех же читателей, которые заинтересуются, как ими пользоваться, мы адресуем к соответствующей литерату- ре [183, 241]. В дискриминантном анализе классы предполагаются за- данными (например, обучающими выборками, для элементов которых известно, каким классам они принадлежат: напри- мер, больной-здоровый, правильно-неправильно, легкая сте- пень заболевания – средняя – тяжелая и т.д.). Задача заключа- ется в том, чтобы каждый вновь появляющийся объект отнести к одному из этих классов. У термина «дискримина- ция» имеется множество синонимов: диагностика (например, в медицине требуется поставить диагноз из конечного списка возможных диагнозов, если известны определенные характе- ристики пациента и известно, какие диагнозы ставились 210 Глава 2 пациентам, вошедшим в обучающую выборку), распознава- ние образов с учителем, автоматическая (или статистическая) классификация с учителем и т.д. Если в дискриминантном анализе классы заданы, то кла- стеризация и группировка предназначены для выявления и выделения классов. Синонимами являются: построение клас- сификации, таксономия, распознавание образов без учителя, автоматическая классификация без учителя и т.д. Задача кластерного анализа заключается в выделении по эмпирическим данным резко различающихся групп (класте- ров) объектов, которые схожи между собой внутри каждой из групп. При группировке, когда резких границ между кластерами не существует, исследователю приходится самому вводить границы между группами объектов. Использование компьютера при анализе результатов эксперимента, несомненно, целесообразно 43 . С одной сторо- ны, ряд статистических методов реализован в такой популяр- ной программе, как Microsoft Excel для Window, входящей в стандартный комплект Microsoft Office, и установленной, наверное, на любом современном компьютере. С другой стороны, на сегодняшний день существует множество специ- альных профессиональных программ, позволяющих осущест- влять статистический анализ данных. Среди последних мож- но выделить и рекомендовать к использованию такие наиболее распространенные пакеты статистического анализа как: Statistica, StatGraphics и SPSS. Однако, упомянутые про- граммы достаточно сложны и требуют значительных времен- ных затрат для их освоения. Поэтому можно рекомендовать следующее: если для решения задач исследования хватает возможностей Excel, то можно ограничиться использованием этой программы (недостатком ее, правда, является практиче- 43 Все обсуждаемые в настоящем разделе достоинства и недостатки программного обеспечения отражают лишь субъективное мнение авто- ров и не могут рассматриваться как попытка рекламы того или иного продукта. Методология научного исследования 211 ски полное отсутствие вразумительных объяснений, которые помогли бы неподготовленному пользователю понять, что получилось в результате расчетов). Если возможностей Excel недостаточно, то нужно обращаться к профессиональным статистическим программам. Каждая из них обладает своими достоинствами и недостатками (в одной более полно реализо- ваны одни методы, в другой другие и т.д.). С методической точки зрения можно рекомендовать использовать программу StatGraphics (версии 5.0 и выше). Ее достоинством с позиций непрофессионального статистика является наличие «советчи- ка», который разъясняет, что означает та или иная вычислен- ная величина, и что исследователю следует делать дальше. Необходимо подчеркнуть, что при описании статистиче- ских методов нами даны лишь вводные соображения. Заинте- ресованному читателю можно порекомендовать обратиться к более добротной и профессиональной литературе по этой тематике – см. [168, 169, 183, 241], а также ссылки в этих работах. Завершив описание статистических методов, отметим, что часто при организации исследования сложных явлений и процессов и обработке его результатов возникает необходи- мость использования агрегированных (комплексных) и/или векторных оценок. Рассмотрим кратко их специфику. Агрегированные оценки. Во многих экспериментах имеется значительное число (десятки, сотни, а иногда и тыся- чи) объектов (субъектов). В результате измерения их показа- телей получается набор их частных оценок. Понятно, что сравнивать между собой и анализировать одновременно все частные оценки не всегда возможно и целесообразно, так как всегда существует их разброс, обусловленный неконтроли- руемым различием объектов эксперимента. Поэтому для того, чтобы, во-первых, получить обозримое число характеристик и, во-вторых, для того, чтобы сгладить индивидуальные колебания, используют так называемые агрегированные (коллективные, групповые, производные) оценки. Например, если имелись частные (индивидуальные) 212 Глава 2 оценки отдельных индивидуумов, то агрегированной оценкой будет «среднее» значение для их группы. Использование кавычек не случайно, так как получение агрегированных оценок на основании частных является их преобразованием, и преобразование это следует выполнять корректно. Приведем некоторые корректные процедуры агрегирова- ния для наиболее распространенных в экспериментальных исследованиях показателей. Для величин, измеренных в шкале отношений, наиболее типичным является вычисление среднего арифметического по группе. Эта процедура вполне корректна, и обычно ее реали- зация не вызывает затруднений. Наибольшее число ошибок возникает при агрегировании показателей, измеренных в порядковых шкалах. Отметим, что не следует складывать, вычитать, умножать или делить баллы друг на друга, да и на чтобы то ни было – все это абсолютно бессмысленные операции. В порядковой шкале для «усреднения» обычно используют медиану [169, 183]. Если имеется набор индивидуальных баллов, то агреги- рованной характеристикой группы будет число ее членов, получивших тот или иной балл 44 . Аналогичным образом агрегируется и информация о выделении уровней – если введены три уровня (например, уровни знаний: низкий, сред- ний и высокий) и имеется информация о распределении всех членов нескольких групп (контрольных или эксперименталь- ных) по этим уровням, то агрегированной информацией об объединенной группе будет число ее членов, обладающих тем или иным уровнем (вычисляемое как сумма по всем груп- пам числа их членов, обладающих данным уровнем) – соот- ветствующие примеры можно найти в [168, 169]. Если агрегирование частных оценок по группе экспери- ментальных объектов (субъектов) производится с целью 44 Отметим, что такая агрегированная характеристика группы как число ее членов, получивших данный балл, является величиной, измеренной уже в шкале отношений (в то время, как баллы измеряются в порядковой шкале). Методология научного исследования 213 получения характеристик группы в целом, то для описания различных аспектов, свойств и т.п. одного и того же объекта используются так называемые векторные оценки. Векторные оценки. Нередко встречаются случаи, когда какое-либо изучаемое явление, процесс характеризуется несколькими показателями – вектором показателей. Напри- мер, при оценке труда какого-нибудь рабочего используются показатели качества труда (точности обработки деталей) и производительности труда (время выполнения операций). При этом часто возникает вопрос о возможности однозначной оценки этого явления, процесса или изучаемых их свойств одной величиной – комплексной оценкой. Например, во мно- гих спортивных состязаниях победитель выявляется по ком- плексной оценке – сумме очков, баллов, набранных на от- дельных этапах состязания или в отдельных играх, в многоборье – в отдельных видах спорта. На практике комплексные оценки встречаются довольно часто и, очевидно, без них не обойтись, хотя способы их определения нередко и вызывают множество недоуменных вопросов. Но в любом случае такие комплексные оценки, применяемые в повседневной жизни, являются либо резуль- татом определенных общественных соглашений, которые признаются всеми участниками, либо установлены каким- либо нормативным актом определенного директивного орга- на – министерства, ведомства и т.д. и в силу этого также признаются всеми заинтересованными лицами. Другое дело – применение комплексных оценок в науч- ном исследовании. Здесь сразу на первое место встает вопрос о научной, в том числе математической, строгости применяе- мой оценки. В частности, например, не вызывает сомнений возможность использования в организации труда такой ком- плексной оценки, как суммарные затраты времени на выпол- нение тех или иных технологических операций. Здесь сумми- руются однородные величины, измеренные в шкале отношений. Между тем, при использовании шкалы рангов (порядко- 214 Глава 2 вой шкалы) суммирование баллов довольно часто встречается в исследованиях по педагогике, психологии, медицине, био- логии и другим наукам (см. анализ корректности использова- ния методов анализа данных в диссертациях по педагогике [169] и медицине [168]). Так, в одной «методологической» публикации для оценки эффективности деловой игры была использована следующая «формула»: Р = 50 – К – (В – 40), где Р – «комплексная» оценка в баллах, 50 – максимально возможное количество баллов, К – количество замечаний, сделанных ведущим, В – время в минутах. Как видим, здесь уж, что называется, «смешались в кучу кони, люди ...». Под знак суммы (разности) поставлены совершенно разнородные величины: баллы, количество замечаний, время, безразмер- ные числа. Достаточно простым и интуитивно понятным (но, в то же время, корректным) методом агрегирования балльных оценок является использование так называемых матриц свертки [172], элементы которых содержат значения агрегированного показателя, а агрегируемые баллы задают номер строки и столбца. В некоторое оправдание используемым на практике не- корректным построениям комплексных оценок следует отме- тить, что проблема агрегирования векторных оценок на сего- дняшний день исследована не полностью, а существующие результаты, даже для их применения на практике, зачастую требуют хорошего знания высшей математики. Качественно же проблема векторных оценок (или как ее иногда называют – проблема принятия решений при многих критериях) может быть проиллюстрирована на следующем простом примере из области экономики: имеются два инвестиционных проекта с одним и тем же размером первоначальных вложений (допус- тим, 100 единиц), причем первый характеризуется более высоким доходом (300 единиц), но и более высоким риском (предположим, что вероятность неуспеха равна 0,2), чем второй (доход – 250 единиц, вероятность неуспеха (риск) – 0,05). В какой из проектов следует осуществлять инвестиции? Методология научного исследования 215 Ответ неоднозначен. Если бы первый проект был более при- быльным и менее рискованным, то следовало бы выбирать его. Но имеются два критерия (доход и риск) и первая аль- тернатива (первый проект) «лучше» по одному критерию, но «хуже» по второму. В подобных ситуациях обычно поступа- ют следующим образом. На первом шаге выделяют множе- ство эффективных альтернатив (так называемых, недоми- нируемых по Парето, то есть таких альтернатив, что не существует других допустимых альтернатив, которые были бы «не хуже» по всем критериям, а по одному из критериев – «строго лучше»). В рассматриваемом примере оба проекта эффективны по Парето. Дальше – на втором шаге – возможно несколько вариан- тов (и привести априори рациональное обоснование того, какой из них следует использовать в том или ином конкрет- ном случае, невозможно): - ввести комплексный критерий, оценка по которому бу- дет вычисляться агрегированием оценок по исходным крите- риям. В рассматриваемом примере таким критерием может быть ожидаемый доход (произведение дохода на вероятность его получения). Значение такого комплексного критерия для первого проекта равно 240 = 300 (1 – 0,2), для второго – 237,5 = 250 (1 – 0,05). С точки зрения максимизации ожидае- мого дохода следует выбрать первый проект. В качестве комплексного критерия можно использовать ожидаемые потери (для первого проекта они равны 60 единиц, для второ- го – 12,5), тогда с точки зрения минимизации ожидаемых потерь следует выбрать второй проект; - упорядочить критерии по важности. Если считать доход более важным критерием, чем риск, то следует выбрать пер- вый проект (так как он приносит в случае успеха больший доход: 300 > 250). Но, если считать риск более важным кри- терием, чем доход, то следует выбрать второй проект (так как он характеризуется меньшим риском: 0,05 < 0,2); 216 Глава 2 - возможны и другие варианты принятия решений, часть из которых будет «рекомендовать» выбрать первый проект, а другая часть – второй. Даже из приведенного элементарного примера многокри- териальной задачи принятия решений видно, что универсаль- ных «рецептов» в этой области не существует. Для тех, кто глубже заинтересуется проблемой комплексных оценок и принятия решений при многих критериях, можно рекомендо- вать ознакомиться с соответствующими публикациями [176, 182, 198, 217]. Но в любом случае при построении ком- плексных оценок нужно быть предельно внимательным и осторожным. Кстати, нередко можно обойтись и без них. Если получены количественные результаты по отдельным показателям, то можно ограничиться их качественной интер- претацией, не «загоняя под общий знаменатель», проанализи- ровать и сравнить исследуемые объекты отдельно по каждо- му из показателей. И пусть по каким-то показателям результаты экспериментальных групп будут лучше контроль- ных, а по каким-то хуже – от этого исследование только обо- гатится, станет достовернее. СТАДИЯ ОФОРМЛЕНИЯ РЕЗУЛЬТАТОВ ИССЛЕДО- ВАНИЯ. Завершающей стадией технологической фазы иссле- дования является апробация его результатов, их литературное оформление и публикация. Детальная апробация исследования – одно из условий его состоятельности и истинности результатов, один из реальных способов вовремя скорректировать и исправить его недостат- ки. Слово «апробация» латинского происхождения и дослов- но означает «одобрение, утверждение». В роли критиков, оппонентов, судей выступают коллеги-ученые, практические работники, а также научные и педагогические коллективы. Апробация осуществляется в формах публичных докладов и выступлений, дискуссий, а также в форме письменного или устного рецензирования. Важную роль играет и неофициаль- ная апробация – беседы, споры с коллегами, специалистами из других областей научного знания, а также с практическими Методология научного исследования 217 работниками. По результатам апробации исследователь ос- мысливает и учитывает возникающие вопросы, позитивные и негативные оценки, возражения и советы. На этой основе он дорабатывает свои материалы, пересматривает, если это необходимо некоторые положения своего исследования. По завершении апробации исследователь приступает к литературному оформлению и публикации результатов сво- его исследования. Ведь публикация, и письменная, и устная, и электронная, является обязательным условием завершения научного исследования (естественно, если оно действительно научное): новое знание, полученное тем или иным исследова- телем, только тогда станет научным знанием, когда оно ста- нет общественным достоянием. Результаты проведенного исследования оформляются в следующих формах литературной продукции: 1. Реферат является одной из начальных форм представ- ления результатов исследования в письменном виде. С помо- щью реферата начинающие исследователи излагают свои первоначальные результаты исследования. В реферате обыч- но раскрываются теоретическое и практическое значение темы, анализируются публикации по теме, дается оценка и выводы по проанализированному научному материалу. Рефе- рат должен показать эрудицию исследователя, его умение самостоятельно анализировать, систематизировать, класси- фицировать и обобщать существующую научную информа- цию. Рефераты, как правило, не публикуются. 2. Научная статья является самой распространенной формой литературной продукции исследователя. Статьи публикуются в научных журналах, научных или научно- методических сборниках. Объем статьи обычно бывает от 5 до 15 машинописных страниц. Изложение материала в науч- ной статье должно быть систематичным и последовательным. Разделы работы должны быть логически связаны между собой. Особое внимание должно быть уделено научному стилю работы. Для научного стиля характерны следующие основные требования: ясность изложения, точность слово- 218 Глава 2 употребления, лаконизм, строгое соблюдение научной тер- минологии, последовательность изложения позиций, логич- ность, взаимосвязь положений. Особое внимание следует обратить на литературную редакцию текста. Большое значение в научной статье имеет изложение за- ключения, научных выводов и предложений. В этой части статьи следует кратко и четко выделить существенные аспек- ты результатов исследования и показать пути их реализации в практике. 3. Научный отчет, доклад. Научную работу можно оформить и в виде научного отчета. Общие требования и правила оформления научного отчета изложены в соответст- вующем государственном стандарте (ГОСТе). К научному отчету предъявляют следующие основные требования: четкость построения; логическая последователь- ность изложения материала; убедительная аргументация; краткость и точность формулировок; конкретность изложения результатов ра6оты; доказательность выводов и обоснован- ность рекомендаций. Научный отчет должен включать титульный лист, список авторов, краткий реферат, содержание (оглавление), основ- ную часть работы, список использованной литературы и приложения. Реферат отчета должен отражать в очень кратком изло- жении основное содержание отчета, его объем, количество и характер иллюстраций и таблиц, перечень ключевых слов, сущность выполненной работы, методы исследования, крат- кие выводы и возможности применения результатов исследо- вания. Основная часть отчета включает: введение; аналитиче- ский обзор научной литературы по данной теме; обоснование выбранного направления работы; разделы (главы) отчета, отражающие методику, содержание и результаты выполнен- ной работы; заключение (выводы и предложения). В приложения включают вспомогательный материал от- чета: таблицы цифровых данных; примеры инструкций, руко- Методология научного исследования 219 водств, анкет, тестов и т.п., разработанных и примененных в исследовательской работе; иллюстрации вспомогательного характера и т.п. Научный доклад – по содержанию это то же, что и науч- ный отчет. В то же время, он может охватывать не всю иссле- дуемую проблему, а только какую-то логически завершенную часть, аспект. К научному докладу не предъявляются столь жесткие требования к его оформлению и форме, как к науч- ному отчету. Для него не требуется реферат, разбиение по главам. По языку, литературному стилю изложения доклад, как правило, должен быть больше приспособлен для устного выступления, восприятия от его прочтения вслух. 4. Методическое пособие. Основой такого пособия явля- ются сделанные на базе результатов исследования теоретиче- ски обоснованные методические рекомендации для совер- шенствования какого-либо (учебно-воспитательного, технологического и т.д.) процесса. Так как методическое пособие рассчитано на практических работников, оно должно быть написано хорошим, живом литературным языком. По возможности его следует иллюстрировать наглядными мате- риалами. Методическое пособие можно оформить и в виде бро- шюры или книги. Брошюрой называется малообъемная пе- чатная продукция (5-48 страниц) в мягкой обложке или без обложки. Книга – непериодический печатный материал объе- мом более 48 страниц, как правило, в обложке или переплете. Кстати, классическим примером блестящего методиче- ского пособия (по военному делу) можно считать знаменитую книгу А.В. Суворова «Наука побеждать», где всего на 25 страницах текста изложены рекомендации по всем, как теперь принято называть, инновациям гениального полководца – от правил ведения боя и военных переходов, до организации тыла армии и устройства госпиталей. 5. Монография. Монографией называется научное изда- ние, в котором какая-то одна проблема (моно – одиночный) 220 Глава 2 рассматривается достаточно разносторонне и целостно. Мо- нография может иметь одного или нескольких авторов. Если исследователю удалось какую-то проблему решить по-новому, всесторонне обобщить существующие научные труды по проблеме, и он может научно обосновать свои кон- цепции по проблеме, показать конкретные возможности их реализации в практике, тогда ему целесообразно оформить результаты своего исследования в виде научной монографии. В монографии исследователь показывает, как исследуе- мая проблема решалась ранее в научной литературе и в прак- тике, как она решается в настоящее время. Затем раскрывает- ся сущность авторских идей решения этой проблемы, описывается методика исследования, которая использовалась для подтверждения концепции. После этого подробно осве- щаются, анализируются результаты собственного исследова- ния, делаются аргументированные выводы и научно- обоснованные рекомендации. В конце монографии приводит- ся библиография использованных литературных источников. Монография также оформляется в виде брошюры или книги. 6. Тезисы докладов и выступлений на конференциях, се- минарах, педагогических чтениях и т.д. Как правило, при проведении научных конференций, семинаров и т.д. принято публиковать сборники тезисов докладов и выступлений их участников. Тезисы – это очень короткий документ объема от 1 до 3 страниц печатного текста. Их объем для всех участни- ков заранее устанавливает оргкомитет конференции и т.п. Основная задача при написании тезисов – в очень сжатой, конспективной форме изложить самые главные результаты исследования, которые докладчик, выступающий хочет до- ложить участникам конференции, семинара или симпозиума. Объемы всей научной литературной продукции измеря- ются в условных единицах – авторских (печатных) листах. Один авторский лист – 40000 печатных знаков, включая зна- ки препинания и пробелы между словами. Таким образом, один авторский лист – это примерно 23 страницы машино- Методология научного исследования 221 писного текста напечатанного через 2 интервала или пример- но 16 страниц через один интервал. Кроме публикаций литературной продукции, результаты исследования докладываются и обсуждаются посредством устного научного общения. Можно дать следующие условные определения основных форм организации устного научного общения: – научный (проблемный) семинар – обсуждение сравни- тельно небольшой группой участников подготовленных ими научных докладов, сообщений, проводимое под руково- дством ведущего ученого, специалиста. Научные семинары могут быть как разовыми, так и постоянно действующими. Они являются важным средством сплочения исследователь- ского коллектива, выработки у его членов общих подходов, воззрений. Научные семинары проводятся, как правило, в рамках одной научной организации или одного учебного заведения, хотя на их заседания могут приглашаться и пред- ставители других организаций. Классическими примерами постоянно действующих семинаров являются знаменитые «Павловские среды», материалы которых были опубликованы в многотомном издании, а также Семинар по теоретической физике Л.Д. Ландау; – научная конференция – собрание представителей науч- ных или научных и практических работников (в последнем случае конференция называется научно-практической). Науч- ные и научно-практические конференции всегда бывают тематическими. Они могут проводиться в рамках одной на- учной организации или учебного заведения, на уровне регио- на, страны, на международном уровне; – научный съезд – собрание представителей целой отрас- ли науки в масштабах страны. Например, съезд психологов. На съездах обсуждаются все или значительная часть актуаль- ных для данной науки на сегодняшний день проблем; – научный конгресс – то же, что и съезд, только на меж- дународном уровне. Например, Европейский конгресс, Все- мирный конгресс; 222 Глава 2 – симпозиум (кстати, в дословном переводе с греческого – «пиршество») – международное совещание научных работ- ников по какому-либо относительно узкому, специальному вопросу (проблеме); – авторские школы передового опыта (мастерские, прак- тикумы, тренинги и т.д.) – форма общения ученых и специа- листов-практиков, когда автор передового опыта подробно рассказывает участникам школы о своем опыте и демонстри- рует его. Школы передового опыта проводятся в рамках одной организации, предприятия, учебного заведения, или в рамках региона, или всей страны; – тематические чтения – форма общения научных и практических работников какой-либо одной отрасли, имею- щая целью обобщение и распространение передового опыта. На тематических чтениях заслушиваются доклады по опреде- ленной тематике чтений, например, посвященной научному наследию крупного ученого, или какой-либо исторической дате и т.д. Чтения могут проводиться в НИИ, в учебном заве- дении, на уровне района, области, в масштабах страны – Всероссийские чтения. Таким образом, мы изложили последовательность шагов от замысла исследования до оформления его результатов и их публикации, которой завершается технологическая фаза научного исследования (научно-исследовательского проекта). |