на 26.03. Под педагогическим контролем
 Скачать 134.35 Kb.
|
|
Тестирование – одна из методик педагогической диагностики: история применения диагностических тестов Тестирование – целенаправленное, одинаковое для всех испытуемых обследование, проводимое в строго контролируемых условиях, позволяющее объективно измерять изучаемые характеристики педагогического процесса. Отличается точностью, простотой, доступностью, возможностью автоматизации. Из всех существующих на сегодняшний день методик диагностирования самой перспективной считается тестирование. Применение диагностических тестов в зарубежных школах имеет давнюю историю. Признанный авторитет в области педагогического тестирования Э. Торндайк (1874-1949) выделяет три этапа внедрения тестирования в практику американской школы: Период поисков (1900-1915). На этом этапе происходило осознание и первоначальное внедрение тестов памяти, внимания, восприятия и других, предложенных французским психологом А.Бинэ. Разрабатываются и проверяются тесты интеллекта, позволяющие определять коэффициент умственного развития. Последующие пятнадцать лет – годы «шума» в развитии школьного тестирования, приведшие к окончательному осмыслению его роли и места, возможности и ограничений. Были разработаны и внедрены тесты О. Стоуна по арифметике, Б. Зекингема для проверки правописания, Э.Торндайка по диагностике большинства школьных предметов. Т. Келли разработал способ измерения интересов и наклонностей обучаемых (при изучении алгебры), а Ч. Спирмен предложил общие основы использования корреляционного анализа для стандартизации тестов. С 1931 г. начинается современный этап развития школьного тестирования. Поиски специалистов направляются на повышение объективности тестов, создание непрерывной (сквозной) системы школьной тестовой диагностики, подчиненной единой идее и общим принципам, созданию новых, более совершенных средств предъявления и обработки тестов, накопления и эффективного использования диагностической информации. Что касается России, педология, развившаяся здесь в начале века, безоговорочно приняла тестовую основу объективного школьного контроля. Но после известного постановления ЦК ВКП(б) «О педологических извращениях в системе Наркомпроса» (1936) были ликвидированы не только интеллектуальные, но и безобидные тесты успеваемости. Попытки возродить их в 70-х годах ни к чему не привели. В этой области наша наука и практика значительно отстали от зарубежной. В школах развитых стран внедрение и совершенствование тестов шло быстрыми темпами. Широкое распространение получили диагностические тесты школьной успеваемости, использующие форму альтернативного выбора правильного ответа из нескольких правдоподобных, написание очень краткого ответа (заполнения пропусков), дописывания букв, цифр, слов, частей формул и т.п. С помощью этих несложных заданий удается накапливать значительный статистический материал, подвергать его математической обработке, получать объективные выводы в пределах тех задач, которые предъявляются к тестовой проверке. Тесты печатаются в виде сборников, прилагаются к учебникам, распространяются на компьютерных дискетах. На современном этапе среди эффективных методов оценки образовательных достижений заметная роль отводится тестированию. Под тестированием понимается стандартизированная процедура объективного измерения образовательных достижений испытуемого или отдельных качеств его личности. Педагогическим тестом называется система заданий специфической формы, определенного содержания, возрастающей трудности, создаваемая с целью объективно оценить структуру качество, измерить уровень подготовленности учащихся требования к правильно составленным тестам Слово «тест» английского происхождения и на языке оригинала означает «испытание», «проверка». Тест обученности – это совокупность заданий, сориентированных на определение степени усвоения определенных аспектов (частей) содержания обучения. Правильно составленные тесты обученности должны удовлетворять ряду требований. Они должны быть: 1. относительно краткосрочными, т.е. не требовать больших затрат времени; 2. однозначными, т.е. не допускать произвольного толкования тестового задания; 3. правильными, т.е. исключать возможность формулирования многозначных ответов; 4. относительно краткими, требующими сжатых ответов; 5. информационными, т.е. такими, которые обеспечивают возможность соотнесения количественной оценки за выполнение теста с порядковой или интервальной шкалой измерений; 6. удобными, т.е. пригодными для быстрой математической обработки результатов; 7. стандартными, т.е. пригодными для широкого практического использования – измерения уровня обученности возможно более широких контингентов обучаемых, овладевающих одинаковым объемом знаний на одном и том же уровне обучения. классификация тестов Тестирование проводится как с отдельными лицами, так и в группах. В педагогике доминируют групповые тесты, проводимые в школьных классах, так как они являются наиболее экономными для преподавателя. Использование индивидуальных тестов (не считая тестов интеллекта, которые проводит преподаватель-консультант) рекомендуется только тогда, когда исследуемое поведение, например чтение вслух, произношение и т.п., невозможно измерить в условиях групповой проверки. Тесты обученности, или, как их еще называют, школьные тесты, - это всего лишь одна из разновидностей психологических и педагогических испытаний для диагностирования различных сторон развития и формирования личности. Если в основу классификации тестов положить различные аспекты (компоненты) развития и формирования человеческих качеств, то она будет выглядеть следующим образом: 1. Тесты общих умственных способностей, умственного развития. 2. Тесты специальных способностей в различных областях деятельности. 3. Тесты обученности, успеваемости, академических достижений. 4. Тесты для определения отдельных качеств личности (памяти, мышления, характера и др.). 5. Тесты для определения уровня воспитанности (сформированности общечеловеческих, нравственных, социальных и других качеств). Применение тех или иных тестов будет наиболее эффективным и обеспечит надежные выводы лишь при условии правильного их сочетания со всеми другими группами тестов. Поэтому тестовые испытания всегда имеют комплексный характер. критерии диагностических тестов обученности При разработке тестов важно, насколько они соответствуют запроектированным целям обучения, образования, развития обучаемых. Важнейшими критериями диагностических тестов обученности являются: 1. действенность (валидность, показательность), 2. надежность (вероятность, правильность), 3. дифференцированность (различимость). Действенность теста по своему содержанию близка к требованию полноты, всесторонности проверки, пропорционального представления всех элементов изучаемых знаний, умений. Составитель теста обязан тщательно изучить все разделы учебной программы, учебной книги, хорошо знать цель и конкретные задачи обучения. Лишь тогда он сможет составить тесты, которые будут действенными для определенной категории обучаемых. Четкая и ясная постановка вопроса в пределах освоенных знаний – неотъемлемое условие действенности теста. Если тест выходит за пределы освоенного содержания или же не достигает этих пределов, превышает запроектированный уровень обучения, то он не будет действенным для тех обучаемых, которым он адресован. Действенность теста определяется статистическими методами. Степень надежности характеризуется стабильностью, устойчивостью показателей при повторных измерениях с помощью того же теста или его равноценного заменителя. Количественно этот показатель характеризуется вероятностью достижения запланированных результатов (правильностью значений). Грамотно составленные и апробированные тесты обученности позволяют достигнуть коэффициента надежности 0,9. Установлено, что надежность повышается при увеличении количества тестовых заданий. Установлено также, что чем выше тематическое, содержательное разнообразие тестовых заданий, тем ниже надежность теста. Надежность тестов обученности значительно зависит от трудности их выполнения. Трудность определяется по соотношению правильных и неправильных ответов на тестовые вопросы. Включение в состав тестов таких заданий, на которые все обучаемые отвечают правильно или же наоборот, неправильно, резко снижает надежность теста в целом. Наибольшую практическую ценность имеют задания, на которые правильно отвечают 45 – 80% обучаемых. Характеристика дифференцированности связана с использованием таких тестов, где нужно выбирать правильный ответ из нескольких возможных альтернатив. Если, скажем, все учащиеся безошибочно находят правильный ответ на один вопрос и также дружно не могут ответить на другой, то это сигнал для совершенствования теста в целом. Его необходимо дифференцировать, сделать различимым. Кроме рассмотренных критериев используется и показатель эффективности теста. Тест, обеспечивающий при прочих равных условиях большее количество ответов за единицу времени, считается более эффективным. основные правила подготовки материалов для тестового контроля При подготовке материалов для тестового контроля необходимо придерживаться таких основных правил: 1. Нельзя включать ответы, неправильность которых на момент тестирования не может быть обоснована учащимися. 2. Неправильные ответы должны конструироваться на основе типичных ошибок и должны быть правдоподобными. 3. Правильные ответы должны располагаться среди всех предлагаемых ответов в случайном порядке. 4. Вопросы не должны повторять формулировок учебника. 5. Ответы на одни вопросы не должны служить подсказками для других. 6. Вопросы не должны содержать «ловушек». Централизованное тестирование в России Отставание России от мирового уровня в области тестирования весьма значительно, но в последние годы предпринимаются попытки созидать определенную культуру тестирования. Первым шагом в этом направлении со стороны федерального органа управления образования стало открытие в 1990 году лаборатории централизованного тестирования учащейся молодёжи при Московском педагогическом государственном университете (МПГУ). Центр тестирования осуществляет: 1. организацию и финансирование разработки тестов для централизованного тестирования, их апробации и экспертизы; 2. ведение банка тестовых заданий 3. методическое и организационное руководство проведением тестирования регионах России; 4. автоматизированную обработку результатов тестирования; 5. ведение банка статистического анализа результатов тестирования. Суть централизованного тестирования состоит в том, что в один день в разных городах России тестирование выпускников школ по каждой дисциплине проводится по тестам, которые формируются из единого банка тестовых заданий. Такое тестирование предлагается школьникам как дополнительное платное образовательная услуга (независимая, объективная оценка знаний), использование которой носит сугубо добровольный характер. Для развития системы тестирования в России на базе имеющегося потенциала Центра тестирования необходимо: 1. доработать и утвердить концепцию централизованного тестирования; 2. разработать и утвердить единую шкалу учебных достижений; 3. разработать и внедрить нормативные ведомственные акты, указывающие правовую поддержку каждому этапу развития централизованного тестирования; 4. сформировать организационно-правовые условия, создающие устойчивый мотивационный комплекс для использования объективной информации об уровне знаний учащихся для всех категорий пользователей: от самих учащихся и их родителей до руководителей образовательных учреждений (школы, вузы) и до руководителей региональных и федерального органов управления образования; 5. ввести результаты централизованного тестирования в государственную систему отчетности по образованию и систему оценки качества образования; 6. выделить средства из бюджетов региональных и федерального органов управления образования для частичной компенсации затрат Центра тестирования на подготовку информации по образовательной статистике. Традиционные способы оценки, существующие в системе образования, нуждаются в систематическом дополнении объективными методами. Методика педагогической диагностики требует научного обоснования. Исходя из этого, с одной стороны, не следует сводить педагогическую диагностику к простому тестированию, а с другой стороны, без разумного использования информативных тестов добиться существенного улучшения в нашей оценочной практике невозможно. Тесты обученности применяются на всех этапах дидактического процесса. С их помощью обеспечивается предварительный, текущий, тематический и итоговый контроль знаний, умений, учет успеваемости и академических достижений. Не все необходимые характеристики усвоения можно получить с помощью тестирования. Такие, например, показатели, как умение конкретизировать свой ответ примерами, знание фактов, умение связанно и логически выражать свои мысли, некоторые другие характеристики знаний, умений, навыков диагностировать тестированием невозможно. Это значит, что тестирование должно обязательно сочетаться другими формами и методами проверки Тестология как наука о тестах Впервые понятие тест применительно к психологии ввел Френсис Гальтон в XIX в., и он же заложил основу математического аппарата: ввел формулу для вычисления коэффициента корреляции. Тестология, как теория тестов со своими методами научного исследования, появилась в начале ХХ в. Авторы первого педагогического теста, созданного для измерения интеллектуальных способностей детей, французы Альфред Бине и Теодор Симон в 1908-1911 гг. провели эмпирическую проверку заданий, которые предполагалось включить в их тест. Критериями оценки пригодности заданий стали эмпирическая мера трудности каждого задания, которую они определяли по доле правильных ответов в группах детей разного возраста, и степень совпадения результатов теста с мнением преподавателей. Так фактически были заложены основные характеристики теста: норма трудности и валидность; разработана шкала Бине-Симона. Показатель интеллекта Бине вычислял как разность между «умственным» и биологическим возрастом. Cо временем было замечено, что эта разность все время увеличивается, в то время как отношение возрастов остается постоянным. Штерн в 1911 г. назвал отношение рассмотренных возрастов, выраженное в процентах, коэффициентом интеллекта (IQ), который вычислялся до 30-х гг. ХХ в. Во время Первой мировой войны Роберт М. Йеркс заинтересовал военное ведомство США отбором новобранцев по результатам тестов. В результате были разработаны групповые армейские тесты Альфа и Бета, выполненные в бланковой форме. Армейский Бета-тест разработали для необразованных солдат, которые не умели читать и писать, поэтому в нем использовались только картинки и диаграммы. В Альфа-тесте выстроили пункты внутри каждого субтеста в порядке возрастающей сложности. Этот тест прошли примерно 1 250 000 военнослужащих армии США. После небольшой переработки Альфа-тест используется и в настоящее время, сейчас он называется шкалой Стенфорда-Бине. В СССР использование тестов было запрещено в послереволюционный период, когда были отменены любые методы контроля знаний. В 20-е гг. произошел переворот в образовании - ставились смелые опыты, развивались психология, педагогика и педология ( буквально - наука о детях, а фактически -направление в науке, ставившее своей целью объединить подходы различных наук (медицины, биологии, психологии, педагогики) к развитию ребенка.). В пропаганде тестов и издании книг по технике разработки, методологии, организации и процедуре тестирования, методам статистической обработки участвовали такие ученые, как П.П. Блонский, которого называли советским Песталоцци; А.Н. Бернштейн, разработавший тест геометрических фигур; А.П. Болтунов, Ю.А. Левин, А.Б. Залкинд, Е.В. Гурьянов, А.А. Смирнова и многие другие. В 1926 г. в Москве была выпущена первая серия тестов для школьников по природоведению, счету и другим школьным дисциплинам; затем каждый год эти тесты совершенствовались. Наркомат просвещения РСФСР финансировал специальные лаборатории по разработке тестов, по этой теме выпускались книги, публиковались статьи в газетах и журналах. Однако вся эта работа в начале 30-х гг. XX в. была подвергнута критике, а затем, в 1936 г., оказалась под запретом. Постановлением ЦК ВКП(б) «О педологических извращениях в системе наркомпросов», принятым 4 июля 1936 г., использование тестов было запрещено: «…Практика педологов… свелась в основном к ложно-научным экспериментам и проведению… бесчисленного количества обследований в виде бессмысленных и вредных анкет, тестов и т.п…» Центр развития тестологии сместился на Запад, но прогрессивные наработки советских тестологов внесли вклад в дальнейшее развитие этой науки. Первое признание тестирования как способа проверки уровня знаний официально появилось в декабре 1988 г. (см. постановление Госкомобразования СССР, Госкомтруда СССР, ВЦСПС № 544/649/12-7 «Об утверждении Типового положения об учебных заведениях (подразделениях) системы повышения квалификации и переподготовки руководящих работников и специалистов народного хозяйства» от 23 декабря 1988 г.); тесты разрешалось использовать в системе повышения квалификации. Затем вышли нормативные документы, разрешающие проводить тестирование в качестве вступительных испытаний, в том числе в техникумах. В приказе Минобразования РФ № 88 «Об утверждении документов по итоговой аттестации и награждению выпускников» от 24 февраля 1995 г. тестирование предлагалось использовать уже как способ итоговой аттестации школьников. Таким образом, состоялась реабилитация тестирования после 1936 г. Понятие «тестология» имеет очень много значений - от буквального перевода с английского языка («наука об испытании»), до методов педагогических измерений, результатов и их интерпретации. Ключевыми понятиями тестологии, как одной из методических теорий, являются измерение, тест, содержание и форма заданий, надежность и валидность результатов измерения. Педагогические измерения можно рассматривать как процесс практической образовательной деятельности, нацеленный на получение оценок уровня текущей и итоговой подготовленности обучаемых. Основная цель измерения в педагогике - это получение численных эквивалентов проявления интересующего признака. Объектом измерения являются конкретные носители интересующих свойств - учащиеся, студенты и другие испытуемые. Основной предмет педагогических измерений является разработка качественных тестов для измерения уровня подготовленности учащихся. В наши дни такие тесты используются не только для измерения уровня подготовленности, но и для проведения рейтинга, мониторинга учебного процесса, для организации дистанционного образования: в общем, тесты используются во всех современных образовательных технологиях. Педагогический тест - это система специально подобранных проверочных заданий специфической формы, позволяющая количественно оценить учебные достижения в одной и нескольких областях знаний. Слово «тест» английского происхождения и на языке оригинала означает «испытание», «проверка». Тест обученности - это совокупность заданий, сориентированных на определение (измерение) уровня (степени) усвоения определенных аспектов (частей) содержания обучения. Тест, созданный для проверки уровня усвоения знаний по одной учебной дисциплине, называют гомогенным. Правильно составленные тесты должны удовлетворять ряду требований. Они должны быть: не требовать больших затрат времени; однозначными, т.е. не допускать произвольного толкования тестового задания; правильными, т.е. исключать возможность формулирования многозначных ответов; относительно краткими, требующими сжатых ответов; информационными, т.е. обеспечивающими возможность соотнесения количественной оценки за выполнение теста с порядковой или даже интервальной шкалой измерений; удобными, т.е. пригодными для быстрой математической обработки результатов; стандартными, т.е. пригодными для широкого практического использования - измерения уровня обученности возможно более широких контингентов обучаемых, овладевающих одинаковым объемом знаний на одном и том же уровне обучения. При подготовке материалов для тестирования необходимо придерживаться таких основных правил: 1. Нельзя включать ответы, неправильность которых на момент тестирования не может быть обоснована учащимися. 2. Неправильные ответы должны конструироваться на основе типичных ошибок и должны быть правдоподобными. 3. Правильные ответы среди всех предлагаемых ответов должны размещаться в случайном порядке. 4. Вопросы не должны повторять формулировок учебника. 5. Ответы на одни вопросы не должны быть подсказками для ответов на другие. 6. Вопросы не должны содержать «ловушек». Применение технических средств в конце ХХ в. оказало большое влияние не только на методы тестирования (появились компьютерные тесты), но и на методологию тестирования: были разработаны нетрадиционные тесты, к которым относятся интегративные, адаптивные тесты и тесты с критериально-ориентированной интерпретацией результатов. Тесты применяются на всех этапах дидактического процесса. С их помощью обеспечивается предварительный, текущий, тематический и итоговый контроль знаний, умений, учет успеваемости, академических достижений. Предварительный контроль. Успех изучения любой темы (раздела или курса) зависит от степени усвоения тех понятий, терминов, положений и т.д., которые изучались на предшествующих этапах обучения. Если информации об этом у преподавателя нет, то он лишен возможности проектирования и управления в учебном процессе, выбора оптимального его варианта. Необходимую информацию преподаватель получает, применяя предварительный контроль (учет) знаний. Последний необходим еще и для того, чтобы зафиксировать (сделать срез) исходный уровень обученности. Сравнение исходного начального уровня обученности с конечным (достигнутым) позволяет измерять «прирост» знаний, степень сформированности умений и навыков. Если известны входные и выходные характеристики системы, проблемы ее оптимизации считаются во многом решенными. Собрать максимальный объем информации о входных характеристиках обученности и оценить их в количественных показателях удается с помощью тестирования, которое осуществляется с помощью специально разработанных для этой цели заданий. Текущий контроль. Он необходим для диагностирования хода дидактического процесса, выявления динамики последнего, сопоставления реально достигнутых на отдельных этапах результатов тестирования с запроектированными. Кроме собственно прогностической функции текущий контроль и учет знаний, умений стимулирует учебный труд учащихся, способствует своевременному определению пробелов в усвоении материала, повышению общей продуктивности учебного труда. Тематический контроль. Составление тематического тестового задания требует кропотливого и тщательного труда. Ведь речь идет не просто о проверке усвоения отдельных элементов, а о понимании системы, объединяющей эти элементы. Значительную роль при этом играют синтетические, комплексные задания, объединяющие вопросы об отдельных понятиях темы, направленные на выявление информационных связей между ними. Итоговый контроль. Естественно, не все необходимые характеристики усвоения можно получить средствами тестирования. Такие, например, показатели, как умение конкретизировать свой ответ примерами, знание фактов, умение связно, логически и доказательно выражать свои мысли, некоторые другие характеристики знаний, умений, навыков диагностировать тестированием невозможно. Это значит, что тестирование должно обязательно сочетаться с другими традиционными формами и методами проверки, таким образом, результаты тестирования будут максимально точными. На основе вышеизложенного можно сделать следующий вывод. Несмотря на заметное отставание разработки и внедрения тестовых технологий в конце ХХ в., связанных с политикой СССР в 30-х гг., на сегодняшний день в России наблюдается заметное увеличение темпов развития тестологии, что связано с доступностью международного опыта и развитием компьютерной техники. Для дальнейшего развития тестовых технологий в стране необходима - правильность образовательной политики государства, улучшение качества тестов, применение новых технологий в тестировании и разработка не только итоговых, но и обучающих образовательных тестов. Технология разработки тестов в ИОС РЮИ МВД России Тесты в ИОС состоят из двух главных компонентов: тела теста и базы вопросов. Тело теста- это то, что студенты видят, когда выполняют задание. Оно так же определяет способ, который студенты взаимодействуют с тестом. Когда вы создаете тело теста, вы создаете контейнер для вопросов и набор правил, по которым пользователи будут взаимодействовать с тестом. Для создания тела теста нужно войти в режим «Редактировать», выбирать «Тест» из выпадающего меню «Добавить элемент курса…» в той секции курса, в которую вы хотите добавить тест. На странице «Добавить новый тест», дать тесту значащее имя и написать введение к тесту. После этого нужно включить все специфические указания к прохождению теста, такие как число попыток или правила подсчета результатов и продолжить оформление теста: Выберите параметры учета времени «Ограничение по времени»: - даты начала и окончания доступности теста. - время теста, сколько времени студентам дается на прохождение теста. По окончании этого периода тест автоматически отсылается с текущими ответами - пауза между попытками, можно установить задержку между попытками пройти тест для того чтобы предотвратить попытки обмануть систему отвечая сразу же на те же вопросы. 2. Выберите параметры отображения: - вопросов на странице, устанавливает число вопросов, которые единовременно показываются студенту. - случайный порядок вопросов, установите этот параметр в значение «Да», если хотите, чтобы вопросы выводились в случайном порядке. - индивидуальная настройка случайного порядка ответов, установка этого параметра в «Да» выводит ответы к вопросам в случайном порядке. 3. Выберите параметры попыток: - допустимое число попыток, ограничивает число попыток прохождения теста студентом. Можно установить его в неограниченное значение, либо от 1 до 6. - каждая попытка основана на предыдущей, если вы устанавливаете значение этого параметра в «Да», ответы студентов из предыдущих попыток будут отображаться, когда они будут проходить тест в следующий раз. 4. Выберите параметры оценивания: - метод оценки, на выбор вам предоставляется - самая лучшая попытка, средняя оценка, результат первой попытки или результат последней попытки. - начисление штрафов, при наличии нескольких правильных ответов, баллы за каждый неправильный ответ минусуется. - число цифр в оценке теста. 5. Параметры пересмотра теста. Можно выбрать показывать ли студентам их ответы вместе с их оценками, отображать ли правильные ответы, а так же комментарии к тесту или конкретным вопросам. 6. Параметры безопасности: - отображать тест в безопасном окне. Выбор этой опции отображает тест в новом окне без кнопок вперед и назад, без адресной строки или других элементов навигации. Это предотвращает переходы студентов на другие сайты во время теста. - требовать пароль. Можно установить пароль на тест, который студенты должны будут ввести, перед тем как приступят непосредственно к тесту. Таким образом можно ограничить круг лиц, проходящих тест и дату его прохождения. - требовать сетевой адрес. Этот параметр ограничивает доступ к тесту определенным диапазоном IP адресов. Если вы хотите, чтобы студенты проходили тест только из определенных аудиторий в учебном заведении, установите диапазон сетевых адресов, покрывающий сетевые адреса аудитории. 7. Добавить общий комментарий, то есть текст, который будет отображаться студенту после завершения теста. Текст может быть различным в зависимости от оценки, полученной в тесте. 8. И «Сохранить» тест. После того, как вы сохраните изменения, вы увидите второй экран редактирования, где вы сможете написать и выбрать вопросы, включаемые в тело теста. тест проверка знание Вопрос в теле теста может быть любого типа: с множественным выбором (вопросы с одним и многими верными ответами), множественным выбором, но только с двумя возможными вариантами ответа (да/нет), числовой (только числа в качестве ответа), вопрос на соответствие (вопрос на соответствие с двумя колонками), вычисляемый (математическое выражение с местами для подстановки, которое будет выбрано случайно из базы данных, когда студент будет проходить тест. База вопросов может содержать вопросы, организованные нужным вам способом: основанные на разделах, темах, важных понятиях или согласно другой схеме. Затем вопросы можно многократно использовать в других тестах различных занятиях, курсах. Размещено на www.allbest. |