Лекции.Орг
 

Категории:


Архитектурное бюро: Доминантами формообразования служат здесь в равной мере как контекст...


ОБНОВЛЕНИЕ ЗЕМЛИ: Прошло более трех лет с тех пор, как Совет Министров СССР и Центральный Комитет ВКП...


Расположение электрооборудования электропоезда ЭД4М

ТИПЫ, ФОРМЫ И ВИДЫ ТЕСТОВЫХ ЗАДАНИЙ



Любой тест представляет собой совокупность тестовых заданий. Тестовое задание – основная составляющая часть теста, которая состоит из инструкции для учащихся, текста задания, имеет однозначный правильный ответ и характеризуется набором показателей.

С точки зрения разработчика тестовые задания имеют следующую структуру:

1. Инструкция.

2. Текст задания (в том числе предлагаемые варианты ответов). 3. Правильный ответ.

Инструкция содержит указания, что надо делать испытуемому, как выполнять задание, где отмечать, как дописывать, сообщается общее время тестирования и т.д. Если тест имеет различные формы заданий, то при смене форм, перед каждым субтестом дается дополнительная инструкция по выполнению новой формы задания. Задания в субтесте рекомендуется располагать по нарастанию трудности.

После инструкции в тесте располагаются пронумерованные тестовые задания. Задания могут формулироваться как в утвердительной, так и в вопросительной форме и содержать или не содержать варианты ответов. Тестовое задание должно иметь однозначный правильный ответ.

Тестовые задания подразделяются по типам, формам и видам. В пользу разнообразия форм тестовых заданий можно привести следующие доводы:

— задания разной формы делают процесс тестирования менее монотонным, отодвигают порог наступления утомления, и в тест можно поместить большее количество заданий, что увеличивает его надежность;

— для разных элементов содержания образования подходят разные по форме задания, поэтому сведение многообразия учебного материала к одной форме заданий заведомо делает подобные тесты не соответствующими содержанию обучения и, тем самым, менее качественными (даже при большом количестве заданий).

Перед рассмотрением различных видов тестовых заданий вспомним 4 уровня усвоения знаний, выделенных В.П.Беспалько [1].

I. Уровень знакомства с учебным материалом (ведущие познавательные действия – узнавание, распознавание, различение).

II. Уровень репродуктивного воспроизведения (воспроизведение учебной информации по памяти или смыслу в знакомой ситуации, действие по образцу).

III. Уровень воспроизведения в измененной ситуации (собственные примеры, ситуации из жизни) – основной уровень в школе.

IV. Уровень творческого применения знаний с формированием нового знания.

Соответственно четырем уровням усвоения знаний формируются и тестовые задания четырех уровней. Тем самым снимаются возражения некоторых педагогов по поводу примитивности и простоты тестовых заданий.

Тестовые задания I уровня представляют собой задания на опознание, различение или классификацию объектов, явлений, понятий. Учащемуся необходимо определить, относится отдельно взятый объект к данному классу (виду) или нет. Более сложная форма – «выборочный» тест, когда выполнение задания осуществляется в условиях «помехи», создаваемой сходными вариантами ответов. Часто в таких тестовых заданиях используются «неполные» ответы, с пропуском существенных деталей.

Тестовые задания II уровня нередко составляются как «тесты-подстановки», в них учащиеся должны воспроизвести слово, фразу, формулу или другой элемент знания, пропущенный в тексте. Более сложны «конструктивные» тесты, в которых ученик должен воспроизвести (сконструировать) требуемое в полном объеме. Новой информации из теста он не получит.

Тестовые задания III уровня специально разрабатываются для проверки определенных умений и содержат «типовые» вопросы и задачи. Обучающий эффект тестовых заданий третьего уровня состоит в том, что учащийся в ходе выполнения не просто повторяет уже отработанные действия, но преобразует их в связи с ситуацией.

Тестовые задания IV уровня выявляют умение учащихся ориентироваться и принимать решения в проблемных ситуациях. Работая с такими заданиями, школьник приобретает новые знания и умения как следствие расширения и трансформации усвоенного.

По способу формулированияразличают 6 основных видов тестовых заданийи 2 дополнительных.

Возможные типы и виды тестовых заданий представлены на рис. 1. За основу взята классификация тестовых заданий А.Н.Майорова [2].

 

Рис.1. Типы и виды тестовых заданий.

Помимо этого, любое из представленных на схеме тестовых заданий по форме выражения информации может быть:

вербальным, т.е. информация выражена словами;

невербальным – информация выражена рисунком, схемой, видеофрагментом, слайдом и др. подобными формами[1].

Выбор типа задания влияет на результаты обучения. Так, задания закрытого типа содержат варианты готовых ответов, из которых учащиеся должны самостоятельно выбрать правильный (правильные). Ответ на такое задание легко фиксировать и однозначно оценивать. В отличие от заданий открытого типа они содержат подсказку, что повышает их обучающую функцию, но снижает объективность контроля. Задания альтернативных ответов несут в себе максимальную подсказку; для повторения материала и для закрепления знаний они наиболее полезны.

Задания открытого типа предполагают самостоятельный ответ учащихся без каких-либо ограничений и подсказок. Это широко известные традиционные вопросы, применяемые при устном и письменном опросе. Они позволяют проверять любые уровни знаний, но их трудно однозначно оценить.

Задания закрытого типа

Тестовые задания закрытого типа имеют варианты готовых ответов на поставленный вопрос, и надо выбрать один (или несколько) правильных ответов из ряда предлагаемых. Все варианты ответов должны быть правдоподобными, но могут содержать типичные ошибки и затруднения.

1. Задания альтернативных ответов (АО).

К каждому заданию дается только два варианта ответов: «Да» или «Нет» («верно» – «неверно»). Испытуемый должен выбрать один из них.

Форма задания:

Утверждение 1 Утверждение 2 Утверждение 3 Утверждение 4 Да Да Да Да Нет Нет Нет Нет

При составлении такого задания формулировать основной текст надо таким образом, чтобы не возникало возможности двусмысленного ответа (и «да», и «нет»).

Пример 1.

Инструкция. Выберите ответ «да» или «нет».

Задание.Квадратное уравнение с отрицательным дискриминантом не имеет действительных корней

Варианты ответа:

а) да; б) нет.

В этом задании могут появиться двусмысленные ответы: «да» (не имеет), «нет» (у него нет действительных корней). И теми, и другими испытуемыми подразумевался один и тот же ответ. Задание необходимо переделать. Ниже приводится один из вариантов переделанного задания.

Пример 2.

Инструкция. Выберите ответ «да» или «нет».

Задание.Квадратное уравнение с отрицательным дискриминантом имеет действительные корни

Варианты ответа:

а) да; б) нет.

Ответ становится однозначным, но задание все равно составлено неудачно.

У одиночного задания альтернативных ответов (см. пример 2) очень высока вероятность угадывания правильного ответа (50%). Поэтому такие задания лучше использовать длинными сериями к одному элементу знаний (см. пример 3) – шансы дать верные ответы на 10 таких вопросов, уже невелики.

Пример 3.

Инструкция. Выберите ответ «да» или «нет». (Если вы согласны с утверждением – «да», а если не согласны – «нет».)

Задание. Биосфера – это часть...

Варианты ответа:

да нет – …геологической оболочки Земли
да нет – …биологической оболочки Земли
да нет – …гидрологической оболочки Земли
да нет – …где присутствует воздух
да нет – …населенная организмами
да нет – …где возможна жизнь

 

Ответ: да – нет – нет – нет – да – нет.

Задания альтернативных ответов формулируются в форме утверждений, поскольку предполагают согласие или несогласие, которое можно отнести к утверждениям.

Задания АО больше всего подходят для выявления знаний сложных определений, правил, проверки понимания сложных графиков, диаграмм, схем.

2. Задания множественного выбора.

Это самый распространенный вид заданий, применяемый в тестах достижений. Испытуемый должен выбрать один правильный (иногда – несколько правильных) ответ из предложенных вариантов, либо один (несколько) неправильных. Оптимально предлагать в заданиях данного вида 5 вариантов ответов, минимальное количество возможных вариантов ответа – 3, иначе возрастает вероятность простого угадывания.

Остальные варианты ответов – неправильные, но правдоподобные, – называются дистракторами(от англ. Distract –отвлекать). Неправильные ответы рекомендуется составлять на основе типичных ошибок обучаемых. Поиски правдоподобных однородных и оригинальных ответов составляют главную трудность для разработчиков.

Форма задания:

Вопрос (утверждение):

А. Вариант ответа 1

Б. Вариант ответа 2

В. Вариант ответа 3

Г. Вариант ответа 4

Д. Вариант ответа 5

 

Пример 4.

Инструкция. Укажите номер правильного ответа.

Задание. К какой группе веществ относится серная кислота?

Варианты ответа:

1. Не электролит.

2. Слабый электролит.

3. Электролит средней силы.

4. Сильный электролит.

Ответ: 4.

Расположение в ответах характеристик силы электролита по степени возрастания (убывания) не приводит к потере времени при чтении, что более удачно в сравнении с хаотичной по этому признаку расстановкой ответов. Задания лучше формулировать в повествовательной форме.

Пример 5.

Инструкция. Выберите верный ответ.

Задание. Катер плывет по реке, скорость течения равна а, скорость катера в стоячей воде равна b. Какая из формул выражает время, затраченное катером, чтобы спуститься вниз по течению на 30 км и вернуться обратно? (Время стоянки не учитывать).

Варианты ответа:

а) ; б) ; в) ; г) .

Ответ: б).

Это хорошее задание для проверки знания формул и умения выполнять математические и другие познавательные операции. Выбрать верный ответ можно, только совершив определенные действия.

Пример 6.

Инструкция. Выберите верный ответ.

Задание. Империя – это …

Варианты ответа.

а) большое государство.

б) государство, управляемое императором.

в) государство, состоящее из метрополий и колоний.

г) сильное государство.

д) недемократическое государство.

Ответ:в).

Строго говоря, согласно словарным определениям верен и ответ б). Но засчитывается только ответ в). Проверяющий получает искаженные данные о знаниях испытуемого. Верный ответ должен быть единственным. В варианте ответа б) слово «императором» можно заменить «царем».

3. Задания на восстановление соответствия.

В заданиях на восстановление соответствия испытуемому необходимо определить соответствия между элементами двух множеств. Элементами множеств могут служить как вербальные, так и невербальные формы выражения знаний (рисунки, графики, условные обозначения и др.)

Поскольку в таких заданиях существуют два ряда объектов, разумно один из них обозначать цифрами, а другой – буквами, что помогает избежать путаницы при выполнении заданий.

Этот тип заданий достаточно разнообразен по форме предъявления материала и может быть успешно использован по всем учебным предметам и предметным областям.

 

 

Пример 7.

Инструкция. Соотнесите схемы и значения общего сопротивления цепи.

Варианты ответа:

1. 4,4 Ом
2. 4,5 Ом
3.~ 1,9 Ом
4.~ 7,3 Ом
5.~ 1,7 Ом

 

Ответ: I. II. III. IV. V. 3 1 2 5 4

У задания, приведенного в примере 7, есть существенный недостаток: для того, чтобы дать правильный ответ, совсем необязательно вычислять сопротивления всех 5 схем. Достаточно вычислить 4 сопротивления, а пятой схеме поставить в соответствие оставшееся пятое численное значение.

Пример 8.

Инструкция. Соотнесите написанное в столбцах 1 и 2.

Задание. Кто написал?

Варианты ответа:

 

ПРОИЗВЕДЕНИЕ А. Обломов Б. Капитанская дочка В. Севастопольские рассказы Г. Лес Д. Крыжовник АВТОР 1. Л.Н. Толстой 2. А.Н. Островский 3. А.С. Пушкин 4. А.П. Чехов 5. И.А. Гончаров

 

Ответ
А
Б
В
Г
Д

 

 

 
 
Или: А__, Б__ , В__ , Г__ , Д__ .

 

 


Это задание неудачное по двум причинам. Слишком короткая и некорректная формулировка вопроса, что требует дополнительных пояснений. Но главное, каждому произведению поставлен один автор, и при 4-х правильных ответах пятый ответ будет неизбежно правильным. Лучше подобное задание предложить в следующем варианте.

Пример 9.

Инструкция. Укажите буквой, какому автору принадлежат книги, указанные в списке (оставьте незаполненной графу напротив книги, автор которой не указан в левом списке).

Задание. Какому автору принадлежит произведение?

Авторы Произведения Буква
А. Диккенс Ч. «Ярмарка тщеславия»  
Б. Скотт В. «Домби и сын»  
В. Смоллетт Т.Д. «Пуритане»  
Г. Теккерей У. «Лунный камень»  
«Памелла»  
«Гамфри Клинкер»  

Ответ: Г, А, Б, – , – , В.

Предъявление списков неравной длины уменьшает вероятность угадывания правильного ответа.

Заданиям на соответствие, как и альтернативным заданиям, присущ недостаток – опасность тривиального тестирования. Знание автора произведения является не столь важным (но все-таки необходимым) по сравнению с умениями анализировать произведение или выразить свое отношение к его проблематике.

Поэтому задания на восстановления соответствия используют для быстрой проверки знания фактов, событий, дат, персоналий, формул, наличия умений и навыков в конкретной области. Это могут быть:

— список растений (животных) и таксономический ряд – в биологии;

— слова и соответствующие части речи или орфограммы и пр.– в филологии;

— даты, события, личности и др. – в истории;

— формулы, правила, законы и конкретные случаи их применения – в точных науках;

— причинно-следственные связи, субъект-объектные отношения и т.п. – в психологии, философии, социологии;

Все выше названные вербальные элементы знаний могут быть соотнесены с невербальными (звуковыми и видеофрагментами, рисунками, фотографиями, картами и т.п.).

При составлении заданий на восстановление соответствия необходимо соблюдать также следующие требования:

1) Элементы каждого из двух множеств должны быть выбраны по одному основанию.

2) Число элементов одного списка не должно превышать 10.

3) Оба списка необходимо располагать на одной странице, не допуская переноса отдельных элементов.

4. Задания на восстановления последовательности.

Эти задания можно рассматривать как вариант заданий на восстановление соответствия с одной особенностью: нужно перечислить поданное в списке в правильной последовательности. Тестовые задания на установление правильной последовательности предназначены для оценки уровня владения последовательностью действий, процессов и т.п. Элементы, связанные с определенной задачей, приводятся в заданиях в произвольном порядке, а ученик должен установить правильный порядок предложенных элементов и указать его заданным способом в специально отведенном для этого месте.

Пример 10.

Инструкция. Расположите в правильной последовательности (в столбце ответов поставьте соответствующие буквы).

Задание. Расположите этапы зародышевого развития позвоночных животных в правильном порядке:

Варианты ответа:

1.   А. Дробление
2.   Б. Зигота
3.   В. Бластула
4.   Г. Закладка органов
5.   Д. Гаструла

Правильный ответ:

1. Б.
2. А.
3. В.
4. Д.
5. Г.

 

Задания на восстановление последовательности незаслуженно редко используются в тестировании. Это очень качественная форма тестовых заданий, обладающая краткостью и простотой проверки, экономит время работы и составителя, и испытуемого.

Данные тестовые задания подходят для любого предмета, где присутствуют алгоритмическая деятельность, анализируются временные события, логика исследования. Это может быть:

— порядок технологических операций, спортивных действий – в технологических дисциплинах и спорте;

— восстановление временных последовательностей событий;

— этапы словообразования и т.п. для уроков русского (иностранного) языка;

— последовательность анализа художественного произведения для уроков литературы;

— алгоритмы решения задач для точных наук, логика исследования объектов (явлений);

— этапы развития философской мысли в философии и многое др.

Следует отметить очень низкую вероятность угадывания верных ответов.

5. Задания группировки.

Данная форма тестового задания является модификацией заданий на восстановление последовательности. В таком заданиипредлагается составить из фрагментов 2-3 небольших рассказа, в каждом из которых описывается одно понятие (закономерность, событие). Начала рассказов объединены в группу А (в произвольном порядке), следующие фрагменты – в группы Б, Ви т.д.

Тестовые задания группировки удобны тем, что позволяют охватить признаки сходства и различия родственных понятий, требуют разнообразной аналитико-синтетической деятельности, связанной с сопоставлением, выделением существенных признаков, анализом.

Принцип группировки оптимален для установления последовательности протекания событий и явлений, описания свойств изучаемого объекта, сопоставления характеристик и условий с последующими выводами и обобщениями.

Можно использовать любой описательный материал, допускающий логическое структурирование. Задания-группировки удобны для проверки знания алгоритма какой-либо деятельности, а также для оценки глубины усвоения при обобщении материала. Следует отметить также низкую вероятность угадывания правильного ответа, свойственную этому виду заданий.

Форма задания:

Инструкция. Составьте тексты из фрагментов А, Б, В.

Задание.

А.1) Начало первого текста…

2) Начало второго текста…

3) Начало третьего текста…

Б.1) продолжение третьего текста…

2) продолжение первого текста…

3) продолжение второго текста…

В. 1) окончание третьего текста.

2) окончание второго текста.

3) окончание первого текста.

Правильный ответ: А1 Б2 В3; А2 Б3 В2; А3 Б1 В1.

 

Пример 11.

Инструкция. Составь текст из фрагментов А, Б, В, Г, Д.

Задание.

А.1) Деление клетки…

2) Обмен веществ в клетке необходим для…

3) Растения называют…

Б.1) производителями органического вещества потому, что…

2) сложный процесс…

3) снабжения клетки…

В. 1) связанный с ростом и ...

2) строительным материалом и энергией ...

3) в процессе фотосинтеза создают …

Г. 1) размножением клеток ...

2) обеспечивающих рост и жизнедеятельность клетки...

3) из неорганических веществ (углекислого газа, воды) в присутствии света …

Д.1) продолжается непрерывно, пока клетка жива.

2) органическое вещество крахмал и кислород.

3) двумя способами – бесполым и половым.

Правильный ответ: А1 Б2 В2 Г3 Д2 и т.д.

В заключение обзора заданий закрытого типа отметим их основные преимущества:

— отсутствуют факторы, связанные с субъективными оценками;

— на качество ответа не влияет, умеют ли испытуемые хорошо формулировать ответы, т.к. выбираются готовые ответы.

— возможна машинная обработка ответов и анализ результатов, поэтому тестирование проводится быстро.

Задания открытого типа

Тестовые задания открытого типа рассчитаны на ответ в свободной форме. Обычная алгоритмическая программа, используемая для оценивания результатов закрытых тестов, для тестов открытого типа непригодна. Как правило, открытые тестовые задания используются для выявления эвристических, креативных умений и оцениваются экспертами.

К ним относятся задания двух видов.

1. Задания свободного изложения.

Они предполагают свободные ответы испытуемых по сути задания. На ответы не накладываются ограничения, однако, формулировка заданий должна обеспечивать наличие только одного правильного ответа. Компьютерная проверка таких заданий затруднена, оценивают ответы эксперты.

Пример 12.

Инструкция. Закончи предложение. Вместо многоточия можно вписать словосочетание, фразу, предложение или даже несколько предложений.

Задание. Имя существительное – это …

Ответ.Ответ считается правильным, если содержит следующие ключевые слова или их синонимы: «часть речи», «обозначает предметы», «отвечает на вопросы кто? что?».

2. Задания дополнения (или другое название: задания с ограничением на ответы).

В этих заданиях тестируемые должны также самостоятельно сформулировать ответы на вопросы, но их возможности ограничены (задано количество слов, знаков, символов, которые можно использовать при ответе).

Пример 13.

Инструкция. Впиши пропущенные слова. Одному пропуску соответствует только одно слово.

Задание. Самостоятельная часть речи, обозначающая предмет и отвечающая на вопросы кто? что? – это … …

Ответ. Имя существительное.

Правильный ответ задается достаточно однозначно, поэтому задания дополнения могут включаться в компьютерный тест (правильность ответа может быть проверена при помощи компьютера).

Задания на дополнение имеют ограниченную сферу применения. С помощью таких заданий проверяются остаточные знания, умения воспроизводить и применять знания в знакомой ситуации, ограничена возможность проверки понимания изученного материала, т.е. задание можно отнести к I или II уровню сложности, в то время как задание свободного изложения может иметь от II до IV уровня сложности.

При составлении заданий дополнения следует придерживаться специфических правил:

— использовать не более 3-х пропусков подряд;

— дополнять нужно самое важное, знание чего и необходимо проверить;

— дополнения лучше ставить в конце предложения.

3. Тестовое задание-дискуссия.

Является разновидностью тестового задания свободного изложения. Особенностью тестового задания-дискуссии является формулировка заданий в виде проблемных вопросов, требующих альтернативного выбора ответа с последующим обоснованием своей позиции в свободной форме.

Пример 14.

Инструкция. Будь судьей в споре! Выбери и аргументируй верный ответ.

Задание. «Можно ли считать кита большой рыбой?»

Варианты ответов:

1. Да, т.к. …

2. Нет, т.к. …

Ответ обосновать в свободной форме.

Верный ответ: нет, если в аргументации содержатся следующие ключевые слова или их синонимы: «млекопитающее», «дышит легкими», «теплокровное».

Иногда возможен и третий вариант ответа:

3. Ни то, ни другое, т.к. …

Основной трудностью при составлении заданий открытого типа является соблюдение главного требования к тестовым заданиям – наличие однозначного правильного ответа.

Существует несколько приемов, позволяющих формализовать свободный ответ, сделать его однозначным. Покажем это на конкретных примерах.

Пример 15.

Инструкция. Закончите предложение.

Задание. Инерция – это …

Ответ. «… явление сохранения равномерного прямолинейного движения при компенсации всех внешних воздействий на тело».

Это пример неудачно сформулированного ответа. Задание с таким вариантом ответа невозможно обработать. Вероятность точного (дословного) совпадения с контрольным образцом ответа мала.

Ответы «явление», «сохранение равномерного прямолинейного движения», «движение при компенсации внешних воздействий» могут считаться частично правильными, что нарушает основное требование к тестовым заданиям (единственности верного ответа) и приводит к субъективным оценкам.

В данном случае возможно несколько вариантов выхода из создавшегося положения.

1. Попытаться переформулировать задание, чтобы ответ стал однозначным, например:

Задание. «Явление сохранения равномерного прямолинейного движения при компенсации всех внешних воздействий на тело называется …».

Ответ. «…инерцией».

Ответ становится однозначным, но по сравнению с исходным, это задание значительно проще и, кроме того, не проверяет собственно знание самого определения.





Дата добавления: 2016-11-18; просмотров: 6057 | Нарушение авторских прав


Рекомендуемый контект:


Похожая информация:

  1. Choose the correct answerНачалоформы
  2. Cущность и формы предпринимательства
  3. I. ВИДЫ, ФОРМЫ И НАПРАВЛЕНИЯ ОРГАНИЗАЦИИ САМОСТОЯТЕЛЬНОЙ РАБОТЫ СТУДЕНТОВ
  4. I. Определите все временные формы сказуемых. Переведите
  5. I. Фармацевтическая экспертиза прописи рецепта. 1. Проверить совместимость ингредиентов, следует отличать от лекарственной формы «Эмульсии» несмешиваемость
  6. II. Контроль заключительного уровня знаний. Решение тестовых заданий.
  7. II. УЧЕБНО-МЕТОДИЧЕСКИЕ РЕКОМЕНДАЦИИ ДЛЯ СТУДЕНТОВ ДНЕВНОЙ ФОРМЫ ОБУЧЕНИЯ ВСЕХ НЕФИЛОСОФСКИХ СПЕЦИАЛЬНОСТЕЙ 1 страница
  8. II. УЧЕБНО-МЕТОДИЧЕСКИЕ РЕКОМЕНДАЦИИ ДЛЯ СТУДЕНТОВ ДНЕВНОЙ ФОРМЫ ОБУЧЕНИЯ ВСЕХ НЕФИЛОСОФСКИХ СПЕЦИАЛЬНОСТЕЙ 2 страница
  9. II. УЧЕБНО-МЕТОДИЧЕСКИЕ РЕКОМЕНДАЦИИ ДЛЯ СТУДЕНТОВ ДНЕВНОЙ ФОРМЫ ОБУЧЕНИЯ ВСЕХ НЕФИЛОСОФСКИХ СПЕЦИАЛЬНОСТЕЙ 3 страница
  10. II. УЧЕБНО-МЕТОДИЧЕСКИЕ РЕКОМЕНДАЦИИ ДЛЯ СТУДЕНТОВ ДНЕВНОЙ ФОРМЫ ОБУЧЕНИЯ ВСЕХ НЕФИЛОСОФСКИХ СПЕЦИАЛЬНОСТЕЙ 4 страница
  11. II. УЧЕБНО-МЕТОДИЧЕСКИЕ РЕКОМЕНДАЦИИ ДЛЯ СТУДЕНТОВ ДНЕВНОЙ ФОРМЫ ОБУЧЕНИЯ ВСЕХ НЕФИЛОСОФСКИХ СПЕЦИАЛЬНОСТЕЙ 5 страница
  12. II. Формы и методы деятельности по утверждению трезвости


Поиск на сайте:


© 2015-2019 lektsii.org - Контакты - Последнее добавление

Ген: 0.03 с.