ФГБОУ ВО «МОРДОВСКИЙ ГОСУДАРСТВЕННЫЙ ПЕДАГОГИЧЕСКИЙ ИНСТИТУТ ИМЕНИ М. Е. ЕВСЕВЬЕВА»

Факультет физико-математический

 

Кафедра информатики и вычислительной техники

 

 

 

РЕФЕРАТ

По проектированию информационно образовательной среды

 

Онлайн тестирование – конструирование тестов

 

 

 

Реферат выполнила

студентка 2 курса группы МДМ-216 ______________________ А.А.Буянова

 Направление подготовки 44.03.05 «Педагогическое образование».

 Профиль подготовки «Математика. Информатика».

 

Реферат проверила

 канд. физ. мат. наук, доцент ________________________ Т. В. Кормилицына

 

 

Саранск 2017

 

Оглавление

Введение. 3

1. Общая характеристика тестов................................................................................4

2. Специфика компьютерного тестирования и его формы......................................7

3. Online-тестирование, его применение в дистанционном обучении.................13

Заключение................................................................................................................16

Список использованных источников .....................................................................18

 

 

 

 

        

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

Введение

 

Тестирование (англ. test - испытание, проверка) - экспериментальный метод психодиагностики, применяемый в эмпирических социологических исследованиях, а также метод измерения и оценки различных психологических качеств и состояний индивида.

Возникновение тестологических процедур было обусловлено потребностью сопоставления (сравнения, дифференциации и ранжирования) индивидов по уровню развития или степени выраженности различных психологических качеств.

Основоположники тестирования - Ф.Гальтон, Ч.Спирман, Дж.Каттел, А.Бине, Т.Симон. Сам термин "умственный тест" придумал Кеттел в 1890 г. Начало развития современной тестологии массового применения тестов на практике связано с именем французского врача Бине, разработавшего в соавторстве с Симоном метрическую шкалу умственного развития, известную под названием "тест Бине-Симона".

Широкому распространению, развитию и совершенствованию тестов способствовал целый ряд преимуществ, которые дает этот метод. Тесты позволяют дать оценку индивида в соответствии с поставленной целью исследования; обеспечивают возможность получения количественной оценки на основе квантификации качественных параметров личности и удобство математической обработки; являются относительно оперативным способом оценки большого числа неизвестных лиц; способствуют объективности оценок, не зависящих от субъективных установок лица, проводящего исследование; обеспечивают сопоставимость информации, полученной разными исследователями на разных испытуемых.

 

 

 

 

1. Общая характеристика тестов

 

Тесты предъявляют требования:

- строгая формализация всех этапов тестирования,

- стандартизация заданий и условий их выполнения,

- квантификация полученных результатов и их структурирование по заданной программе,

- интерпретации результатов на основе предварительно полученного распределения по изучаемому признаку.

Каждый тест, соответствующий критериям надежности, кроме набора заданий включает в себя следующие компоненты:

1) стандартная инструкция для испытуемого о цели и правилах выполнения заданий,

2) ключ шкалирования - соотнесение пунктов заданий со шкалами измеряемых качеств, указывающее, какой пункт заданий к какой шкале относится,

3) кодировочный ключ, позволяющий подсчитать, сколько баллов вносит в шкалу тот или иной вариант ответа,

4) ключ интерпретации полученного индекса, представляющий собой данные нормы, с которыми соотносится полученный результат.

Разработка теста состоит из четырех этапов.

- На первом этапе развивается исходная концепция с формулировкой основных пунктов испытания или основных вопросов, носящих предварительный характер;

- на втором - производится отбор предварительных пунктов испытания с из последующей селекцией и приведением к окончательному виду, осуществляется одновременно оценка по качественным критериям надежности и валидности;

- на третьем этапе тест проверяется повторно на той же самой популяции;

- на четвертом - калибруется по отношению к возрасту, уровню образования и другим признакам популяции.

На всех этапах разработки теста необходимо учитывать:

а) диагностируемое свойство личности (размер, положение, индикатор) или только наблюдаемые его проявления (например, способности, уровень знаний, темперамент, интересы, установки);

б) связанную с этим валидизацию метода , т.е. определение того, насколько он измеряет требуемое свойство;

в) величину выборки из популяции, на которой должна проводиться оценка метода;

г) стимулирующий материал (таблички, изображения, игрушки, фильмы);

д) влияние исследователя в процессе инструктирования, постановки задач, разъяснений, ответов на вопросы;

е) условия ситуации;

ж) такие формы поведения испытуемого, которые свидетельствуют об измеряемом свойстве;

з) шкалиpование релевантных форм поведения;

и) сведение результатов по отдельным измеряемым пунктам в общие значения (например, суммирование ответов типа "Да");

к) формулировку результатов в нормированной шкале оценок.

Одним из вариантов теста может быть опросник, но при условии, что он отвечает требованиям, предъявляемым к тестам. Опросник - это сборник вопросов, которые выбираются и располагаются по отношению друг к другу в соответствии с требуемым содержанием. Опросники используются, например, в целях психодиагностики, когда от испытуемого требуется самооценка его поведения, привычек, мнений и т.д. При этом испытуемый, отвечая на вопросы, выражает свои положительные и отрицательные предпочтения. С помощью опросников можно измерять у испытуемых и оценки ими других людей. Задание обычно выступает, как прямая реакция на вопросы, на которые надо ответить путем сожаления или опровержения. Возможности для ответа в большинстве случаев заданы и требуют лишь отметки в виде крестика, кружочка и т.п. Недостаток опросника состоит в том, что испытуемый может симулировать или диссимулировать те или иные свойства личности. Преодолеть указанный недостаток (хотя и не полностью) исследователь может посредством контрольных вопросов, контрольных шкал, шкал "лжи". Опросники применяются преимущественно для диагностики характера, диагностики личности (например, экстраверсии - интроверсии, интересов, установок, мотивов).

Диагностика личности - совокупность методов, позволяющих распознать ее в неинтеллектуальные свойства, носящие характер относительно устойчивых диспозиций. Для таких свойств личности, как экстраверсия - интроверсия, доминирующий мотив, заторможенность, возбудимость, ригидность, разработан ряд диагностических методов (опросники и проективные тесты), с помощью которых можно определить выраженность этих свойств. При конструировании таких методов, как правило, пользуются факторным анализом (Г. Айзенк, Дж.Каттел, Дж. Гилфорд) и конструктивной валидизацией.

На современном этапе в прикладной социологии чаще всего используются тестовые методики, заимствованные из социальной психологии, касающиеся изучения качеств личности. Появляются тесты, специально разработанные социологами. Эти тесты часто используются в социологических анкетах.

 

 

 

 

 

 

 

 

 

 

 

2. Специфика компьютерного тестирования и его формы

 

Общие представления о компьютерном тестировании. 

С начала XXI в. в образовании тестирования стали широко применяться компьютеры. В педагогических инновациях появилось отдельное направление – компьютерное тестирование, при котором предъявление тестов, оценивание результатов учащихся и выдача им результатов осуществляется с помощью ПК.

Этап генерации тестов технологически может протекать по–разному, в том числе путем ввода в компьютер бланковых тестов. На сегодняшний день по компьютерному тестированию имеются многочисленные публикации, разработаны программно-инструментальные средства для генерации и предъявления тестов.

Когда необходимо обращаться к компьютерному тестированию. Хотя компьютерное тестирование значительно облегчает работу учителя при предъявлении и оценивании результатов выполнения тестов, его распространение во многом не более чем дань моде, все негативные последствия которые до сих пор не выявлены по полной мере. Выбор компьютерного формата экзамена должен основываться на более важных и обоснованных предпосылках, чем просто увлечение инновациями, поскольку он порождает множество проблем и ставит учащихся в неравные условия. Обращаться к компьютерному тестированию следует в тех случаях, когда есть настоятельная потребность в отказе от традиционных бланковых тестов.

Например, компьютерное тестирование необходимо при проведении ЕГЭ в труднодоступных районах России. Сбор выпускников отдельных районов в обозначенное время проведения ЕГЭ становится настолько сложным и дорогостоящим мероприятием, что обойтись без компьютерного тестирования и современных средств коммуникации просто невозможно. Компьютерное тестирование целесообразно также применять при проведении экзаменов для детей с ограниченными возможностями, имеющих серьезные нарушения зрения или слуха. С помощью ПК можно использовать большие по размерам шрифты, аудиозаписи, дополнительные устройства для ввода данных тестирования и другие приспособления, компенсирующие на экзаменах потенциальное отставание детей с ограниченными возможностями.

Формы осуществления компьютерного тестирования. 

Компьютерное тестирование может проводиться в различных формах, различающихся по технологии объединения заданий в тест (рис.1) часть из них пока не получили специального названия в литературе по тестовой проблематике.

 

Рис.1. Формы компьютерного тестирования

 Первая форма – самая простая. Готовый тест, стандартизированный или предназначенный для текущего контроля, вводится в специальную оболочку, функции которой могут различаться по степени полноты. Обычно при итоговом тестировании оболочка позволяет предъявлять задания на экране, оценивать результаты их выполнения, формировать матрицу результатов тестирования, обрабатывать ее и шкалировать первичные баллы испытуемых путем перевода в одну из стандартных шкал для выдачи каждому испытуемому тестового балла и протокола его оценок по заданиям теста. 

Вторая форма компьютерного тестирования предполагает автоматизированную генерацию вариантов теста, осуществляемую с помощью инструментальных средств. Варианты создаются перед экзаменом или непосредственно во время его проведения из банка калиброванных тестовых заданий с устойчивыми статистическими характеристиками. Калибровка достигается благодаря длительной предварительной работе по формированию бланка, параметры заданий которого получают на репрезентативной выборке учащихся, как правило, на протяжении 3—4 лет с помощью бланковых тестов. Содержательная валидность и параллельность вариантов обеспечиваются за счет строго регламентированного отбора заданий каждого варианта в соответствии со спецификацией теста.

Третья форма – компьютерное адаптивное тестирование – базируется на специальных адаптивных тестах. В основе идей адаптивности лежат соображения о том, что учащемуся бесполезно давать задания теста, которые он выполнит наверняка правильно без малейших затруднений, или гарантированно не справится в силу высокой трудности. Поэтому предлагается оптимизировать трудность заданий, адаптируя ее к уровню подготовленности каждого испытуемого, и сократить за счет исключения части заданий длину теста.

Достоинства и недостатки компьютерного тестирования. 

Компьютерное тестирование имеет определенные преимущества по сравнению с традиционным бланковым тестирование, которые проявляются особенно заметно при массовых проверках, например при проведении национальных экзаменов типа ЕГЭ. Предъявление вариантов теста на компьютере позволяет сэкономить средства, рекомендуемые обычно  на печать и транспортировку бланковых тестов.

Благодаря компьютерному тестированию можно повысить информационную безопасность и предотвратить  рассекречивание теста за счет высокой скорости передачи информации и специальной защиты электронных файлов. Упрощается также процедура подсчета результирующих баллов в тех случаях, когда тест содержит только задания  с выбором ответов.

Другие преимущества компьютерного тестирования проявляются в текущем контроле, при самоконтроле и самоподготовке учащихся; благодаря компьютеру можно незамедлительно выдать тестовый балл и принять неотложные меры по коррекции усвоения нового материала на основе анализа протоколов по результатам выполнения корректирующих и диагностических тестов. Возможности педагогического контроля при компьютерном тестировании значительно увеличивается за счет расширения спектра измеряемых умений и навыков в инновационных типах тестовых заданий, использующих многообразные возможности компьютера при включении аудио- и видеофайлов, интерактивности, динамической постановки проблем с помощью мультимедийных средств и др.

Благодаря компьютерном тестированию повышаются информационные возможности процесса контроля, появляется возможность сбора дополнительных данных о динамике прохождения теста отдельными учащимися и для осуществления дифференциации пропущенных и не доступных заданий теста.

Помимо неоспоримых достоинств компьютерное тестирование имеет ряд недостатков, которые представлены на рис.2.

Рис.2 Проблемы, возникающие при компьютерном тестировании

 Типичные психологические и эмоциональные реакции учащихся на компьютерном тестировании. 

Обычно психологические и эмоциональные реакции учащихся на компьютерное тестирование носят позитивный характер. Учащимся нравится незамедлительная выдача тестовых баллов, протокола тестирования с результатами по каждому заданию, а также сам инновационный характер контроля в том случае, когда привлекаются современные гипермедийные технологии по выдачи теста. Динамическое мультимедийное сопровождение заданий на компьютере, объединенное программными средствами для представления в интерактивном режиме, по мнению учащихся, обеспечивает более точную оценку знаний и умений, сильнее мотивирует к выполнению заданий по сравнению с бланковыми тестами. Удобно также то, что вместо заполнения специальных форм для ответов можно просто выбрать ответ мышью. Если тестирование проходит в адаптивном режиме, то сокращается время проведения экзамена и длина теста.

Негативные реакции обычно вызывают различные ограничения, которые иногда накладываются при выдачи заданий в компьютерном тестировании. Например, фиксируется либо порядок предъявления заданий, либо максимально возможное время выполнения каждого задания, после истечения которого независимо от желания испытуемого  появляется следующее задание теста. В адаптивном тестировании учащиеся бывают недовольны тем, что они не имеют возможности пропустить очередное задание, просмотреть весь тест до начала работы над ним и изменить ответы на предыдущие задания. Иногда школьники возражают против компьютерного тестирования из-за трудностей, которые возникают при выполнении и записи математических вычислений и т.д.

Воздействие на выполнение теста предшествующего уровня компьютерного опыта. 

Результаты зарубежных исследований показали, что опыт работы на компьютерах, имеющийся у школьников, во многих случаях значительно влияет на валидность результатов выполнения теста.  Если в тест включены задания без инноваций с выбором ответов, то влияние опыта работы с компьютером на результаты тестирования незначительно, поскольку от учащихся в таких заданиях не требуется никаких сложных действий при выполнении теста. При предъявлении на экране инновационных типов заданий, широко использующих средства компьютерной графики, и другие новшества, влияние предшествующего компьютерного опыта на тестовый балл становится очень значительным. Таким образом, при компьютерном тестировании необходимо учитывать   уровень компьютерного уровня учащихся, для которого предназначается тест.

Влияние интерфейса пользователя на результаты компьютерного тестирования.

 Интерфейс пользователя включает доступные учащемуся функции и возможности движения по заданиям теста, элементы размещения информации на экране, а также общий визуальный стиль представления информации. Хороший интерфейс пользователя должен обладать ясностью и корректностью логической последовательности взаимодействия с экзаменуемым, отражая общие принципы дизайна графической информации. Чем более продуман интерфейс, тем меньше внимания учащийся на него обращает, сосредоточивая все свои усилия на выполнении заданий теста.

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

3. Online-тестирование, его применение в дистанционном обучении

 

 Уровни интерактивности.

В самом простом понимании интерак­тивного режима обучения учащийся имеет возможность получать (читать, смотреть, слушать) только ту информацию, которую он выбирает для усвоения с использованием компьютера. Усложне­ние возможностей и технологии осуществления интерактивного режима приводит к моделированию окружающего мира и поведе­ния объектов в нем, позволяя имитировать реальность.

Конечно, на сегодняшний день, в силу многих причин, в обу­чении используются далеко не все возможности интерактивного режима. В частности, по мнению А. Г: Шмелева, являющегося круп­нейшим специалистом в России по применению интерактивных технологий в образовательном и психологическом тестировании (система «Телетестинг»), в современном Интернете преобладают не интерактивные формы преподнесения образовательной инфор­мации.

Простейший интерактивный режим в локальной сети и в Интер­нете. В соответствии с классификацией компьютерных сетей на локальные и глобальные простейший интерактивный режим, орга­низуется в пределах одной комнаты, или учебного заведения либо с использованием Интернета. Как правило, интерактивность ос­новывается на асинхронной коммуникационной связи, когда ре­акция педагога на результаты тестирования носит отсроченный характер из-за времени, которое необходимо на проверку теста в автоматизированном режиме и подсчет баллов учащихся по ре­зультатам его выполнения.

В первом случае, когда в локальную сеть объединено несколько десятков или сотен компьютеров, специальная программа-реали­затор — инструментальная оболочка — обеспечивает выдачу зада­ний online-теста для всей группы тестируемых, обычно в индиви­дуальном временном .режиме. На экране каждого компьютера из локальной сети появляется задание одного из параллельных вари­антов, теста. При обеспечении режима информационной безопас­ности для всей группы учащихся может использоваться только один вариант теста.

Выполнение online-теста с использованием Интернета не име­ет принципиальных отличий от случая применения локальной сети при простейшем уровне интерактивности без адаптивного режи­ма, когда все учащиеся выполняют одинаковые варианты теста. Задания в подавляющем большинстве требуют от учащихся выбо­ра одного или нескольких правильных ответов с помощью таких известных диалоговых объектов, как «селекторные кнопки» (radio-buttons). Подсчет тестовых баллов производится путем сличения ответов учащихся с ключом и сводится, чаше всего, к простому суммированию. Передача итогового балла по тесту может быть осуществлена с помощью электронной почты.

Время, затраченное на предъявление результата тестирования, определяется длительностью пересылки (обычно от нескольких секунд до нескольких часов) и тем временным промежутком, который пройдет до момента, когда учащийся прочтет пришед­шую ему почту. В отдельных случаях, когда учащемуся требуется документальное подтверждение баллов, результаты тестирования могут быть доставлены offline с помощью записи на носитель ин­формации. Таким образом, низкий уровень интерактивности вполне пригоден для итогового тестирования вне адаптивного режима, когда учащийся должен работать без помощи педагога, а получе­ние результатов может носить отсроченный по времени характер.

Средний уровень интерактивности в online-тестировании. 

В теку­щем контроле при дистанционном обучении обычно реализуется средний уровень интерактивности. В соответствии с возможностя­ми синхронного обмена информацией в реальном времени с по­мощью интернет-пейджеров учащемуся обеспечиваются помощь и консультации педагога при выполнении заданий корректирую­щего и диагностического тестов.

При среднем уровне интерактивности большое разнообразие приобретают формы тестовых заданий. В частности у школьника появляется возможность редактирования текста, представленного в задании, с помощью введения новых предложений или замены одной части текста на другую. В заданиях на установление пра­вильной последовательности сразу после выбора испытуемым не­которого порядка элементов компьютер отображает новую после­довательность на экране и т.д. Если установлению синхронной связи не мешают временные пояса, интерактив незамедлительно обеспечивает эффект «педагог рядом», благодаря которому при выполнении заданий текущего контроля ученик получает помощь, оценку или подсказку педагога.

Высокий уровень интерактивности в online-тестировании.

 Высо­кий уровень интерактивности обеспечивается в тех случаях, когда при взаимодействии с педагогом используются звук и видеоизоб­ражение, что требует значительных финансовых затрат, но без труда позволяет идентифицировать личность учащегося, выпол­няющего тест в дистанционном контроле.

С педагогической точки зрения высокому уровню интерактив­ности отвечает адаптивное тестирование, включающее разветв­ленные технологии оптимизации трудности заданий в зависимо­сти от ответов учащегося на каждое предыдущее задание адаптив­ного теста.

 

 

 

 

 

 

 

 

 

                                                 Заключение

 

В современной педагогике и в методике преподавания все чаще и чаще возникает вопрос об использовании тестовой методики как средства контроля. Такое обращение к тестам как форме контроля совершенно понятно: при обучении контроль является одним из инструментов управления учением. А вопросы, связанные с проверкой и учетом знаний, умений и навыков, методики их организации и проведения в педагогике были актуальны всегда.

Данный тип контроля, который включает в себя достаточно большое количество заданий, дает учителю возможность:  

·                     рационально и эффективно использовать урочное время;

·                     охватить больший объем содержания учебного материала по предмету;

·                     установить не только обратную связь с учащимися, но и быстро определить результаты усвоения необходимого материала; 

·                     обеспечить одновременную проверку знаний учащихся;

·                     формировать мотивацию учащихся к подготовке к каждому уроку;

·                     индивидуализировать работу с учениками;

·                     повышать интерес к изучаемой дисциплине. 

Тестовая методика контроля, используя различные варианты заданий, обладает большими преимуществами. Одно из самых значимых – это скорость работы на уроке.

Одновременно у тестов есть и свои недостатки. Главный из них – категоричность оценки выполнения задания, т.к. тесты дают возможность учитывать только два способа выполнения задания – задание выполнено правильно и полностью или задание не выполнено.  Традиционная проверка позволяет гораздо глубже проверить знания ученика.

Поэтому тестовая методика не должна использоваться как единственное средство контроля на уроках и вытеснять остальные, хорошо зарекомендовавшие себя традиционные средства контроля.  Но как один из эффективных вариантов она имеет право присутствовать в образовательном процессе.

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

Список использованных источников

1.                 Аванесов, В. С. Применение заданий в тестовой форме в новых образовательных технологиях / В. С. Аванесов // Педагогические измерения. – 2014. - № 4. – С.16-29.

2.                 Аванесов, В. С. Содержание теста. Принципы разработки содержания теста. Логические требования к содержанию теста / В. С. Аванесов // Управление школой. – 2012. - № 2. – С.16-29.

3.                 Аванесов, В. С. Форма тестовых заданий / В. С. Аванесов. – 2-е изд. – М.: Центр тестирования, 2015. – 155 с.

4.                 Борисова, В. В. Метод динамического тестирования в определении структуры знаний студентов: автореф. дисс... канд. педагог. наук / В. В. Борисова. – М., 2013. – 85 с.

5.                 Валишевская, Н. П.. Рекомендации по моделированию тестовых заданий / Н. П. Валишевская. – Иркутск, 2014. – 68 с.

6.                 Иванова, О. Н. Адаптивное тестирование в практике диагностики способностей и знаний / О. Н. Иванова, О. Н. Кононов и др. // Вестник Моск. Ун-та. Психология. – 2012. - № 4. – С.61-68.

7.                 Подопригора, Н. Б. Педагогическое тестирование в образовательном процессе: история и современность / Н. Б. Подопригора. – М.: Академия, 2015. – 165 с.

8.                 Сеногноева, Н. А. Технология тестов учебной деятельности как средства оценивания результатов обучения: автореф. дисс. ... доктора педагог. наук / Н. А. Сеногноева. – М., 2016. – 106 с.

9.                 Челышкова, М. Б. Адаптивное тестирование в образовании (теория, методология, технология) / М. Б. Челышкова. – М: Исследовательский центр проблем качества подготовки специалистов, 2011. – 165 с.

10.            ​ Шестернинов, Е. Е. Педагогические тесты: надежный способ оценки и повышения уровня знаний / Е. Е. Шестернинов // Директор школы. – 2013. - № 9. – С.6-13.