Контрольные вопросы:
1)Что такое мониторинг качества образования?
Мониторинг качества образования - это систематическая и регулярная процедура сбора данных по важным образовательным аспектам
2)С помощью каких компьютерных программ можно создавать тестовые задания?
Google formsHot Potatoes
MultiTester System
MyTest X
Microsoft Excel
3)Что называют валидностью теста?
Валидность теста (от англ. valid – действительный, пригодный, действенный) – один из основных (наряду с надежностью, репрезентативностью, объективностью, достоверностью и эффективностью) критериев оценки тестовых результатов. Понятие валидность отражает прагматическую идею обязательной практической проверки качества измерения свойств человека. Если раньше понятие валидность чаще других ассоциировалось с понятием «качество теста», то в последние годы все больше осознается роль интерпретации тестовых результатов.Валидность (теста) – характеристика теста, которая показывает, в какой мере тест измеряет именно то качество, для измерения которого он создан. Чем выше валидность теста, тем более обосновано использование результатов тестирования для выводов и предсказаний. Количественно валидность теста может выражаться через корреляции результатов, полученных с его помощью, с другими показателями, например, с успешностью выполнения соответствующей деятельности.
Выделяют несколько типов валидности:
1. Валидность «по содержанию». Обычно в тесты достижений включается не весь материал, который прошли учащиеся, а какая-то его небольшая часть. Можно ли быть уверенным в том, что правильные ответы на эти немногие вопросы свидетельствуют об усвоении всего материала. На это и должна ответить проверка валидности по содержанию. Для этого проводится сопоставление успешности по тесту с экспертными оценками учителей (по данному материалу). Иногда этот прием называют логической валидностью.
2. Критериальная валидность теста – характеристика теста, отражающая степень уверенность, что первичный тестовый балл реально отражает достижение определенного уровня знаний, умений или навыков. Определяется на основании сравнения результатов тестирования и показателей, полученных независимым путем (традиционных оценок, экспертных суждений, результатов других тестов, валидность которых установлена). Обычно вычисляется с помощью коэффициентов корреляции.
3. Валидность «по одновременности», или текущая валидность, определяется с помощью внешнего критерия, по которому информация собирается одновременно с экспериментами по проверяемой методике. Другими словами, собираются данные, относящиеся к настоящему времени, успеваемость в период испытания. С ним коррелируют результаты успешности по тесту.
4. «Предсказывающая» валидность (другое название – «прогностическая» валидность). Определяется по достаточно надежному внешнему критерию, но информация по нему собирается некоторое время спустя после испытания. Внешним критерием обычно бывает выраженная в каких-нибудь оценках способность человека к тому виду деятельности, для которой он отбирался по результатам диагностических испытаний. Хотя этот прием наиболее соответствует задаче диагностических методик – предсказанию будущей успешности, применять его очень трудно. Точность прогноза находится в обратной зависимости от времени, заданного для такого прогнозирования. Чем больше проходит времени после измерения, тем большее количество факторов требуется учитывать при оценке прогностической значимости методики. Однако учесть все факторы, влияющие на предсказание, практически невозможно.
5. «Ретроспективная» валидность. Она определяется на основе критерия, отражающего события или состояние качества в прошлом. Может быть использована для быстрого получения сведений о предсказательных возможностях методики. Так, для проверки того, в какой мере хорошие результаты теста способностей соответствуют быстрому обучению, можно сопоставить прошлые оценки успеваемости, прошлые экспертные заключения и т.д. у лиц с высокими и низкими на данный момент диагностическими показателями.
стандартизация процедуры и условий проведения тестирования, способов обработки и интерпретации результатов, которые должны привести к созданию равных условий для испытуемых и минимизировать случайные ошибки и погрешности, как на этапе проведения, так и на этапе обработки результатов и интерпретации данных;
стандартизация результатов, то есть получение нормы, шкалы оценки, которая служит основанием для определения уровня овладения тем, что выясняет данный тест, при этом не важно, какого рода нормы получаются и какие шкалы используются.
Классификация тестов по назначению:
общедиагностические (тесты личности по типу вопросников Кеттелла или Айзенка, тесты общего интеллекта Векслера, Бине-Симона в редакции Термена и Меррила и др.);
профессиональной пригодности (множество общих классификационных тестов – общий армейский классификационный тест, классификационные тесты способностей Фланагана и др.); специальных способностей (технических, музыкальных, тесты для пилотов, радиооператоров и т. д.); достижений (например, произношения, качества написания письменных сочинений и т.п. т. е. тесты, предназначенные для оценивания результатов, достигнутых учащимися в процессе обучения.).
По средствам, используемым в процессе тестирования:
бланковые (тесты «бумага и карандаш», в которых используются тестовые тетради или бланки, в которых испытуемые отмечают или вписывают правильные ответы – вопросники личности, тест механической понятливости Беннета, большинство тестов достижений и др.);
предметные (в которых необходимо манипулировать материальными объектами, результативность выполнения этих тестов зависит от скорости и правильности выполнения заданий – кубики Косса, тест Стенквиста на сборку конструкций и узлов деталей, тест «Сложение фигур» из набора Векcлера и др.); аппаратурные (тесты с использованием устройств для изучения особенностей внимания, восприятия, памяти и мышления – «детектор лжи», аппарат для определения энцефалограмм мозга и др.); практические (появившиеся относительно недавно, эти тесты схожи с известными у нас лабораторными работами – по химии, физике, биологии и пр., – однако они снабжены соответствующими инструкциями и имеют тестовое оснащение); программные (тесты с применением программ ЭВМ).
По количеству одновременно обследуемых людей:
индивидуальные (тесты Векслера, тест Люшера и др.);
групповые (большинство стандартизованных вопросников, оценивающих основные характеристики личности, набор тестов Фланагана, большинство тестов достижений и т. д.).
По форме ответа тесты делятся:
устные;
письменные;
с применением ЭВМ.
По ведущей ориентации:
тесты скорости, содержащие простые задачи, время решения которых ограничено настолько, что ни один испытуемый не успевает решить все задачи в заданное время (Кольца Ландольта, Бурдона, «шифровка» из набора Векслера);
тесты мощности или результативности, включающие трудные задачи, время решения которых либо вовсе не ограничено, либо мягко лимитировано. Оценке подлежит успешность и способ решения задачи. Примером такого рода тестовых заданий могут быть задания для письменных итоговых экзаменов за курс школы;
смешанные тесты, которые объединяют в себе черты двух вышеперечисленных. В таких тестах представлены задачи различного уровня сложности: от самых простых до очень сложных. Время испытания в данном случае ограничено, но достаточное для решения предлагаемых задач большинством обследуемых. Оценкой в данном случае служат как скорость выполнения заданий (количество выполненных заданий), так и правильность решения. Эти тесты наиболее часто применяются на практике.
По степени однородности задач:
гомогенные, имеющие, как правило, одну шкалу, которые позволяют оценить одно свойство или качество личности и включают задачи, сходные по характеру, но различающиеся конкретным содержанием;
гетерогенные, имеющие несколько шкал, которые позволяют оценить разнообразные характеристики личности и включают задания, отличающиеся как по характеру, так и по содержанию.
По характеру действий:
вербальные (связанные с необходимостью произведения умственных действий – словесно-логические тесты, вопросники на проверку знаний, установление закономерностей и пр.);
невербальные (связанные с практическим манипулированием предметами – карточками, блоками, деталями).
По направленности, т.е. по тому, что именно предполагается изучать с помощью данного теста:
тесты интеллекта, выявляющие особенности последнего;
личностные тесты (иногда называемые тестами темперамента), с помощью которых изучаются особенности личности испытуемого; тесты настроении и состояний, направленные на изучение временных состояний, таких как эмоции;
другие.
По виду нормирования:
ориентированные на статистические нормы – тесты, основанием для сравнения в которых служат соответствующим образом обоснованные статистически полученные значения выполнения данного теста репрезентативной выборкой испытуемых;
критериально ориентированные – тесты, предназначенные для определения уровня индивидуальных достижений испытуемого относительно некоторого заданного критерия, существующего в реальной практике и заранее известного уровня знаний, умений, навыков, необходимых для выполнения определенного вида деятельности. Критерий может быть определен на основании экспертной оценки (например, критерий школьной успешности может быть определен путем опроса педагогов, работающих в данном классе или с данным ребенком) либо практической деятельности испытуемых (критерий школьной успешности может быть определен по оценкам за четверть или год);
прогностические, ориентированные на успешность дальнейшей деятельности;
ненормированные.
По характеру ответов на вопросы:
открытого типа (со свободными ответами – когда испытуемому необходимо самостоятельно дописать слово, словосочетание, предложение, знак, формулу и т. д.)
закрытого типа (с предписанными ответами – когда испытуемому необходимо выбрать из предложенных вариантов ответов тот или иной вариант).
Кроме этого, выделяют следующие возможные варианты ответов, используемые в тестах открытого типа:
задания дополнения – испытуемый должен сформулировать ответы с учетом предусмотренных в задании ограничений;
свободного изложения – испытуемый должен самостоятельно сформулировать ответы, ибо никакие ограничения на них в задании не накладываются.
Варианты тестов закрытого типа:
альтернативных ответов, испытуемый должен ответить «да» или «нет»;
соответствия (на восстановление соответствия) – испытуемому предлагается восстановить соответствие элементов двух списков;
множественного выбора (ответы с вариантами выбора) – испытуемому необходимо выбрать, как правило, один правильный ответ из приведенного списка возможных ответов;
исключения лишнего (устранения лишнего элемента, «встретил лишнее – убери»);
аналогии – испытуемый должен выделить отношение аналогии между парами элементов (слов, свойств, качеств и т. д.);
последовательности (на завершение последовательности) – испытуемый должен запершить некоторую последовательность элементов.
1. Валидность «по содержанию». Обычно в тесты достижений включается не весь материал, который прошли учащиеся, а какая-то его небольшая часть. Можно ли быть уверенным в том, что правильные ответы на эти немногие вопросы свидетельствуют об усвоении всего материала. На это и должна ответить проверка валидности по содержанию. Для этого проводится сопоставление успешности по тесту с экспертными оценками учителей (по данному материалу). Иногда этот прием называют логической валидностью.
2. Критериальная валидность теста – характеристика теста, отражающая степень уверенность, что первичный тестовый балл реально отражает достижение определенного уровня знаний, умений или навыков. Определяется на основании сравнения результатов тестирования и показателей, полученных независимым путем (традиционных оценок, экспертных суждений, результатов других тестов, валидность которых установлена). Обычно вычисляется с помощью коэффициентов корреляции.
3. Валидность «по одновременности», или текущая валидность, определяется с помощью внешнего критерия, по которому информация собирается одновременно с экспериментами по проверяемой методике. Другими словами, собираются данные, относящиеся к настоящему времени, успеваемость в период испытания. С ним коррелируют результаты успешности по тесту.
4. «Предсказывающая» валидность (другое название – «прогностическая» валидность). Определяется по достаточно надежному внешнему критерию, но информация по нему собирается некоторое время спустя после испытания. Внешним критерием обычно бывает выраженная в каких-нибудь оценках способность человека к тому виду деятельности, для которой он отбирался по результатам диагностических испытаний. Хотя этот прием наиболее соответствует задаче диагностических методик – предсказанию будущей успешности, применять его очень трудно. Точность прогноза находится в обратной зависимости от времени, заданного для такого прогнозирования. Чем больше проходит времени после измерения, тем большее количество факторов требуется учитывать при оценке прогностической значимости методики. Однако учесть все факторы, влияющие на предсказание, практически невозможно.
5. «Ретроспективная» валидность. Она определяется на основе критерия, отражающего события или состояние качества в прошлом. Может быть использована для быстрого получения сведений о предсказательных возможностях методики. Так, для проверки того, в какой мере хорошие результаты теста способностей соответствуют быстрому обучению, можно сопоставить прошлые оценки успеваемости, прошлые экспертные заключения и т.д. у лиц с высокими и низкими на данный момент диагностическими показателями.
4)Укажите классификацию тестов.
По процедуре могут быть выделены стандартизированные и нестандартизированные тесты. Стандартизация психологами понимается в двух аспектах:стандартизация процедуры и условий проведения тестирования, способов обработки и интерпретации результатов, которые должны привести к созданию равных условий для испытуемых и минимизировать случайные ошибки и погрешности, как на этапе проведения, так и на этапе обработки результатов и интерпретации данных;
стандартизация результатов, то есть получение нормы, шкалы оценки, которая служит основанием для определения уровня овладения тем, что выясняет данный тест, при этом не важно, какого рода нормы получаются и какие шкалы используются.
Классификация тестов по назначению:
общедиагностические (тесты личности по типу вопросников Кеттелла или Айзенка, тесты общего интеллекта Векслера, Бине-Симона в редакции Термена и Меррила и др.);
профессиональной пригодности (множество общих классификационных тестов – общий армейский классификационный тест, классификационные тесты способностей Фланагана и др.); специальных способностей (технических, музыкальных, тесты для пилотов, радиооператоров и т. д.); достижений (например, произношения, качества написания письменных сочинений и т.п. т. е. тесты, предназначенные для оценивания результатов, достигнутых учащимися в процессе обучения.).
По средствам, используемым в процессе тестирования:
бланковые (тесты «бумага и карандаш», в которых используются тестовые тетради или бланки, в которых испытуемые отмечают или вписывают правильные ответы – вопросники личности, тест механической понятливости Беннета, большинство тестов достижений и др.);
предметные (в которых необходимо манипулировать материальными объектами, результативность выполнения этих тестов зависит от скорости и правильности выполнения заданий – кубики Косса, тест Стенквиста на сборку конструкций и узлов деталей, тест «Сложение фигур» из набора Векcлера и др.); аппаратурные (тесты с использованием устройств для изучения особенностей внимания, восприятия, памяти и мышления – «детектор лжи», аппарат для определения энцефалограмм мозга и др.); практические (появившиеся относительно недавно, эти тесты схожи с известными у нас лабораторными работами – по химии, физике, биологии и пр., – однако они снабжены соответствующими инструкциями и имеют тестовое оснащение); программные (тесты с применением программ ЭВМ).
По количеству одновременно обследуемых людей:
индивидуальные (тесты Векслера, тест Люшера и др.);
групповые (большинство стандартизованных вопросников, оценивающих основные характеристики личности, набор тестов Фланагана, большинство тестов достижений и т. д.).
По форме ответа тесты делятся:
устные;
письменные;
с применением ЭВМ.
По ведущей ориентации:
тесты скорости, содержащие простые задачи, время решения которых ограничено настолько, что ни один испытуемый не успевает решить все задачи в заданное время (Кольца Ландольта, Бурдона, «шифровка» из набора Векслера);
тесты мощности или результативности, включающие трудные задачи, время решения которых либо вовсе не ограничено, либо мягко лимитировано. Оценке подлежит успешность и способ решения задачи. Примером такого рода тестовых заданий могут быть задания для письменных итоговых экзаменов за курс школы;
смешанные тесты, которые объединяют в себе черты двух вышеперечисленных. В таких тестах представлены задачи различного уровня сложности: от самых простых до очень сложных. Время испытания в данном случае ограничено, но достаточное для решения предлагаемых задач большинством обследуемых. Оценкой в данном случае служат как скорость выполнения заданий (количество выполненных заданий), так и правильность решения. Эти тесты наиболее часто применяются на практике.
По степени однородности задач:
гомогенные, имеющие, как правило, одну шкалу, которые позволяют оценить одно свойство или качество личности и включают задачи, сходные по характеру, но различающиеся конкретным содержанием;
гетерогенные, имеющие несколько шкал, которые позволяют оценить разнообразные характеристики личности и включают задания, отличающиеся как по характеру, так и по содержанию.
По характеру действий:
вербальные (связанные с необходимостью произведения умственных действий – словесно-логические тесты, вопросники на проверку знаний, установление закономерностей и пр.);
невербальные (связанные с практическим манипулированием предметами – карточками, блоками, деталями).
По направленности, т.е. по тому, что именно предполагается изучать с помощью данного теста:
тесты интеллекта, выявляющие особенности последнего;
личностные тесты (иногда называемые тестами темперамента), с помощью которых изучаются особенности личности испытуемого; тесты настроении и состояний, направленные на изучение временных состояний, таких как эмоции;
другие.
По виду нормирования:
ориентированные на статистические нормы – тесты, основанием для сравнения в которых служат соответствующим образом обоснованные статистически полученные значения выполнения данного теста репрезентативной выборкой испытуемых;
критериально ориентированные – тесты, предназначенные для определения уровня индивидуальных достижений испытуемого относительно некоторого заданного критерия, существующего в реальной практике и заранее известного уровня знаний, умений, навыков, необходимых для выполнения определенного вида деятельности. Критерий может быть определен на основании экспертной оценки (например, критерий школьной успешности может быть определен путем опроса педагогов, работающих в данном классе или с данным ребенком) либо практической деятельности испытуемых (критерий школьной успешности может быть определен по оценкам за четверть или год);
прогностические, ориентированные на успешность дальнейшей деятельности;
ненормированные.
По характеру ответов на вопросы:
открытого типа (со свободными ответами – когда испытуемому необходимо самостоятельно дописать слово, словосочетание, предложение, знак, формулу и т. д.)
закрытого типа (с предписанными ответами – когда испытуемому необходимо выбрать из предложенных вариантов ответов тот или иной вариант).
Кроме этого, выделяют следующие возможные варианты ответов, используемые в тестах открытого типа:
задания дополнения – испытуемый должен сформулировать ответы с учетом предусмотренных в задании ограничений;
свободного изложения – испытуемый должен самостоятельно сформулировать ответы, ибо никакие ограничения на них в задании не накладываются.
Варианты тестов закрытого типа:
альтернативных ответов, испытуемый должен ответить «да» или «нет»;
соответствия (на восстановление соответствия) – испытуемому предлагается восстановить соответствие элементов двух списков;
множественного выбора (ответы с вариантами выбора) – испытуемому необходимо выбрать, как правило, один правильный ответ из приведенного списка возможных ответов;
исключения лишнего (устранения лишнего элемента, «встретил лишнее – убери»);
аналогии – испытуемый должен выделить отношение аналогии между парами элементов (слов, свойств, качеств и т. д.);
последовательности (на завершение последовательности) – испытуемый должен запершить некоторую последовательность элементов.
Комментариев нет:
Отправить комментарий