6.8: Результати SAT корисні для розміщення студентів на курсах письма

Автор: Крістен ді Дженнаро, Університет Пейс

У Сполучених Штатах багато студентів, які планують відвідувати коледж, зобов'язані здавати стандартизовані тести, такі як SAT, як частина процесу подачі заявки на коледж. В даний час SAT включає розділи, що вимірюють критичні навички читання, математики та письма, які вважаються необхідними для успіху в коледжі. У 2004 році Рада коледжу (яка контролює та переглядає SAT) представила компонент есе як частину тесту. Багато програм написання коледжу аплодували цій зміні, оскільки вона підтримувала позицію, що тест вимірювання письмової здатності повинен насправді вимагати від учасників тесту писати, а не просто відповідати на питання з декількома варіантами або короткою відповіддю про граматику, орфографію та механіку.

Адміністратори коледжу вітали зміни, а також, бачачи це як можливість зменшити або навіть усунути письмові іспити, що вхідні студенти приймають після їх прийняття або прибуття на кампус. Дійсно, використання балів студентів із зовнішніх вступних тестів для внутрішніх цілей відразу розглядалося як економія часу та економічно вигідна для коледжів. Практика також сподобалася тим, хто вважає, що студенти піддаються занадто великому тестуванню. Хто б заперечив проти цього багатоцільового тесту?

Проте в 2014 році, лише через десять років після дебюту компонента есе SAT, коледж рада знизила есе до факультативного статусу, тобто це більше не обов'язковий розділ тесту. Якщо есе настільки корисно для викладачів та адміністраторів коледжу, чому його творці суттєво перешкоджають його використанню? Чи не вимагали б від зацікавлених сторін забезпечити його постійний успіх?

Однак, коли користувачі тестують багатозадачні оцінки SAT, вони не розуміють, що тест не має дійсності для цих додаткових застосувань. Більшість людей розуміють дійсність тесту означає, що тест вимірює те, що він стверджує, щоб виміряти: водіння тест вимірює навички водіння і письмовий тест вимірює здатність письма. Однак багато людей не усвідомлюють, що тест сам по собі не має або не має дійсності, але цілі, для яких він застосовується, можуть бути більш-менш дійсними. За даними Американської асоціації освітніх досліджень, термін дії тесту залежить від його цільового використання. Наприклад, використання результатів іспиту з водіння, щоб присудити або відмовити комусь у водійському посвідченні є дійсним використанням іспиту з водіння, але використання тих же результатів для присудження або відмови в дипломах середньої школи не буде вважатися дійсним використанням. Водіння іспит мало або взагалі не має дійсності як вказівка на те, хто заслуговує диплом середньої школи. Чіткий випадок, такий як це, легко зрозуміти. Менш зрозумілими є випадки, коли різні тести приймають подібний формат, такий як компонент написання SAT та тест на розміщення в коледжі.

SAT - це тест, що посилається на норму. Це означає, що оцінка тесту передбачає визначення медіани, або середнього балу, виробленого групою учасників тестування. Потім оцінки учасників тесту розташовуються вище і нижче медіани, щоб створити так звану нормальну криву (звідси термін, що посилається на норму), також звану кривою дзвінка, враховуючи її форму. Крива набуває такої форми, оскільки переважна більшість результатів тестування потрапляють під найбільшу площу кривої, трохи вище і трохи нижче медіани, створюючи форму дзвінка.

Нормальні тести призначені для порівняння учасників тестування з нормою і один з одним. Таким чином, поширення балів по нормальній кривій дозволяє легко класифікувати бали учасників тестування як середні, вище середнього або нижче середнього по відношенню до групи. З цієї причини результати тестів, що посилаються на норму, повідомляються у відсотках, а не у відсотках, оскільки процентилі вказують на оцінку учасника тесту по відношенню до решти групи. Наприклад, оцінка в 95-му процентилі вказує на те, що учасник тесту виконав краще, ніж 95% інших учасників тестування, які пройшли той же тест, а не те, що приймач тесту відповів на 95% питань правильно. Насправді, процентильний бал нічого не говорить про те, на скільки питань відповів учасник тесту правильно або неправильно, або про оволодіння учасником тесту будь-якої конкретної області знань або майстерності, а лише про те, як тестувальник порівнював з рештою групи.

Нормальні тести корисні для прийняття рішень на основі групових порівнянь. Основна мета SAT полягає в тому, щоб дозволити користувачам тестування, включаючи студентів, керівництва консультантів та офіцерів приймальних комісій коледжів, щоб зробити порівняння між учасниками тестування з різних середніх шкіл, щоб визначити, які студенти, швидше за все, досягнуть успіху в певних коледжах. SAT, за задумом, не узгоджується з будь-якою конкретною навчальною програмою, оскільки вона повинна бути актуальною для абітурієнтів з широкого спектру програм та шкіл по всій території Сполучених Штатів.

Основна мета тесту на розміщення, з іншого боку, полягає в тому, щоб визначити, де в конкретній програмі студенти повинні почати свою курсову роботу. Програми, що слідують навчальним планам на основі розвитку, таких як математика, іноземні мови та письмо, можуть покладатися на певну форму тестування для вступників студентів. На відміну від національно відповідних тестів, таких як SAT, тести на розміщення повинні бути тісно пов'язані з навчальною програмою конкретної програми, для якої вони були розроблені. Тести, узгоджені з певною програмою або навчальною програмою, підпадають під категорію тестів, що посилаються на критерії.

Тести, що посилаються на критерії, корисні, коли учасники тестування повинні продемонструвати володіння конкретними знаннями, здібностями або навичками. Згаданий раніше іспит з водіння служить хорошим прикладом тесту, орієнтованого на критерій, оскільки учасники тесту повинні продемонструвати достатні знання правил дорожнього руху, щоб не створювати небезпеки для інших водіїв або пішоходів. Продуктивність учасника тесту, або оцінка, по відношенню до інших учасників тестування не має значення. Якщо учасник тесту виконує краще, ніж 95% інших учасників тестування, але всі не дотримуються правил дорожнього руху, ніхто не отримує водійських прав. Так само, якщо всі вивчають та практикують тест і всі працюють добре, всі вони отримують ліцензії.

Мета тесту на письмове розміщення полягає в тому, щоб визначити, який курс в рамках конкретної програми найкраще відповідає сильні та слабкі сторони студента. Щоб тест на розміщення був корисним, він повинен бути узгоджений з пропозиціями курсу програми. Найкращий спосіб досягти цього необхідного вирівнювання - розробка локально розроблених інструментів розміщення або інструментів, адаптованих для місцевого середовища.

У багатьох випадках місцеве тестування розміщення передбачає, що студенти подають зразки написання, які потім оцінюються викладачами, знайомими з місцевими варіантами курсу. Студентам може бути запропоновано створити свої зразки написання на місці, у відповідь на завдання написання, розроблені викладачами, або можуть знадобитися представити портфелі, що демонструють різноманітні зразки письма. Зовсім недавно кілька програм експериментують з спрямованим саморозміщенням, типом процесу самооцінки, коли студенти відповідають на питання, призначені для підвищення самосвідомості власних сильних і слабких сторін у письмовій формі. Потім студенти можуть вибрати курс на основі їх самооцінки, або програми можуть поєднувати відповіді на самооцінку студентів зі зразками написання для прийняття рішень про розміщення. Отже, є принаймні дві причини відхилення балів SAT в якості заміни тестування розміщення. Один з них полягає в тому, що термін дії тесту залежить від його цільового використання, і оскільки SAT не був розроблений як тест на розміщення, йому не вистачає дійсності для цієї мети. Друга причина полягає в тому, що SAT - це тест, що посилається на норму, не узгоджений з певною навчальною програмою, тоді як тест на розміщення написання коледжу - це тест, що посилається на критерій, з результатами, пов'язаними з конкретним змістом курсу.
Багато людей, особливо коледжу письмового факультету, інтерпретують

Рішення коледжу ради мінімізувати роль тесту есе SAT як визнання, що це був поганий показник письмової здатності. За словами Леса Перельмана, професора MIT у відставці та відвертого критика тесту есе SAT з моменту його створення, надання тестовим учасникам лише 25 хвилин читати, роздумувати та розумно реагувати на тему в письмовій формі є «абсурдним» завданням. (Дивіться розділ Кріса Ансона та Леса Перельмана в цій книзі, щоб дізнатися більше про дійсність стандартизованих письмових тестів.)

Хоча популярно критикувати тих, хто в індустрії тестування за створення поганих або недійсних тестів, тест за своєю суттю не є хорошим чи поганим, дійсним чи недійсним. Судження про дійсність тесту виходить за рамки міркувань формату та змісту. Навіть 25-хвилинне завдання на написання може мати дійсність для певних цілей. І тест, який має бажаний формат та охоплення вмісту, дійсний лише тоді, коли використовується для цілей, для яких він був створений. Як тільки тест використовується з додатковою метою, його обгрунтованість ставиться під сумнів. Таким чином, замість того, щоб звинувачувати коледжу ради за те, що не розробляє есе SAT уздовж моделі тесту на розміщення на основі критеріїв, написання оцінки експерти повинні звинувачувати тих, хто багатозадачні оцінки SAT, зловживаючи їх для цілей, для яких вони не були призначені. Можливо, рішення Ради коледжу знизити рівень компонента есе SAT запобіжить подальше безвідповідальне використання їх тестів.

Подальше читання

Короткий і доступний огляд основних понять в освітньому оцінюванні див Джеральда Брексі «Думки про тести та тестування: короткий посібник з оцінки грамотності». Для більш глибокого погляду на академічне тестування та те, як педагоги вимірюють знання студентів, див Стандарти освітнього та психологічного тестування, розроблені спільно Американською асоціацією освітніх досліджень, Американською психологічною асоціацією та Національною радою з вимірювання в освіті. Національна рада вчителів англійської мови та адміністраторів програм письма також спільно розглядають питання, що стосуються контекстів післясередньої освіти, у своїй «Білій книзі з написання оцінки в коледжах та університетах». Нарешті, Лес Перельман був дуже відкритим зі своєю критикою SAT, як показано у творі Джоанни Вайс «Людина, яка вбила есе SAT» (Бостонський глобус) та «Інтерв'ю з Лесом Перельманом» Карін Холліс (Кайрос: Журнал риторики, технології та педагогіки).

Ключові слова

тести, що посилаються на критерії, тести, що посилаються на норму, тестування розміщення, SAT, тестове використання та неправильне використання, валідність, письмова оцінка

Автор Біо

Крістен ді Дженнаро є доцентом та директором композиції в Університеті Пейс в Нью-Йорку, де вона також викладає курси письма для студентів. Вона спеціалізується на письмовій оцінці та педагогіці з особливим акцентом на другомовних письменників. Її дослідження з'явилися в численних наукових журналах.