Тепер, коли перший місяць навчання закінчився, батьки можуть підготуватися до наступної віхи навчального року - незабаром вони отримають звіти про державні тести, які їх діти проходили минулого року.

Мої оцінки показують, що приблизно 26 мільйонів учнів державних шкіл минулого року склали загальнодержавні тести з читання та математики. Багато з них також проходили загальнодержавні тести з науки. Ці тести надають батькам важливу інформацію про те, наскільки добре їхні діти навчаються у школі.

Однак моє дослідження також показує, що коли батьки отримують звіт про результати тестування своєї дитини, їм може бути важко відокремити важливу інформацію від статистичної балаканини.

Більш того, результати можуть навіть не дати їм точної інформації про академічний ріст дитини.

Ваша дитина «досвідчена»?

Закон "Про те, щоб дитина не залишилася позаду", прийнятий у 2002 році, вимагав від усіх штатів встановити "стандарти рівня досягнень" у читанні та математиці для третього -восьмого класів та для одного класу середньої школи, як правило, 10 -го чи 11 -го класу. Держави також повинні були розробити тести для вимірювання рівня студентів "Вміння" на кожному тесті.

Новий федеральний закон, прийнятий у грудні 2015 р Кожен Закон про успішність студентів (ESSA), продовжить цю практику.

Як наслідок, звіти про тести, які отримують батьки, класифікують дітей за такими рівнями досягнень, як «базові» або «досвідчені». Кожен штат вирішує, як називатимуться ці класифікації, але принаймні одна категорія повинна позначати «знання».

Ці категорії рівня досягнень описані у звітах про результати тестування, і тому ця інформація легко розуміється батьками. Наприклад, я вважаю корисним щороку перевіряти, чи досягають мої сини знань з кожної предметної галузі.

Але результати тестів дітей за певний рік та рівень їх досягнень - не єдина інформація, яку повідомляють у деяких штатах. Новий статистичний індекс, який називається «процентилем зростання студентів» знаходить свій шлях у звітах відправлено додому батькам у 11 штатах. Двадцять сім штатів також використовують цей індекс для оцінки вчителів.

Незважаючи на те, що показник «зростання» чи прогресу студентів звучить як хороша ідея, процентилі зростання студентів ще не підтверджені дослідженнями. Фактично пропонують кілька досліджень вони не дають точних описів успіхів учнів та ефективності вчителя.

Що це означає?

Що таке “процентилі зростання студентів”?

Це індекси, запропоновані у 2008 р Даміан В. Бетебеннер, статистик, який запропонував використовувати їх як описову міру «академічний ріст» студентів від одного навчального року до наступного. Ідея полягала в тому, щоб описати успіхи учнів порівняно з їх однолітками.

Як і діаграми зростання, які педіатри використовують для опису зросту та ваги дітей, процентилі зростання учнів коливаються від найнижчого до одного і до 99. Однак їх розрахунок передбачає набагато більшу похибку, ніж фізичне вимірювання, таке як зріст та вага. Наше дослідження в Університеті штату Массачусетс Амхерст свідчить істотна помилка в їх розрахунку.

Відсотки зростання студентів випливають з результатів тестів, які не є абсолютно точними описами академічних знань студентів: На результати тестів впливає багато факторів, таких як запитання, поставлені в певний день, темперамент студентів, рівень їхньої залученості під час складання тест або просто методи, що використовуються для оцінки їхніх відповідей.

Відсоток зростання кожного учня обчислюється за допомогою принаймні двох різних тестів, як правило, з різницею в рік або більше. Потім останні результати тестування студента порівнюються з останніми тестами студентів, які мали подібні бали в попередні роки. Це потрібно, щоб побачити, хто з цих студентів цього року мав вищі чи нижчі бали.

Проблема, однак, полягає в тому, що кожен розрахунок містить певну похибку вимірювання. Подальші розрахунки лише поглиблюють цю помилку. Настільки, що результати закінчуються вдвічі більшою помилкою. Без статистичної складності можна видалити цю помилку.

Питання в тому, чому так багато держав використовують такі ненадійні заходи?

Використовуючи це для підзвітності

Використання процентилів зростання студентів частково пояснюється бажанням побачити, наскільки студенти навчаються за певний рік, та пов’язати цей прогрес із системами підзвітності, такими як оцінка вчителя.

В 2010, Конкурс грантів «Перемога до найкращих» запропонував державам запропонувати інноваційні способи використання результатів тестування для оцінки вчителів, що відкрило шлях для того, щоб цей новий показник «зростання» був швидко застосований у багатьох штатах.

Однак використання процентилів зростання студентів почалося ще до того, як були проведені дослідження їх точності. Лише зараз існує достатня кількість досліджень для їх оцінки, і всі дослідження вказують на той самий висновок - вони містять багато помилок.

На додаток до наших досліджень в Університеті Массачусетса в Амхерсті, дослідження точності процентилів зростання студентів проводилися освітніми неприбутковими організаціями, такими як WestEd, Служба навчальних тестувань та інший наукових установ. Дослідники JR Локвуд та Кетрін Е. Кастеллано нещодавно укладено що «Значна дослідницька база вже зазначає, що оцінки процентилю зростання студентів для окремих студентів мають великі помилки».

Однак багато держав, здається, не знають про ці результати дослідження. Массачусетс навіть заходить так далеко класифікуйте дітей з процентилями зростання менше 40 як "нижчий ріст", а діти з процентилями зростання більше 60 як "вищий ріст".

Вимірювання успішності вчителя

Як я вже згадував раніше, 27 штатів використовують процентилі зростання учнів, щоб класифікувати вчителів як «ефективних» або «неефективних». Дослідження щодо використання процентилів зростання для цієї мети показують, що вони могли б недооцінювати виконання найефективніших учителів та завищити продуктивність найменш ефективних вчителів - прямо протилежне тому, що ці держави намагаються зробити зі своїми системами оцінювання вчителів.

Нещодавня доповідь WestEd оцінила використання процентилів зростання студентів для оцінки вчителів та уклали вони «не досягли такого рівня стабільності», який був би необхідний для прийняття таких рішень з високими ставками.

Повернемося до традиційних заходів

Я вважаю, що процентилі зростання студентів зробили нас кроком назад у використанні навчальних тестів для покращення навчання студентів.

Традиційні показники успішності дітей у навчальних тестах, такі як те, чи вони “володіють” у певному році та їх фактичні результати тестів, дають гарне уявлення про те, наскільки добре вони вчилися з математики чи читання у певному році.

Ці традиційні перцентильні ранги все ще повідомляються на багатьох освітніх тестах, так само, як вони були, коли ми, як батьки, навчалися в школі. Традиційні перцентильні ранги порівнювали нас із національною чи державною групою за певний рік, а не порівнювали нас із тим, як інші діти в країні чи штаті «зростали» на різних тестах, які вони проходили в різні роки, як це намагаються зробити процентили студентського зростання.

З огляду на те, що ми зараз знаємо про процентилі зростання учнів, моя порада батькам - не тільки ігнорувати їх у звітах про тести результатів тестування своїх дітей, а й звертатися до їх державного департаменту освіти та запитувати, чому вони повідомляють таку ненадійну статистику.

Розробка показників того, наскільки учні навчилися протягом року, є хорошою метою. На жаль, процентили студентського зростання не роблять хорошої роботи, щоб це виміряти.

про автора

Стівен Сіречі, професор освітньої політики, Університет штату Массачусетс, Амхерст

Ця стаття була спочатку опублікована на Бесіда. Читати оригінал статті.

Схожі книги:

at InnerSelf Market і Amazon