Уильям Л. Сандерс: Статистик и разработчик системы оценки эффективности учителей
William Sanders (statistician)
Уильям Л. Сандерс (1942-2017) – амер. статистик, разработчик системы TVAAS/EVAAS для оценки эффективности учителей. Измерение прогресса учеников в обучении.
Сравнивайте с английским: нажмите на абзац — оригинал откроется в окне. Кнопка EN под абзацем показывает его прямо в тексте.
Содержание
Введение
Американский статистик (1942–2017)
American statistician (1942–2017)
Уильям Л. Сандерс (26 апреля 1942 – 16 марта 2017) был американским статистиком и старшим научным сотрудником Университета Северной Каролины в Чапел-Хилл. Он разработал систему оценки добавленной ценности штата Теннесси (TVAAS), также известную как система оценки образовательной добавленной ценности (EVAAS) – метод измерения влияния учителя на успеваемость учеников путем отслеживания их прогресса на протяжении всей школьной карьеры, учитывая их обучение у разных учителей.
William L. Sanders (26 April 1942 – 16 March 2017) was an American statistician, a senior research fellow with the University of North Carolina at Chapel Hill. He developed the Tennessee Value Added Assessment System (TVAAS), also known as the Educational Value Added Assessment System (EVAAS), a method for measuring a teacher's effect on student performance by tracking the progress of students against themselves over the course of their school career with their assignment to various teachers' classes.
Жизнь
Сандерс родился в 1942 году в Шелбивилле, штат Теннесси, и получил степень бакалавра наук в области зоотехнии (1964) и докторскую степень в области статистики и количественной генетики (1968) в Университете Теннесси. С 1972 по 2000 год Сандерс работал статистическим консультантом в Институте сельскохозяйственных исследований, входящем в систему UT; он также преподавал в качестве адъюнкт-профессора в Колледже бизнеса университета. Сандерс покинул университет, чтобы присоединиться к компании SAS Institute. В 2015 году Сандерс был удостоен награды имени Джеймса Брайанта Конанта. Он скончался 16 марта 2017 года в возрасте 74 лет.
Sanders was born in 1942 in Shelbyville, Tennessee and received a bachelor of science degree in animal science (1964) and a doctorate in statistics and quantitative genetics (1968) from the University of Tennessee. From 1972 to 2000, Sanders was a statistical consultant for the Institute of Agricultural Research, which is part of the UT system; he also was an adjunct professor in the school's College of Business. Sanders left the university to join the SAS Institute. In 2015, Sanders was awarded the James Bryant Conant Award. He died on 16 March 2017 at the age of 74.
Оценка добавленной стоимости
Основные вклады Сандерса, однако, были в области образования. В 1982 году Сандерс наткнулся на газетную статью о попытках действующего губернатора Ламара Александра внедрить систему оплаты труда учителей на основе результатов, что подняло вопрос о критериях оценки заслуг. Он отправил губернатору письмо с описанием возможного метода, и хотя тот им не воспользовался, идея была возобновлена через восемь лет Недом МакВертером. Система основана на расчете ожидаемой и фактической динамики успеваемости учащихся по результатам стандартизированных тестов; эти показатели "добавленной ценности" распределяются по нормальному закону (кривой Гаусса). В Теннесси систему начали использовать в 1993 году, и впоследствии она была принята рядом других школьных округов по Соединенным Штатам. Подход Сандерса используется для подтверждения теории о том, что качество учителей играет ключевую роль в образовательных достижениях. Департаменты образования штатов Пенсильвания и Нью-Гэмпшир финансируют пилотные проекты, а Ассоциация школьных советов штата Айова поддерживает его исследования в этом штате. Battelle for Kids предоставляет обучение интерпретации и применению услуг SAS EVAAS для участвующих округов в Огайо. "Используя уравнения смешанных моделей, TVAAS использует ковариационную матрицу из этого многомерного, лонгитюдного набора данных для оценки влияния образовательной системы на успеваемость учащихся по сравнению с национальными стандартами, предоставляя отчеты на уровне округа, школы и учителя". Модель фокусируется на академическом прогрессе, а не на абсолютных баллах.
Sanders's primary contributions, however, were in education. In 1982, Sanders happened upon a newspaper article about attempts by then Governor Lamar Alexander to introduce merit pay for teachers, which raised questions as to the qualifications for merit. He sent a letter to the governor explaining a potential method, and while he did not use it, the idea was revived eight years later by Ned McWherter. The system depends on calculating expected versus actual growth trajectories for students as scored on standardized exams; these "value added" scores fell into a bell curve. Tennessee began using the system in 1993, and it since has been adopted by a number of other school districts across the United States. Sanders' approach has been used to support the theory that the quality of teachers is central to educational achievement. The Pennsylvania and New Hampshire Departments of Education sponsor pilots, and the Iowa School Board Association sponsors his value added work in that state. Battelle for Kids provides interpretation and use trainings for the SAS EVAAS services for the participating districts in Ohio. "Using mixed model equations, TVAAS uses the covariance matrix from this multivariate, longitudinal data set to evaluate the impact of the educational system on student progress in comparison to national norms, with data reports at the district, school, and teacher levels." The model focuses on academic gains rather than raw achievement scores.
Критика
Д-р Балу, в Лиссице (ред.), 2005 г., "Модели добавленной стоимости в образовании: теория и применение", проанализировала TVAAS и пришла к выводу, что оценка вклада учителей в успеваемость учащихся с использованием моделей добавленной стоимости является несовершенной и подвержена ошибкам, отмечая, что стандартные ошибки этих оценок значительны. Автор полагает, что модели добавленной стоимости – это лишь один из полезных инструментов, который следует использовать наряду с другими методами оценки в рамках комплексной системы. Исследователи из RAND Corporation изучили методику доктора Сандерса и установили, что она недостаточно учитывает систематические ошибки, предупреждая о возможности ошибочного приписывания необусловленных образованием факторов влиянию учителей, при этом оценить величину этой ошибки эффективно невозможно. Ballou (2002) и Kupermintz (2003) подтверждают это, указывая на то, что внешкольные факторы оказывают существенное влияние на оценку работы учителей, несмотря на попытки учесть их в модели. Использование премирования на основе VAM было подвергнуто критике в статьях Дэна Пинка и в целом как бизнес-практика в Harvard Business Review. Точность VAM при оценке работы отдельных учителей также была поставлена под сомнение Институтом экономической политики и математиком Джоном Юингом.
Dr. Ballou, in Lissitz (Ed. ), 2005, "Value Added Models in Education: Theory and Applications," analyzed the TVAAS and determined that value added assessment of teachers are fallible estimates of teacher contribution to student learning, stating that standard errors of value added estimates are large. Author thinks that value added models are merely one useful tool that should be used as one of many assessments in a comprehensive system of evaluation. Researchers from the RAND Corporation studied Dr. Sanders' method and determined that his approach does not satisfactorily account for bias, cautioning that non educational effects may be attributed by mistake to teachers, with no way of effectively determining the magnitude of the error. Ballou (2002) and Kupermintz (2003) further support this claim, claiming that non educational factors have a noticeable impact on the evaluation of teachers despite efforts to account for them in the model. The use of merit pay based on VAM has been discredited in articles by Dan Pink and more generally as a business practice in the Harvard Business Review. The accuracy of VAM for evaluating individual teachers has been further discredited by the Economic Policy Institute and by mathematician John Ewing.