Políticas escolares y el éxito de los estudiantes favorecidos y desfavorecidos

resumen ejecutivo

Hacemos uso de datos administrativos de escuelas de nacimiento de Florida, junto con una extensa encuesta de políticas y prácticas de instrucción, para observar qué políticas y prácticas están asociadas con un mejor desempeño en las pruebas para estudiantes relativamente aventajados en una escuela, para estudiantes relativamente desfavorecidos en una escuela. escuela, para ambos y para ninguno.





Consideramos doce políticas y prácticas de esta encuesta que no son muy comunes ni difíciles de implementar, y encontramos que en siete de doce casos, la política / práctica está asociada con resultados de calificaciones de exámenes de quinto grado muy diferentes para estudiantes aventajados y desfavorecidos. Por ejemplo, patrocinar la escuela de los sábados se asocia con aumentos significativos en el rendimiento de las pruebas para los estudiantes desfavorecidos, pero reducciones en el rendimiento de las pruebas para los estudiantes aventajados. Si bien estas no son estimaciones causales de las relaciones (hacerlo requeriría un experimento o un experimento natural), sí dejan en claro que las políticas y prácticas escolares que están asociadas con mejores resultados para algunos estudiantes pueden estar asociadas con peores resultados para otros.



Nuestra conclusión es la siguiente: las políticas y prácticas que podrían tener éxito en general podrían ayudar a un grupo de estudiantes mientras dañan a otro, por lo que se debe tener cuidado al evaluarlos para ver si están beneficiando a todos, algunos o ningún estudiante, y a quiénes se están beneficiando. Las escuelas podrían hacer un mejor trabajo para garantizar el éxito de todos los estudiantes cuanto más investiguen cómo las prácticas están afectando a los diferentes grupos de estudiantes. Esperamos que este análisis arroje algo de luz sobre las posibles políticas y prácticas que deben evaluarse con mayor rigor y fomente un análisis cuidadoso de los efectos heterogéneos de las políticas y prácticas.



Introducción

Las diferencias socioeconómicas en el desempeño de los estudiantes son bien conocidas y están ampliamente documentadas.1Como solo un ejemplo: a nivel nacional, los estudiantes de 13 años cuyos padres son graduados universitarios obtuvieron más de cuatro quintos de una desviación estándar más alta en la evaluación de matemáticas de la Evaluación Nacional del Progreso Educativo (NAEP) en 2012 que aquellos cuyos padres obtuvieron no terminar la secundaria.2En ciencia, en 2015, la misma brecha también fue de más de cuatro quintas partes de una desviación estándar.3Del mismo modo, la brecha de puntaje de las pruebas entre los niños de familias ricas y pobres en los Estados Unidos se ha ampliado con el tiempo y ahora supera una desviación estándar completa.4



Un importante trabajo reciente de Reardon y sus colaboradores muestra que no solo los puntajes de las pruebas5pero también brechas en los puntajes de las pruebas raciales6varían drásticamente entre los distritos escolares estadounidenses. En este último artículo, Reardon y sus coautores informan que, si bien las brechas en los puntajes de las pruebas raciales / étnicas promedian alrededor de 0.6 desviaciones estándar en todos los distritos escolares, en algunos distritos las brechas son casi inexistentes mientras que en otros superan las 1.2 desviaciones estándar. Hay muchas explicaciones potenciales para esta variación entre distritos en las brechas de rendimiento, incluidas las diferencias raciales en el estado socioeconómico, las diferencias en la segregación racial / étnica, las diferencias en la calidad de la escuela y el vecindario, etc., y la evidencia hasta la fecha sobre los principales Las causas de esta variación son descriptivas, más que causales. No obstante, el hecho es que en algunos lugares, las diferencias raciales / étnicas y socioeconómicas son extraordinariamente mayores que en otros lugares. Estas diferencias también se correlacionan con importantes resultados económicos a largo plazo, como se documenta en un nuevo trabajo de Chetty y sus coautores, donde encuentran evidencia sugerente de que la calidad de las escuelas, juzgada por los productos más que por los insumos, juega un papel en la movilidad ascendente.7



Además, existe una enorme variación en la calidad de las escuelas dentro de los distritos escolares.8Y hay algunas escuelas donde a los estudiantes relativamente aventajados les va bien pero a los relativamente desfavorecidos les va mal, otras escuelas donde ocurre lo contrario, otras escuelas donde tanto los estudiantes relativamente aventajados como los relativamente desfavorecidos obtienen buenos resultados, y otras escuelas donde tanto los relativamente aventajados como los relativamente desfavorecidos obtienen buenos resultados. a los estudiantes les va mal.9Además, existen diferencias considerables en estos patrones entre las escuelas dentro del mismo distrito escolar.10



La siguiente pregunta lógica es preguntarse si existen políticas o prácticas a nivel escolar que predigan si a las escuelas les va particularmente bien con estudiantes relativamente aventajados, con estudiantes relativamente desfavorecidos, con ambos o con ninguno. Para estudiar esta pregunta de manera persuasiva, debe haber un experimento que asigne estudiantes al azar a escuelas que tengan diferentes conjuntos de políticas o prácticas, o un experimento natural causado por cambios de políticas o una implementación de políticas que afecte a algunas escuelas o áreas de manera diferente a otras. . Pero un buen primer paso es correlacionar estas medidas de desempeño con una lista amplia y variada de políticas y prácticas escolares para observar los patrones emergentes. Un análisis de este tipo ayudaría a los investigadores y responsables de la formulación de políticas a arrojar luz sobre las políticas y prácticas individuales utilizando métodos empíricos más rigurosos. Este es el propósito del presente informe.

¿Dónde está el eclipse esta noche?

En este informe, utilizamos una notable encuesta realizada durante los años escolares 1999-2000, 2001-02 y 2003-04 por Figlio, Goldhaber, Hannaway y Rouse. Figlio y sus colegas intentaron encuestar a la población completa de líderes escolares en Florida con respecto a una amplia gama de políticas y prácticas escolares, y lograron tasas de respuesta entre el 70 y el 80 por ciento en cada ronda de encuestas.11Combinamos estas respuestas de la encuesta con un conjunto de datos a nivel de estudiante que combina los datos del certificado de nacimiento de los niños con sus registros educativos. Los Departamentos de Educación y Salud de Florida fusionaron los registros de nacimiento y educación para los propósitos de esta agenda de investigación.



Poder hacer coincidir los registros escolares de los niños con sus certificados de nacimiento brinda nuevas oportunidades para una medida mucho más detallada de la ventaja o desventaja socioeconómica que la que normalmente se puede observar en los registros escolares. Combinamos información sobre los niveles de educación de los padres, la edad materna, el estado civil y el estado de pobreza en el momento del nacimiento.12construir un índice continuo de estatus socioeconómico en el momento del nacimiento.13Con esta información, calculamos el desempeño a nivel escolar de estudiantes relativamente favorecidos y relativamente desfavorecidos.14Debido a que los niños en el conjunto de datos emparejados nacieron entre 1994 y 2001, los años de respuesta de la encuesta de líderes escolares corresponden a cuando los estudiantes en los datos administrativos emparejados estaban en la escuela primaria o justo antes de ingresar a la escuela primaria.



Usando este conjunto de datos emparejados, investigamos el grado en que doce políticas y prácticas populares a nivel escolar se correlacionan con el éxito relativo de los estudiantes desfavorecidos, los estudiantes aventajados, ambos o ninguno.

Políticas y prácticas a nivel escolar consideradas

Las encuestas realizadas por Figlio, Goldhaber, Hannaway y Rouse incluyen decenas de preguntas. Para esta investigación inicial de los datos, nos limitamos a las doce preguntas que tienen una variación considerable en la frecuencia con la que se lleva a cabo la política. Casi todas las escuelas implementan muchas políticas y prácticas y muy pocas escuelas implementan muchas políticas y prácticas, y queremos ver las políticas y prácticas que están más en el medio del espectro.15Debido a que nuestro resultado de interés es el puntaje de la prueba estatal de quinto grado, limitamos el análisis a las escuelas primarias.



Si bien las encuestas preguntaron acerca de muchas políticas y prácticas que se citaron con mucha frecuencia o raras veces, las políticas y prácticas identificadas en las encuestas que se encuentran en el medio del espectro de frecuencias son:



(1) ¿Esta escuela utiliza recompensas monetarias (incluida una bonificación en efectivo única) para recompensar el desempeño de los maestros, independientemente de los incentivos utilizados por el distrito?

(2) ¿Esta escuela usa programación en bloque?



(3) ¿Esta escuela utiliza profesores especialistas en la materia?



(4) ¿Esta escuela usa bucles (para mantener a los estudiantes con los maestros y compañeros de clase a lo largo de los años)?

(5) ¿Esta escuela usa aulas de edades múltiples?

(6) ¿Esta escuela asigna un asistente a los maestros de bajo desempeño para mejorar su desempeño?

costo de volar al espacio

(7) ¿Ofrece esta escuela una escuela de verano patrocinada?

(8) ¿Esta escuela extiende el año escolar más allá de lo que requieren el estado y el distrito?

(9) ¿Esta escuela patrocina la escuela de los sábados?

es Pascua siempre en domingo

(10) ¿Esta escuela requiere la escuela de verano para el avance de grado de los estudiantes de bajo rendimiento?

(11) ¿Esta escuela requiere tutoría antes o después de la escuela para estudiantes de bajo rendimiento?

Además, construimos una política / práctica de la duodécima escuela con respecto al número requerido de días de desarrollo profesional docente; Para estar en paralelo con estos resultados dicotómicos, medimos si la escuela está por encima o por debajo de la mediana en la cantidad de días de desarrollo profesional requeridos para los maestros.

La encuesta no definió intencionalmente estos términos, sino que dejó que los encuestados respondieran las preguntas como mejor les pareciera.

Análisis y resultados

En este análisis, examinamos por separado a los estudiantes que están relativamente aventajados (cuartil superior de la distribución socioeconómica) y relativamente desfavorecidos (cuartil inferior de la distribución socioeconómica), y nos centramos en las escuelas que son razonablemente heterogéneas, aquellas con al menos diez estudiantes observados en cada cuartil socioeconómico. (En total, 1,223 escuelas primarias públicas tienen al menos diez estudiantes observados en cada cuartil socioeconómico a lo largo de los años escolares observados). Primero retrocedemos los puntajes de las pruebas estatales de quinto grado en una serie de variables de antecedentes (raza, etnia, país de nacimiento, género). , edad gestacional, peso al nacer y mes y año de nacimiento) y luego comparar estos puntajes de pruebas residuales entre las escuelas que ofrecen la política / práctica o que no, y lo hacen por separado para estudiantes relativamente desfavorecidos y relativamente aventajados. Debido a que los puntajes de las pruebas difieren enormemente entre los grupos de raza, etnia y origen, y estas características son permanentes para cada niño, preferimos compensar cualquier variación en el rendimiento que no provenga del estatus socioeconómico ni de las políticas escolares. Si bien reconocemos que la composición racial y étnica también son indicadores del estatus socioeconómico y la riqueza, queremos tratar de llegar a la parte del estatus socioeconómico que no está asociado con la raza y el origen étnico. Estimamos y presentamos un análisis multivariable, en el que consideramos una carrera de caballos entre las doce políticas y prácticas; a veces las escuelas llevan a cabo dos o más de estas políticas y prácticas, y queremos ver cuáles parecen estar más fuertemente asociadas con los puntajes de las pruebas para diferentes grupos de estudiantes.16

Las figuras a continuación presentan las diferencias en los puntajes de las pruebas de quinto grado entre las escuelas que ofrecen la política / práctica y las que no lo hacen, estimadas por separado para estudiantes relativamente desfavorecidos y relativamente aventajados. Las barras azules (a la izquierda de cada par de barras) presentan las relaciones estimadas para los estudiantes menos favorecidos, y las barras rojas (a la derecha de cada par de barras) presentan las relaciones estimadas para los estudiantes más favorecidos. Organizamos las políticas y prácticas en función del nivel socioeconómico promedio de las escuelas que adoptan estas prácticas; las escuelas que educan a los estudiantes menos favorecidos son las más propensas a patrocinar la escuela de los sábados, mientras que las escuelas que educan a los estudiantes más favorecidos son las más propensas a ofrecer incentivos monetarios a los maestros. Para hacer que los gráficos sean más legibles, dividimos las políticas y prácticas en dos grupos de seis, con las políticas y prácticas que tienden a ser adoptadas por escuelas relativamente desfavorecidas presentadas en el primer gráfico y las políticas y prácticas que tienden a ser adoptadas por escuelas relativamente desfavorecidas. escuelas aventajadas presentadas en el segundo gráfico. Los puntajes de las pruebas están estandarizados y residualizados como se indicó anteriormente, y presentamos las diferencias estimadas en términos de porcentaje de una desviación estándar.

Figura 1a

Figura 1b

Para ayudar a interpretar estas cifras, considere la práctica en el extremo izquierdo del gráfico superior: si una escuela patrocina la escuela de los sábados, la práctica más desproporcionadamente asociada con las escuelas que educan a los estudiantes desfavorecidos. Encontramos que los estudiantes más desfavorecidos tienen un 5.3 por ciento de una desviación estándar puntajes más altos en las pruebas en las escuelas que patrocinan la escuela de los sábados que en las escuelas que no lo hacen. Pero la diferencia en los puntajes de las pruebas para los estudiantes más aventajados es al revés: los estudiantes más aventajados tienen un 1,7 por ciento de una desviación estándar más bajo los resultados de las pruebas en las escuelas que patrocinan la escuela los sábados que en las escuelas que no lo hacen. Como consecuencia, la diferencia entre las relaciones estimadas para estudiantes desfavorecidos versus aventajados es el 7 por ciento de una desviación estándar.

Esta comparación deja en claro que podría ser un desafío para una escuela lograr un alto rendimiento para todos los estudiantes, al menos con el mismo conjunto de políticas y prácticas. Si bien no estamos estimando una relación causal, y hay muchas razones no observadas por las cuales una escuela podría optar por patrocinar la escuela de los sábados, aún se observa que los puntajes de los exámenes de los estudiantes desfavorecidos son más altos en las escuelas que patrocinan la escuela de los sábados, mientras que los estudiantes aventajados Los puntajes de las pruebas son más bajos en estas mismas escuelas.

cronología de la formación del sistema solar

De hecho, considere la siguiente gráfica de dispersión, en la que cada punto representa una escuela primaria de Florida diferente. Trazamos los puntajes de las pruebas para los estudiantes más favorecidos en el eje horizontal y los de los estudiantes menos favorecidos en el eje vertical. Los puntos azules son escuelas que no patrocinan la escuela de los sábados y los puntos naranjas son escuelas que sí lo hacen. En general, las escuelas que obtienen mejores resultados con un grupo de estudiantes obtienen mejores resultados con el otro grupo de estudiantes. Pero para cualquier nivel dado de puntajes de exámenes de estudiantes aventajados, los estudiantes relativamente desfavorecidos obtienen mejores resultados en las escuelas que patrocinan la escuela de los sábados que en las que no lo hacen.

Figura 2

Mirando más ampliamente, observamos que entre la gama de políticas y prácticas que consideramos, las políticas y prácticas están asociadas con asociaciones estadísticamente significativas para estudiantes favorecidos y desfavorecidos en siete de los doce casos. En cinco de estos siete casos, las asociaciones estimadas van en direcciones opuestas para los estudiantes aventajados y desfavorecidos, mientras que para el sexto y séptimo (profesores especialistas en la materia y aulas de varias edades) las asociaciones estimadas son negativas tanto para los estudiantes aventajados como para los desfavorecidos, pero mucho más grande (y estadísticamente distinto de cero) para los estudiantes aventajados en el caso de los profesores especialistas en la materia, y para los estudiantes desfavorecidos en el caso de las aulas de varias edades. Hay otros casos en los que hay diferencias: la escuela de verano obligatoria para los estudiantes de bajo rendimiento se asocia con peores resultados en las pruebas para los estudiantes aventajados, pero no para los estudiantes desfavorecidos; las ayudas para los maestros de bajo rendimiento y un mayor desarrollo profesional se asocian con peores resultados en las pruebas para los estudiantes aventajados pero mejores para los estudiantes en desventaja; y la escuela de verano patrocinada parece tener una relación positiva para los estudiantes favorecidos y negativa para los estudiantes desfavorecidos.17

Ocasionalmente, vemos una práctica que se asocia con puntajes mejorados (o reducidos) en las pruebas para ambos Estudiantes aventajados y desfavorecidos: además de los casos de aulas de varias edades y maestros especialistas en la materia en la escuela primaria, las relaciones estimadas apuntan en la misma dirección (pero no son estadísticamente distintas de cero) en el caso del año escolar extendido ( asociación negativa para ambos). Nuevamente, si bien estas no son estimaciones causales de las relaciones, para hacerlo se requeriría un experimento o un experimento natural, como se mencionó anteriormente, sí dejan en claro que las políticas y prácticas escolares que están asociadas con mejores resultados para algunos estudiantes podrían estar asociadas con peores resultados para los demás.

Conclusión

Nuestra conclusión es la siguiente: las políticas y prácticas que podrían tener éxito en general podrían ayudar a un grupo de estudiantes mientras dañan a otro, por lo que se debe tener cuidado al evaluarlos para ver si están beneficiando a todos, algunos o ningún estudiante, y a quiénes se están beneficiando. Las escuelas podrían hacer un mejor trabajo para garantizar el éxito de todos los estudiantes cuanto más investiguen cómo las prácticas están afectando a los diferentes grupos de estudiantes. Esperamos que este análisis arroje algo de luz sobre las posibles políticas y prácticas que deben evaluarse con mayor rigor y fomente un análisis cuidadoso de los efectos heterogéneos de las políticas y prácticas.