The CIERA School Change Framework: An Evidence-based Approach to Professional Development and School Reading Improvement.

The purpose of this naturalistic experiment was to discover the operative elements of an evidence-based reform effort that accounted for growth in student achievement. The reform was implemented in 13 schools around the United States over the course of two years. The authors studied the impact of both school-level programmatic elements and classroom-level curricular and pedagogical practices. Evidence played a role in two distinct ways: (a) in the research base that staff members were encouraged to consult to shape their local reform efforts and (b) in the data they were provided at key points concerning their progress in shaping the schoolwide reading program, altering classroom teaching practices, and improving student scores on a range of outcome measures. Through HLM analyses of school-level and classroom-level variables, the authors found that success in implementing the reform explained a small but significant proportion of the between school variance in reading growth (as measured by comprehension and fluency scores) when looking across a given year, but it explained a substantial proportion of the between school variance in reading comprehension growth when looking across a two-year period. The teachers in the high-reform-effort schools used more research-based reading instruction practices than teachers in the low-reform-effort schools and made more changes in the direction of research-based practice. Differences between the high-reform-effort and low-reform-effort schools in implementing the various components of the school change framework are discussed in light of the broader research in school reform and national and state policies regarding school change. El proposito de este experimento naturalista fue descubrir los elementos operativos de una reforma basada en la evidencia que incremento el desempeno de los estudiantes. La reforma se implemento en 13 escuelas de los EE. UU. en el curso de dos anos. Los autores estudiaron el impacto tanto de elementos programaticos de las escuelas como de practicas curriculares y pedagogicas en las aulas. La evidencia jugo un doble papel: a) en el conjunto de investigaciones que los miembros del personal podian consultar para elaborar las reformas y b) en los datos que se les proporcionaron en ciertos momentos clave para que conocieran los progresos alcanzados en el diseno de programas de lectura, la innovacion de las practicas de ensenanza y el mejoramiento de las calificaciones de los estudiantes en un conjunto de medidas. Mediante analisis HLM de variables en el nivel de la escuela y en el nivel del aula, los autores encontraron que el exito de la implementacion de la reforma explicaba una proporcion pequena pero significativa de la variancia entre escuelas en el mejoramiento en lectura (medido con pruebas de comprension y fluidez) en el lapso de un ano determinado. En cambio, cuando se considero un periodo de dos anos, se hallo que el exito de la reforma explico una proporcion sustancial de la variancia entre escuelas en el mejoramiento en lectura. Los docentes de las escuelas con alta dedicacion a la reforma usaron mas practicas de lectura basadas en investigaciones que los docentes de las escuelas con poca dedicacion a la reforma e hicieron mas innovaciones incorporando practicas con base en investigaciones. Las diferencias entre las escuelas con alta dedicacion a la reforma y aquellas con poca dedicacion a la reforma en la implementacion de los diversos componentes de la concepcion de innovacion escolar se discuten a la luz de investigaciones mas amplias acerca de la reforma educativa y las politicas nacionales y estatales referidas a la innovacion en la escuela. Der Sinn dieses naturalistischen Experimentes galt dem Entdecken der operativen Elemente einer evidenzbasierten Reformbemuhung, die uber den Leistungszuwachs bei Schulern Rechenschaft ablegte. Die Reform wurde im Laufe von zwei Jahren in 13 Schulen quer durch die Vereinigten Staaten ausgefuhrt. Die Autoren studierten jeweils die Auswirkung von programmatischen Elementen bezogen auf Schulebene und lehrplanerischen und padagogischen Praktiken auf Klassenraumebene. Evidenz spielte eine Rolle auf zwei bestimmte Weisen: (a) in der wissenschaftlichen Untersuchungsgrundlage, welche die Mitarbeiter zu konsultieren ermutigt wurden, um ihre lokalen Reformbemuhungen darauf abzustimmen, und (b) in den Daten, mit denen sie bei Schlusselpunkten ihrer Fortschritte bei der Gestaltung des schulweiten Leseprogrammes versorgt wurden, beim Verandern der Unterrichtspraktiken im Klassenraum und im Verbessern der Leistungsergebnisse der Schuler im Rahmen einer Reihe von Ergebnisbemessungen. Durch HLM-Analysen von Variablen auf Schulebene und Klassenraumebene fanden die Autoren heraus, das der Erfolg beim Implementieren der Reform eine kleine, doch bedeutsame Proportion in der Variante der zwischenschulischen Verhaltnisabweichung in der Lesesteigerung erklarte (gemessenen beim Bewerten von Verstandnis und Flussigkeit), wenn man dies quer durch das vorgegebene Jahr veranschaulicht; jedoch verdeutlichte sich ein kraftiges Ansteigen bei der zwischenschulischen Variante im Zuwachs beim Leseverstandnis, wenn man einen Zwei-Jahreszeitraum uberblickt. Die Lehrer in den hochgradig auf Reform bestrebten Schulen nutzten haufiger wissenschaftlich basierte Praktiken des Leseunterrichts, als Lehrer in den geringer auf Reform bedachten Schulen und machten mehr Anderungen in Richtung auf forschungsfundierte Praktiken. Unterschiede zwischen den hochbestrebten Reformschulen und geringen Reformbemuhungsschulen in Anwendung und Ausfuhrung der unterschiedlichen Komponenten der Schulveranderungs-Rahmenbedingung werden im Hinblick auf eine breitere wissenschaftliche Forschung in der Schulreform und der nationalen und staatlichen Richtlinien in bezug auf Schulveranderungen diskutiert. Cette experience de terrain avait pour objectif de decouvrir les elements operatoires d'un effort de reforme evalue rendant compte d'une amelioration de la reussite scolaire. La reforme a ete implantee dans 13 ecoles des Etats-Unis au long de deux annees scolaires. Les auteurs ont etudie l'impact a la fois d'elements de programme au niveau de l'ecole et de pratiques relatives aux programmes et a la pedagogie au niveau de la classe. L'evaluation a indique deux voies differentes: a) l'une concerne la base de recherche que les membres des equipes ont ete encourages a consulter pour mettre en forme leurs efforts locaux de reforme et b) les donnees apparues aux moments-cle en ce qui concerne les progres pour mettre en forme le programme de lecture au niveau de l'ecole, pour modifier les pratiques d'enseignement dans les classes, et l'amelioration des resultats des eleves pour tout un ensemble de mesures d'effets. Les auteurs, au moyen d'analyses HLM de variables au niveau de l'ecole et au niveau de la classe, ont trouve que le succes obtenu en implantant la reforme explique une petite mais significative partie de la variance inter-ecoles des progres en lecture (mesures par la comprehension et la rapidite) quand on considere une annee donnee, mais qu'il explique une partie importante de la variance inter-ecoles dans l'amelioration de la comprehension en lecture quand on considere une periode de deux ans. Les enseignants faisant un effort important de reforme scolaire ont recouru a davantage de pratiques d'enseignement de la lecture basees sur la recherche que les enseignants faisant un moindre effort de reforme et ont fait plus de changements dans la direction des pratiques basees sur la recherche. Les differences entre les ecoles faisant un effort important de reforme et celles faisant un faible effort de reforme pour implanter les differentes composantes de la structure de reforme scolaire sont discutees a la lumiere de la recherche plus large de la reforme de l'ecole et des politiques nationales et par Etats relatives aux reformes scolaires.