Statistical Matching of PISA 2009 and TALIS 2008 Data in Iceland

The OECD Program for International Student Assessment (PISA) and the OECD Teaching and Learning International Survey (TALIS) constitute two of the largest ongoing international student and teacher surveys presently underway. Data generated from these surveys offer researchers and policy-makers opportunities to identify particular educational institutional arrangements – that is, how aspects of educational systems are organised to promote equality of educational opportunity both within and between countries. Naturally, policy makers are interested in all three levels of the school system – students, teachers, and schools, in order to fully understand within and between country differences in relations between the inputs, processes, and outcomes of education. A serious limitation of these data collection efforts is that each survey is missing an important component of the educational system in their design – namely, PISA is missing teacher-level data and TALIS is missing student-level data. This limitation can be partly addressed by statistically linking both surveys. This involves the creation of a synthetic cohort of data – that is, a new data file that combines information from both surveys. This paper presents a systematic evaluation of a set of statistical matching methods focused on the goal of creating a synthetic file of PISA 2009 and TALIS 2008 data for Iceland. We evaluate the extent to which each method provides a matched data set that maintains the essential properties of PISA and TALIS, concentrating on a set of validity criteria established by Rässler (2002). The experimental study provides a proof of concept that statistically matching PISA and TALIS is feasible for countries that wish to draw on the added value of both surveys for research and policy analysis. Le Programme international pour le suivi des acquis des élèves (PISA) et l’Enquête internationale sur l’enseignement et l’apprentissage (TALIS) de l'OCDE constituent deux des plus grande enquêtes internationales auprès des étudiants et des enseignants. Les données générées par ces enquêtes permettent aux chercheurs et aux décideurs en matière de politiques d’identifier les systèmes éducatifs sont organisés afin de promouvoir l'égalité des chances dans l'enseignement tant à l'intérieur des pays qu’entre les pays. Évidemment, les décideurs sont intéressés à tous les trois niveaux du système scolaire, c’est-à-dire aux élèves, aux enseignants, et aux écoles, afin de comprendre pleinement les différences dans les relations entre les intrants, les processus, et les résultats de l’éducation qui sont observées dans les pays et entre les pays. Une limitation importante associée à ces enquêtes relève du fait qu’un élément important du système éducatif manque à chacune d’elles - à savoir, pour PISA l’aspect enseignant, et pour TALIS la perspective des élèves. Cette limitation peut être partiellement résolue en reliant statistiquement les deux enquêtes. Cela implique la création d'une cohorte synthétique des données - un nouveau fichier de données qui combine les informations provenant des deux enquêtes. Cet article présente une évaluation systématique d'un ensemble de méthodes statistiques qui ont pour but de créer un fichier de synthèse des enquêtes PISA 2009 et TALIS 2008 pour l'Islande. L’étude évalue la mesure dans laquelle chaque méthode fournit un ensemble de données qui maintient les propriétés psychométriques essentielles des enquêtes PISA et TALIS, en se concentrant sur un ensemble de critères de validité établis par Rässler (2002). Cette étude fournit la preuve de concept qu’il est possible de relier statistiquement PISA et TALIS pour les pays qui souhaitent s'appuyer sur la valeur ajoutée de chacune des enquêtes pour la recherche et l'analyse des politiques éducatives.