The emergence of algorithmic problem solving behavior

Résumé

L’objectif de ce document est de décrire les étapes suivies pour examiner la «validité construite» (au sens de Cronbach,1960) d’un ensemble de «superitems» mathématiques. Un «superitem» est un ensemble de questions-tests relevant d’un domaine commun (Cureton, 1965). Dans la recherche rapportée ici, il s’agit d’un ensemble de situations-problèmes mathématiques et d’un ensemble d’items pour chaque situation, choisis pour leur valeur informative à l’égard des niveaux (qualitativement différents) de capacité de raisonnement des étudiants. La structure des superitems est fondée sur la taxonomie Solo (Collis et Biggs, 1979) utilisée pour classer la structure des résultats observables de l’apprentissage. Les items ont été préparés pour être administrés à des étudiants de 9, 11, 13 et 17 ans. Un rapport antérieur décrit la manière dont ils ont été élaborés (Romberg, Collis, Donovan, Buchanan et Romberg, 1982). Ce rapportci examine la validité des superitems et l’utilité de la méthode proposée pour des évaluations à grande échelle.

Cette recherche a été financée par la Commission de l’Education des Etats-Unis (grâce à des fonds fournis par le National Institute of Education). A l’évidence, les items proposés seraient utiles pour le futur Natlonal Assessment of Education Progress (N.A.E.P.) en ce qui concerne les mathématiques.

Abstract

The purpose of this document is to report the steps that were followed to examine the «construct validity» (Cronbach, 1960) of a set of mathematical superitems. A «superitem» is a set of test questions based on a common situation or stem (Cureton, 1965). In this project, a pool of mathematical problem solving situations and a set of items for each situation were designed to provide information about the student’s qualitatively different levels of reasoning ability. The structure for the superitems was based on Collis and Biggs’ (1979) Solo Taxonomy used to classify the structure of observed learning outcomes. The items were prepared to be administered to students of 9, I l, 13 and 17 years of age. An aerlier report describes how the items were developed (Romberg, Collis, Donovan, Buchanan and Romberg, 1982).

This report examines the validity of the superitems and the utility of the procedure for large scale assessments.
The project was funded by the Educational Commission of the United States (with funds supplied by the National Institute of Education). Ostensibly the resulting items would be useful in future National Assessment of Education Progress (NAEP) studies in mathematics.

Resumen

El objetivo de este documento es describir las etapas seguidas para examinar la «validez de construcción» (en el sentido de Cronbach, 1960) de un conjunto de «superitems» matemáticos. A superitem es un conjunto de preguntas-test en un dominio común. En esta investigación se presentan situaciones-problemas en matemática y un conjunto de items para cada situación, escogidos por su valor informativo respecto a niveles (cualitativamente diferentes) de capacidad de razonamiento de los alumnos. La estructura de los super-items se funda en la toxonomía Solo (Collis et Biggs 1979) utilizada para clarificar la estructura de los resultados observables del aprendizaje. Los items han sido preparados para ser administrados a alumnos de 9, 11, 13 y 17 años. Un artículo anterior describe como fueron elaborados (Romberg, Collis, Danovan, Buchanan et Romberg, 1982). En el mencionado artículo se examina la validez de los super-items y la utilidad del método propuesto para evaluaciones en gran escala.

Esta investigación ha sido financiada por la Comisión de Educación de los Estados Unidos (con fondos otorgados por el Instituto Nacional de Educación). En principio, los items propuestos podrían servir para que la Evaluación Nacional del Progreso Educativo (N.A.E.P.) los tenga en cuenta en el área de la matemática.