Une nouvelle perspective et de nouveaux défis pour les enquêtes internationales Vers un testing assisté par ordinateur

Résumé

Le présent article analyse les changements qui ont été introduits dans les enquêtes comparatives internationales (plus spécifiquement celles de l’OCDE) par suite de l’introduction du testing assisté par ordinateur. On passera en revue les différents instruments de mesure administrés par ordinateur qui ont été utilisés dans les différents cycles de ces enquêtes et on discutera si elles ont réellement impliqué une valeur ajoutée, notamment par le fait de fournir des données sur des compétences qui sont inaccessibles à travers des instruments classiques sous format papier-crayon. On analysera également les relations spécifiques que les mesures assistées par ordinateur entretiennent avec des variables d’arrière-fond tel le genre. Finalement, l’article mettra en évidence les défis et les risques qui sont associés avec une introduction de plus en plus massive d’instruments de mesure assistés par ordinateur, notamment en ce qui concerne deux aspects majeurs: la nécessité de garder une continuité dans les compétences mesurées en vue de mettre en évidence des évolutions, et le manque de cadres théoriques adéquats pour la mise en oeuvre efficace des mesures assistées par ordinateur.

Mots-clés :

• Enquêtes comparatives internationales,
• testing assisté par ordinateur,
• édumétrie

Abstract

The present article analyzes the changes that have been introduced in comparative international large-scale studies (specifically those organized by the OECD) as a consequence of the introduction of computer-assisted testing. We will review the various measurement instruments that have been administered by computer in the different cycles of these large-scale studies and we will discuss whether their introduction implied a real added value, notably by providing information on competencies that are inaccessible through classical paper and pencil tests. We will also analyze the specific relationship that the computer-assisted measures show with background variables, such as gender. Finally, the article will point out the challenges and risks associated with a more and more extensive introduction of computer-assisted measurement instruments, especially regarding two major aspects: the necessity to keep a certain stability in the measured competencies in view of reporting trends, and the lack of adequate theoretical frameworks for the efficient use of the computer-assisted measures.

Keywords:

• large-scale comparative studies,
• computer-assisted testing,
• edumetrics

Resumo

O presente artigo analisa as mudanças que foram introduzidas nos inquéritos comparativos internacionais (mais especificamente os da OCDE) na sequência da introdução do testing assistido por computador. Passar-se-á em revista os diferentes instrumentos de medida administrados por computador que foram utilizados nos diferentes ciclos destes inquéritos e discutir-se-á se eles implicaram realmente um valor acrescentado, nomeadamente pelo facto de fornecerem dados sobre as competências que são inacessíveis através dos instrumentos clássicos em formato papel e lápis. Analisar-se-á igualmente as relações específicas que as medições assistidas por computador estabelecem com as variáveis de background, como é o caso do género. Finalmente, o artigo evidenciará os desafios e os riscos que estão associados a uma introdução cada vez mais massiva de instrumentos de medida assistidos por computador, designadamente no que respeita a dois aspetos maiores : a necessidade de garantir uma continuidade nas competências medidas com vista a evidenciar as evoluções e a falta de quadros teóricos adequados para a operacionalização eficaz das medições assistidas por computador.

Palavras chaves:

• Inquéritos comparativos internacionais,
• testing assistido por computador,
• edumetria