
Mesure et évaluation en éducation
Volume 41, Number 2, 2018
Table of contents (5 articles)
-
Connaissances métacognitives et stratégies d’autorégulation impliquées dans la révision de textes : construction et validation d’un instrument autorapporté
Dyanne Escorcia and Fabien Fenouillet
pp. 1–36
AbstractFR:
La présente recherche a pour but de construire et de valider le Questionnaire des composantes métacognitives de la révision de textes (QCMR) en contexte universitaire. Au total, 451 étudiants de licence (trois premières années à l’université) appartenant à plusieurs domaines d’étude dans une université française ont participé à l’étude. Après une version initiale du questionnaire, qui comportait 41 items, une analyse factorielle exploratoire a révélé 5 facteurs correspondant aux dimensions théoriques envisagées. Une analyse factorielle confirmatoire a validé cette structure, qui mesure les variables suivantes : connaissances métacognitives déclaratives, gestion du temps, autosurveillance, connaissances métacognitives procédurales et recherche d’aide. Un bon niveau de fiabilité a été constaté : des coefficients alpha allant de 0,74 à 0,83 ainsi qu’un degré satisfaisant de stabilité temporelle. Le QCMR possède également une bonne validité prédictive.
EN:
The present study aims to construct and validate the Metacognitive Components of Revising Questionnaire (QCMR) in university context. The participants were 451 students from a French university enrolled in different first to third year programs. After a first version of the questionnaire including 41 items, an exploratory factor analysis showed 5 factors which correspond to the theoretical dimensions considered by the researchers. This structure was confirmed by a confirmatory factor analysis and can measure the following variables: declarative metacognitive knowledge, management of time, self-monitoring, procedural metacognitive knowledge and seeking help. The analysis presents a good internal reliability with alpha coefficients ranged from .74 to .83. The results of the test-retest reliability were good. Finally, the QCMR presents a correct predictive validity.
PT:
O objetivo desta investigação é construir e validar o Questionário de componentes metacognitivos da revisão de textos (QCMR) no contexto universitário. Participaram no estudo 451 estudantes de licenciatura (três primeiros anos na universidade) de várias áreas de estudo de uma universidade francesa. Após uma versão inicial do questionário, que incluiu 41 itens, uma análise fatorial exploratória revelou 5 fatores correspondentes às dimensões teóricas consideradas. Uma análise fatorial confirmatória validou esta estrutura que mede as seguintes variáveis: conhecimentos metacognitivos declarativos, gestão do tempo, autovigilância, conhecimentos metacognitivos processuais e investigação de ajuda. Constatou-se um bom nível de fiabilidade: os coeficientes alfa variam de 0,74 a 0,83 e a estabilidade temporal apresenta um grau satisfatório. QCMR também tem boa validade preditiva.
-
Approches psychométrique et didactique de la validité d’une évaluation externe en mathématiques : quelles complémentarités et quelles divergences ?
Nadine Grapin and Brigitte Grugeon-Allys
pp. 37–66
AbstractFR:
Si la notion de validité fait l’objet de multiples recherches, notamment dans le champ de la psychométrie, elle n’a pas encore été beaucoup étudiée dans le cadre de la didactique des mathématiques. Nous proposons d’expliciter la façon dont les outils de ce champ de recherche, en particulier l’analyse a priori des tâches, peuvent être exploités pour apporter des preuves de validité complémentaires à celles de la psychométrie. Une première partie vise à proposer une méthodologie d’analyse et de conception du contenu d’une évaluation externe dans laquelle l’approche didactique de la validité est pensée en complémentarité de celle psychométrique. Nous illustrons, dans une deuxième partie, la mise en oeuvre de cette méthodologie sur l’étude de deux domaines mathématiques (l’arithmétique en fin d’école et l’algèbre en fin de collège) dans des évaluations menées nationalement en France à ces deux ordres d’enseignement.
EN:
Even if many researches deal with validity, especially in psychometrics, this notion hasn’t been significantly discussed in the field of didactics of mathematics. This paper examines how didactics tools, especially a priori analysis of tasks, can be used to bring validity evidence in addition to those provided by psychometrics. A first part of the paper aims to expose a methodology, using a combination of didactic and psychometric approaches, to analyze and design external assessment tests. In a second part, we implement this methodology to study two national large scale assessments, in two mathematical domains at two levels of school (arithmetic at the end of primary school and algebra at the end of grade 9), in France.
PT:
Embora o conceito de validade seja objeto de muitas investigações, particularmente no campo da psicometria, não foi ainda muito estudado no quadro da didática das matemáticas. Ora, o nosso propósito é explicar a maneira como as ferramentas deste campo de investigação, em particular a análise prévia de tarefas, podem ser exploradas para fornecer provas de validade complementares às da psicometria. A primeira parte visa propor uma metodologia de análise e conceção do conteúdo de uma avaliação externa na qual a abordagem didática da validade é pensada em complementaridade à da psicometria. Numa segunda parte, mostramos a implementação desta metodologia no estudo de dois domínios matemáticos (aritmética no final do 2.º ciclo e de álgebra no final do 3.º ciclo do ensino básico) nas avaliações realizadas a nível nacional em França nestes dois níveis de ensino.
-
Évaluer la résilience des étudiants en santé en France : adaptation et mesure de l’invariance de l’échelle CD-RISC 10
Gilles Guihard, Audrey Morice-Ramat, Laurent Deumier, Lionel Goronflot, Brigitte Alliot-Licht and Ludivine Bouton-Kelly
pp. 67–96
AbstractFR:
La résilience correspond à la manifestation de signes psychophysiologiques positifs chez un individu évoluant dans un environnement stressant. L’échelle abrégée de Connor et Davidson (CD-RISC 10) en permet une estimation fiable et rapide. Une version française n’existant pas, nos objectifs ont consisté à produire cette version, à en analyser les propriétés psychométriques et à en tester l’invariance dans différents échantillons. Le projet a impliqué les étudiants inscrits en santé à l’Université de Nantes. Nous avons exploité 1347 réponses provenant d’étudiants inscrits en première année commune aux études de santé (PACES), d’étudiants en odontologie et en médecine ainsi que d’internes de médecine générale. Les analyses ont confirmé la structure unidimensionnelle. Les indicateurs de consistance interne et de stabilité temporelle étaient acceptables. La validité convergente était seulement satisfaite pour les internes de médecine générale. L’analyse a montré que l’invariance selon le genre ou le curriculum était acceptable au niveau métrique/ faible. Le niveau d’invariance scalaire/fort selon le genre n’a été satisfait que chez les étudiants en PACES et les internes. Une invariance partielle a été proposée en fonction du genre pour les étudiants en médecine et en odontologie. Nos résultats indiquent que l’échelle CD-RISC 10 peut être utilisée pour évaluer la résilience d’étudiants en santé en France, dès lors qu’une mesure d’invariance accompagne les analyses statistiques.
EN:
Resilience corresponds to positive psychophysiological outcomes while living in a stressful environment. The 10-item Connor-Davidson resilience scale (CD-RISC 10) allows a reliable and rapid estimation of resilience. As French version is still lacking, our objectives were to produce a French version, to analyze the psychometric properties and to measure scale invariance in different samples. The project involved health students enrolled at Nantes University. The dataset was composed by 1347 responses originating from first-year students, from dental and medical students, and from family medicine residents. Analyses revealed a replicable unidimensional structure. The indicators of internal consistency and time-related stability reached acceptance thresholds. Convergent validity was found acceptable only in the sample of family medicine residents. Scale invariance across gender and curriculum was satisfied at the weak/metric level. Strong/scalar invariance across gender was only observed for first-year students and for family medicine residents. Partial scale invariance across gender was proposed for medical and dental students. These results indicate that the French version of the CD-RISC 10 scale can be used to assess French health students resilience. However, invariance measurement remains essential in order to validate comparative analyses.
PT:
A resiliência corresponde à manifestação de sinais psicofisiológicos positivos num indivíduo que evolui num ambiente de stressante. A escala de resiliência Connor-Davidson (CD-RISC) 10 permite uma estimativa fiável e rápida. Os nossos objetivos foram produzir uma versão francesa desta escala, analisar as suas propriedades psicométricas e testar a sua invariância em diferentes amostras. O projeto envolveu estudantes matriculados em saúde na Universidade de Nantes. Utilizamos 1347 respostas provenientes de alunos matriculados no primeiro ano comum nos estudos de saúde (PACES), estudantes de odontologia e medicina e internos em medicina geral. As análises confirmaram a estrutura unidimensional. Os indicadores de consistência interna e estabilidade temporal foram aceitáveis. A validade convergente só foi satisfeita pelos internos em medicina geral. A análise mostrou que a invariância de género ou de currículo era aceitável no nível métrico/fraco. O nível de invariância escalar/forte de género foi satisfeito apenas nos estudantes do PACES e internos. Invariância parcial foi proposta em função do género nos estudantes em medicina e odontologia. Os nossos resultados indicam que a escala CD-RISC 10 pode ser usada para avaliar a resiliência de estudantes de saúde em França, uma vez que uma medida de invariância acompanha as análises estatísticas.
-
Perceptions par les élèves du climat de soutien en mathématiques : validation d’échelles et étude des différences selon le genre en 5e secondaire
Doriane Jaegers and Dominique Lafontaine
pp. 97–130
AbstractFR:
Cette étude vise à valider des échelles en langue française destinées à mesurer les perceptions qu’ont les élèves de 5e secondaire (16 ans) du climat de soutien dans leur classe de mathématiques. Se basant sur la théorie de l’autodétermination (Deci et Ryan, 2000a, 2000b) et, plus spécifiquement, sur la satisfaction des trois besoins fondamentaux, les échelles utilisées étayent le troisième pilier du modèle tridimensionnel d’un enseignement de qualité de Klieme et ses collaborateurs (2006). Les résultats d’analyses factorielles exploratoires et confirmatoires ont abouti à quatre échelles dont les qualités psychométriques sont satisfaisantes. La présente recherche examine également les différences de perceptions du climat de soutien en mathématiques en fonction du genre. Si aucune différence n’est trouvée pour trois échelles, les analyses indiquent que, de manière significative, les filles perçoivent davantage l’implication de leur enseignant que les garçons, et ce, même sous contrôle du niveau socioéconomique et des performances en mathématiques.
EN:
This study aims at validating a French version of scales designed to measure students’ perceptions of supportive climate in mathematics in grade 11 (16 years old). Based on Self-Determination Theory (Deci & Ryan, 2000a, 2000b), and more precisely on the fulfillment of the three psychological basic needs, the scales focus one of the three basic dimensions of Klieme et al.’s model of instructional quality (Klieme et al., 2006). Results from exploratory and confirmatory factor analyses showed that the four scales present good psychometric properties. The current study also investigates gender differences in students’ perceptions of supportive climate in mathematics. If no gender differences are found for three scales, results show that girls perceive more significantly teacher social and academic support than boys, even under control of their socioeconomic status and their math abilities.
PT:
O objetivo deste estudo é validar as escalas em língua francesa destinadas a medir as perceções dos alunos do 5.º secundário (16 anos de idade) sobre o clima de apoio nas aulas de matemática. Com base na teoria da autodeterminação (Deci & Ryan, 2000a, 2000b) e, mais especificamente, na satisfação das três necessidades fundamentais, as escalas utilizadas suportam o terceiro pilar do modelo tridimensional de um ensino de qualidade de Klieme e dos seus colaboradores (2006). Os resultados das análises fatoriais exploratórias e confirmatórias geraram quatro escalas cujas qualidades psicométricas são satisfatórias. A presente investigação também examina as diferenças de perceções do clima de apoio em matemática em função do género. Embora não haja diferença para três escalas, as análises indicam que, significativamente, as meninas percebem o envolvimento do professor mais do que os meninos, mesmo sob o controlo do nível socioeconómico e dos desempenhos em matemática.
-
Évaluation formative et autorégulation des apprentissages des élèves : propositions méthodologiques pour l’analyse de processus in situ
Céline Lepareur and Michel Grangeat
pp. 131–162
AbstractFR:
La recherche concerne l’étude des effets de différentes modalités d’évaluation formative sur l’autorégulation des apprentissages des élèves, dans le cadre de l’enseignement scientifique fondé sur l’investigation. Des indicateurs nous permettant d’analyser les processus in situ sont construits et deux situations d’enseignement sont comparées. La première porte sur l’évaluation formative que les enseignants mettent en oeuvre dans leur pratique quotidienne. La seconde concerne l’évaluation formative mise en oeuvre par les mêmes enseignants l’année suivante, à la suite d’un travail réflexif avec des chercheurs. Après avoir confirmé, par le biais d’une analyse statistique, que les enseignants mettent en oeuvre différentes modalités d’évaluation formative d’une année à l’autre, nous décrivons les pratiques évaluatives des enseignants et leurs effets sur les élèves. Nous observons un meilleur équilibre dans l’usage des différentes modalités d’évaluation formative par les enseignants dans la seconde situation ainsi qu’une autorégulation plus efficace des comportements des élèves dans la tâche proposée.
EN:
The research concerns the study of the effects of different practices of formative assessment on student self-regulation, in the context of inquiry-based science teaching. An indicator grid is constructed to analyze in situ processes, and two teaching situations are compared. The first corresponds to formative assessment such as teachers implement it in their daily practice. The second concerns the assessment practices implemented by the same teachers the following year, after a reflective workshop with the researchers. After confirming through a statistical analysis that teachers implement different modalities of formative assessment from one year to the next, we describe the evaluative practices of teachers and their effects on students. Our results show a better balance in the use of different formative assessment modalities by the teachers in the second situation and a more efficient self-regulation by the students in the proposed task.
PT:
A investigação diz respeito ao estudo dos efeitos de diferentes modalidades de avaliação formativa sobre a autorregulação das aprendizagens dos alunos, no âmbito do ensino científico baseado na investigação. São construídos indicadores que nos permitem analisar processos in situ e são comparadas duas situações de ensino. A primeira tem a ver com avaliação formativa que os professores implementam na sua prática diária. A segunda diz respeito à avaliação formativa implementada pelos mesmos professores no ano seguinte após um trabalho reflexivo com investigadores. Após a confirmação, através do enviesamento da análise estatística, que os professores implementam diferentes modalidades de avaliação formativa de um ano para o outro, descrevemos as práticas de avaliação dos professores e os seus efeitos nos alunos. Observamos um melhor equilíbrio no uso de diferentes modalidades de avaliação formativa pelos professores na segunda situação, bem como uma autorregulação mais eficaz dos comportamentos dos alunos na tarefa proposta.