Measure of agreement between experts on apple damage assessment Mesure du degré de concordance entre experts pour l’évaluation de dommages sur des pommes

Abstract

Although damage evaluation is an important and frequent exercise in economic entomology, there are no quantitative studies on inter-rater agreement of experts. In this experiment conducted during the 50^th New York, New England and Canadian Pest Management Conference, four teams of experts independently estimated the damage on 200 apples at harvest. The participants identified 22 types of damage caused by insects, 8 by diseases, and 8 related to other causes. For each type of damage an average measure of agreement was calculated. The lowest average agreements were found in plum curculio (Conotrachelus nenuphar) [Coleoptera : Curculionidae] damage (71.8%), tarnished plant bug (Lygus lineolaris) [Hemiptera : Miridae] damage (83.2%), and by early lepidoptera damage (87.1%). The usefulness of inter-rater agreement experiments is discussed in the context of many situations pertaining to crop protection.

Résumé

Quoique l'évaluation des dommages soit un exercice important et fréquent en entomologie appliquée, il n'y a pas d'études publiées concernant le degré de concordance des évaluations de dommages par les experts. Au cours de cette étude, effectuée lors de la 50^e Conférence en lutte intégrée des vergers de l'État de New York, de la Nouvelle-Angleterre et du Canada, quatre équipes d'experts ont évalué, de façon indépendante, les dommages causés sur 200 pommes. Les participants ont identifié 22 types de dommages causés par les insectes, 8 par des maladies et 8 reliés à d'autres causes. Nous avons calculé un degré de concordance pour chaque type de dommage. Les degrés de concordance les plus bas concernaient les dommages du charançon de la prune (Conotrachelus nénuphar) [Coleoptera : Curculionidae] (71,8%), de la punaise terne (Lygus lineolaris) [Hemiptera : Miridae] (83,2 %) et les dommages causés par les larves de lépidoptères en début de saison (87,1 %). On discute de l'utilité de l'usage du degré de concordance dans le contexte de plusieurs situations de lutte intégrée.