DEVELOPING AN ANALYSIS GRID FOR B1/ B2 READING TASKS AND ITEMS

Abstract

Developing an Analysis Grid for B1/ B2 Reading Tasks and Items. A test analysis grid is a useful tool in the process of test design/ writing and test validation as its development can help both set up guidelines for test writers and provide a means of checking whether these standards are met, not only by test tasks globally, but by test items individually. Assessing reading abilities in a foreign language on CEFR standards requires that test analysis grids adapt to CEFR descriptors. The question is whether the CEFR model of language proficiency may prove particularly successful at building quantifiable scales of selected assessment criteria that can be used to work out scores of test tasks, and test items individually, which can then translate into CEFR levels. The purpose of this research is putting in place an effective algorithm to measure, on the CEFR scale, the various input text characteristics, item characteristics, and problem-solving strategies of reading test tasks in interaction. The present paper focuses specifically on the development of a test analysis grid that can provide an accurate tool to measure/ validate B1 and B2 reading test tasks and items of the Romanian language tests developed at the Babeş-Bolyai University by the Romanian Language, Culture and Civilization Department.

Rezumat. Conceptul şi structura grilei de analiză pentru testele de înţelegere-citire de nivel B1 şi B2. O grilă de analiză a cerinţelor unui test de competenţă lingvistică este un instrument util în procesele de concepţie, structurare, creare şi validare a testului, ea putând fi folosită atât ca un mijloc de îndrumare a creatorilor de teste prin setul propriu de standarde şi specificaţii, cât şi ca un instrument de evaluare a cerinţelor şi itemilor creaţi de către experţi în procesul de validare. Evaluarea competenţei de înţelegere-citire pe baza standardelor CECRL (Cadrul European Comun de Referinţă pentru Limbi) face necesară adaptarea grilei de analiză la descriptorii cadrului european, în măsura în care acest model european standardizat al competenţei lingvistice într-o limbă străină poate susţine cu succes dezvoltarea unui sistem de evaluare cuantificabil şi discriminatoriu între nivelurile de competenţă lingvistică. Scopul acestei cercetări este de a concepe un algoritm eficient de măsurare, pe scala CECRL, a caracteristicilor componentelor unui test de înţelegere-citire (textul sursă, textul itemului/ întrebării şi strategiile de procesare a informaţiei pentru identificarea răspunsului fiecărei întrebări) în interacţiune. În mod specific, acest demers are ca finalitate conceperea unei grile de analiză a testelor de înţelegere-citire dezvoltate de către Departamentul de Limbă, cultură şi civilizaţie românească a Universităţii Babeş-Bolyai în cadrul evaluării la limba română a studenţilor străini înscrişi în anul pregătitor.

Cuvinte cheie: designul testului, procesul de validare, textul sursă, explicaţia şi instrucţiunile cerinţei, cerinţa, itemul, răspunsul preconizat, strategiile de lectură, strategiile de rezolvare a problemei.