Microsoft Word Aptis scoring system layout docx

APTIS SCORING SYSTEM 

KAREN DUNN 

 

 PAGE 5 

 

Table 1: Cronbach’s Alpha mean values for major Aptis variants 2016–17 

Component 

Aptis 

Aptis for 

Teachers 

Aptis for Teens 

Aptis Advanced 

Core 

.92 

.91 

.90 

.86 

Listening 

.84 

.83 

.82 

.76 

Reading 

.91 

.86 

.85 

.75 

 

For the productive skills (Speaking and Writing) a measure of “inter-rater” reliability is given. This is 

based on the examiner performance on a series of “control items” within the system, and indicates 

how consistently the examiners are marking. Each examiner’s workload will comprise approximately 

5% control items, i.e. responses taken from a pool of candidate performances that have been 

scrutinised by senior examiners. All examiners are required to mark within tolerance of the agreed 

mark, and if not, they are required to undertake further training.  

The control items are regularly refreshed so that an examiner will not encounter the same control item 

more than once. The inter-rater reliability is calculated based on the agreement of examiners on the 

marks awarded for the control items. For the 2016–17 Annual Operating Report, a mean inter-rater 

reliability value of .89 was recorded for Speaking and .85 for Writing for the Aptis General variant.  

 

5.   THE COMMON EUROPEAN 

FRAMEWORK OF REFERENCE  

FOR LANGUAGES (CEFR)  

The CEFR is an ongoing project to provide a comprehensive framework for the description of 

language proficiency at clearly defined levels. The CEFR was first published in 2001 with the goal to 

provide “a common basis for the elaboration of language syllabuses, curriculum guidelines, 

examinations, textbooks, etc. across Europe” (Council of Europe, 2001). It was quickly adopted not 

only across Europe but in other regions of the globe as a transparent, accessible tool for educators 

and policy makers. One of the key objectives of the CEFR is to facilitate “transparency in testing and 

the comparability of certifications”

1

. As a part of this framework, there is a widely referenced set of 

language proficiency descriptors, setting out basis of language proficiency across six levels:  

A1 – A2 (Basic User)  

B1 – B2 (Independent User)  

C1 – C2 (Proficient User)  

 

                                                   

1

 https://www.coe.int/en/web/common-european-framework-reference-languages/uses-and-objectives 

---