Test washback on teaching practices used in EFL multi-exam preparation classes in Greece

Abstract

Η παρούσα ερευνά το φαινόμενο του test washback (αναδραστική επίδραση αξιολογικών κριτηρίων). Συγκεκριμένα επικεντρώνεται στην διδακτική μεθοδολογία που χρησιμοποιούν οι καθηγητές σε τάξεις στις οποίες προετοιμάζουν μαθητές για την απόκτηση πιστοποίησης γλωσσομάθειας. Η μελέτη των παραγόντων που επηρεάζει τους καθηγητές στην διδακτική τους μεθοδολογία, δείχνει ότι η αναδραστική επίδραση αξιολογικών κριτηρίων είναι ένα πολύπλοκο φαινόμενο με πολλούς παράγοντες που αλληλεπιδρούν. Η μελέτη περίπτωσης που ερευνήθηκε είναι τάξεις προετοιμασίας για την απόκτηση πιστοποίησης γλωσσομάθειας στην Ελλάδα, οι οποίες παρουσιάζουν μεγάλο ενδιαφέρον, όσον αφορά στην προετοιμασία εξετάσεων για την απόκτηση πιστοποίησης. Στην παρούσα διατριβή χρησιμοποιείται η ορολογία multi-exam classes (τάξεις πολλαπλών εξετάσεων). Η συγκεκριμένη ορολογία προσδιορίζει τις τάξεις προετοιμασίας για την απόκτηση πολλών και διαφορετικών πιστοποιητικών στην ίδια τάξη εφόσον οι μαθητές λαμβάνουν μέρος σε πάνω από μια πιστοποίηση στην ίδια εξεταστική περίοδο. Επομένως, οι καθηγητές στις τάξεις προετοιμασίας πολλών εξετάσεων (multi-exam) αναγκάζονται να προετοιμάσουν και να διδάξουν σε μαθητές για δυο ή ακόμα τρεις ή και τέσσερις πιστοποιήσεις στην ίδια τάξη με διαφορετική μορφή εξέτασης. Η κύρια ερευνητική ερώτηση είναι πως το πλαίσιο πολλών εξετάσεων (multi-exam) επηρεάζει την διδακτική μεθοδολογία που χρησιμοποιούν οι καθηγητές. Η απάντηση στην ερώτηση είναι αποτέλεσμα δυο διαφορετικών μεθόδων της μελέτης περίπτωσης και του ενός ερωτηματολογίου. Οι μελέτες περίπτωσης περιελάμβαναν καθηγητές Αγγλικών σε ένα φροντιστήριο στην Ελλάδα, ενώ το ερωτηματολόγιο διανεμήθηκε σε καθηγητές Αγγλικών από όλη την Ελλάδα. Διενεργήθηκαν ποιοτικές και ποσοτικές ερευνητικές διαδικασίες για την συγκέντρωση των αποτελεσμάτων. Η διδακτική μεθοδολογία δύο καθηγητών που προετοιμάζουν μαθητές για πιστοποιήσεις ερευνήθηκε στην μελέτη περίπτωσης (case-study) μέσω συνεντεύξεων, παρατηρήσεων των μαθημάτων (classroom observation) και συμπληρωματικών συνεντεύξεων (follow-up interviews). Η μελέτη περίπτωσης εστιάζει όχι μόνο σε τάξεις πολλών εξετάσεων (multi-exam) αλλά και σε τάξεις προετοιμασίας για ένα μόνο πιστοποιητικό (one-exam). Συγκεκριμένα η παρούσα έρευνα μελετά σε ποιο βαθμό επηρεάζεται η διδακτική μεθοδολογία των καθηγητών από τη φύση και τις απαιτήσεις των πολλαπλών εξετάσεων τάξεων. Το ερωτηματολόγιο παρέχει πληροφορίες για τους παράγοντες που επηρεάζουν τους καθηγητές να επιλέξουν συγκεκριμένες παιδαγωγικές μεθόδους στις τάξεις προετοιμασίας εξετάσεων. Η ανάλυση των δεδομένων δείχνει ότι ο βαθμός και το είδος της αναδραστικής επίδρασης των εξετάσεων (washback) επηρεάζεται από την μορφή (format) της εξέτασης, τον αριθμό των εξετάσεων μέσα στην τάξη, την σχολική περίοδο (το τρίμηνο) και άλλους παράγοντες άμεσα (teacher-direct factors) και έμμεσα συνδεδεμένους (teacher-indirect factors) με τον καθηγητή. Το γεγονός ότι υπάρχει ποικιλία εξετάσεων με διαφορετική μορφή και διαφορετικές απαιτήσεις και η δυνατότητα των μαθητών να παίρνουν μέρος σε περισσότερες από μια μορφή εξέτασης μπορεί να μειώσει την αναδραστική επίδραση (washback) και να προάγει την μάθηση της γλώσσας. Με αυτόν τον τρόπο οι καθηγητές μπορούν να έχουν περισσότερες ευκαιρίες να χρησιμοποιήσουν διαφορετικές διδακτικές μεθόδους. Ωστόσο, ο καθηγητής παραμένει ένας καθοριστικός παράγοντας που καταδεικνύει πόσο σημαντικό είναι για τους καθηγητές να συμμετέχουν στην αξιολόγηση των μαθητών. Τα ευρήματα της μελέτης αυτής προφέρουν στους καθηγητές γλωσσών, στους εξεταστικούς οργανισμούς, εκπαιδευτές καθηγητών, συγγραφείς βιβλίων και εκδότες, ιδέες άμεσα σχετιζόμενες με τις ανάγκες τους

This research offers new insights into the phenomenon of test washback by focusing on the teaching practices in exam preparation classes. An exploration of the factors influencing teachers how to teach shows that washback is a complex phenomenon with several intervening factors. The case study examined exam preparation classes in Greece which present an interesting pedagogical ecology regarding exam preparation. The term multi-exam class will be used in the current thesis. It is defined as the exam preparation classes where a variety of exams are taught since students often participate in more than one exam in the same exam period. Thus, teachers in multi-exam preparation classes are forced to teach and prepare students for two or even three or four exams in the same class. The main research question is how the multi-exam context influences the teaching practices that teacher use. A distinction is made among ‘methods’, ‘activities’ and ‘tasks’ when studying teachers’ methodology. Two different methods are used to address the question: a case study and a questionnaire, which employed teachers of English teaching in a frontistirio and/or privately. Both qualitative and quantitative data collection procedures were followed. In the case study, interviews, classroom observations and follow-up interviews of two teachers teaching exam preparation classes in the same school are used to elicit information on the nature and type of teaching practices the teachers use to prepare students for exams. The case study compares one exam and multi-exam classes and looks into the extent to which the teachers’ approaches are influenced by the nature and requirements of multi-exam classes. The questionnaire provides information about the factors that influence teachers to choose specific teaching practices in exam preparation classes. Findings show that degrees and kinds of washback seem to be influenced by the type of the exam, the number of exams in preparation classes, the school term and other teacher-direct and teacher-indirect factors. Preparing students for a range of exam options with different formats can reduce washback and promote language learning. In this way, teachers can have more opportunities to use different teaching practices. The teacher remains a significant and influential agent, showing how important it is for teachers to get involved in assessment and develop their language assessment literacy. This study contributes by incorporating a teacher’s voice which, so far, has been absent from the local and national levels, providing valuable information regarding the role of teachers in reforming testing and enhancing classroom practices. The study offers language teachers, teacher trainers, examination bodies and material writers and publishers, insights directly relevant to their needs. The study finally indicates that by investigating not only the roles of stakeholders but also the broad sociocultural and educational context the washback issue can be fully accounted for.