Examining the contribution of a professional development program to generalist teachers' content knowledge and student achievement : the case of basketball

Abstract

Βασικός στόχος της παρούσας έρευνας ήταν η ανάπτυξη αξιόπιστων και έγκυρων κλιμάκων για τη μέτρηση της γνώσης περιεχομένου (ΓΠ) του εκπαιδευτικού και της επίδοσης του μαθητή στην καλαθόσφαιρα. Ταυτόχρονα, στόχος της παρούσας έρευνας υπήρξε η διερεύνηση της συνεισφοράς ενός προγράμματος επαγγελματικής ανάπτυξης (ΕΑ) στη ΓΠ των εκπαιδευτικών και στα μαθησιακά αποτελέσματα. Για την πραγματοποίηση της εν λόγω έρευνας, σχεδιάστηκε συγκεκριμένη παρέμβαση (δηλ., πρόγραμμα ΕΑ για τη ΓΠ της καλαθόσφαιρας). Η ΓΠ των εκπαιδευτικών και τα μαθησιακά αποτελέσματα στην καλαθόσφαιρα μετρήθηκαν πριν και μετά από το τέλος της παρέμβασης. Το τεστ ΓΠ χορηγήθηκε συνολικά σε 52 εκπαιδευτικούς πρωτοβάθμιας εκπαίδευσης, ενώ το τεστ επίδοσης μαθητή χορηγήθηκε σε 913 μαθητές (Ε’ και Στ’ τάξης). Επιπλέον, κατά τη διάρκεια της παρέμβασης χρησιμοποιήθηκαν διάφορες τεχνικές για τη συλλογή ποιοτικών δεδομένων (π.χ., σχέδια μαθήματος, κάρτες αναστοχασμού διδασκαλίας, ομαδικές συνεντεύξεις και φύλλα αναστοχασμού για το πρόγραμμα ΕΑ) με στόχο τη σε βάθος κατανόηση του υπό εξέταση φαινομένου.Για την ανάλυση των ποσοτικών δεδομένων της έρευνας χρησιμοποιήθηκαν τρεις προχωρημένες στατιστικές μέθοδοι. Αρχικά, για τον έλεγχο των ψυχομετρικών ιδιοτήτων των δύο τεστ χρησιμοποιήθηκαν μοντέλα Item Response Theory. Ακολούθως, πραγματοποιήθηκαν αναλύσεις πολλαπλής γραμμικής παλινδρόμησης (multiple linear regression) για την πρόβλεψη και επεξήγηση της τελικής επίδοσης των εκπαιδευτικών στο τεστ ΓΠ. Σε ένα επόμενο στάδιο, διεξήχθησαν πολυ-επίπεδες αναλύσεις για τη διερεύνηση της συνεισφοράς του προγράμματος ΕΑ στα μαθησιακά αποτελέσματα. Τέλος, για την ανάλυση των ποιοτικών δεδομένων χρησιμοποιήθηκε η μέθοδος συνεχούς σύγκρισης (constant comparative method).Από την ανάλυση των δεδομένων της έρευνας προέκυψαν βασικά ευρήματα. Αρχικά, τα αποτελέσματα της έρευνας φανέρωσαν πως οι δύο κλίμακες είχαν ικανοποιητικές ψυχομετρικές ιδιότητες (κλίμακα ΓΠ εκπαιδευτικού: items’ r=0.98 – teachers’ r=0.75; κλίμακα επίδοσης μαθητή: items’ r=0.98 – students’ r=0.82) και έτσι μπορούσαν να χρησιμοποιηθούν για έγκυρη και αξιόπιστη μέτρηση της ΓΠ των εκπαιδευτικών και των μαθησιακών αποτελεσμάτων. Επιπλέον, σε συμφωνία με ευρήματα προηγούμενων ερευνών, η συμμετοχή των εκπαιδευτικών στο πρόγραμμα ΕΑ αναδείχθηκε ως στατιστικά σημαντικός παράγοντας πρόβλεψης τόσο των αποτελεσμάτων των εκπαιδευτικών όσο και αυτών των μαθητών. Συγκεκριμένα, η ανάλυση έδειξε ότι η συμμετοχή στο πρόγραμμα ΕΑ ήταν στατιστικά σημαντικός παράγοντας πρόβλεψης της τελικής ΓΠ των εκπαιδευτικών, εξηγώντας το 40% της διακύμανσής της. Αντίστοιχα, τα αποτελέσματα της έρευνας δείχνουν πως η μεταβλητή που αναφέρεται στη συμμετοχή των εκπαιδευτικών στο πρόγραμμα ΕΑ, ήταν ο ισχυρότερος παράγοντας πρόβλεψης της επίδοσης του μαθητή. Τα ευρήματά μας ευθυγραμμίζονται επίσης με προηγούμενα ερευνητικά ευρήματα, που υποδηλώνουν ότι η ΓΠ των εκπαιδευτικών είναι κρίσιμης σημασίας για τη βελτίωση των μαθησιακών αποτελεσμάτων. Συγκεκριμένα, η μεταβλητή που αναφέρεται στην τελική επίδοση των εκπαιδευτικών στο τεστ ΓΠ ήταν στατιστικά σημαντικός παράγοντας πρόβλεψης της επίδοσης του μαθητή. Τέλος, τα ευρήματα της έρευνας προσέφεραν εμπειρική στήριξη για την αποτελεσματικότητα συγκεκριμένων, υψηλής ποιότητας, χαρακτηριστικών ΕΑ (π.χ. εστίαση στο περιεχόμενο, παρατεταμένη χρονική διάρκεια, ενεργή μάθηση). Τα πιο πάνω αποτελέσματα – για την ερμηνεία των οποίων πρέπει να ληφθούν υπόψη οι περιορισμοί της έρευνας – έχουν θεωρητικές, μεθοδολογικές και πρακτικές προεκτάσεις. Οι προεκτάσεις αυτές συζητούνται διεξοδικά μαζί με προτάσεις για μελλοντική έρευνα.

Τhe present study sought to develop reliable and valid scales to measure teachers’ CK and students’ achievement in basketball, and in doing so, to investigate the contribution of a content-focused PD program to both teacher and student outcomes. In order to undertake this exploration, an intervention was designed (i.e., content-focused PD program in basketball). Teachers’ CK and students’ achievement in basketball were measured before the beginning and after the end of the intervention. The teacher CK test was administered to 52 Cypriot generalist primary school teachers, while the student performance test was administered to 913 students (5th or 6th Grade students). In addition, a set of qualitative data techniques (i.e., lesson plans, self-reflection cards on teaching, group interviews, and self-reflection sheets on the PD program) was used to gain a deeper understanding of the phenomenon under study. For the analysis of the quantitative data, three advanced statistical techniques were utilized. First, Item Response Theory (IRT) models were run to test the psychometric properties of both the teacher CK test and the student performance test. Second, Multiple Linear Regression analyses were conducted to predict and explain teachers’ final performance in the basketball CK test. Third, Multilevel model analyses were conducted in order to investigate the contribution of the PD program to student achievement. Finally, for the analysis of the qualitative data the constant comparative method was used.This exploration revealed several key findings. To begin, the data analysis indicated that the developed scales had satisfactory psychometric properties (teacher CK scale: items’ r=0.98 – teachers’ r=0.75; student performance scale: items’ r=0.98 – students’ r=0.82) and thus, could provide valid and reliable measurements of teacher CK and student achievement. Moreover, in line with previous research findings, teachers’ participation in a content-focused PD program was found to be a significant predictor of both teacher and student outcome. Specifically, the analysis revealed that the participation in the PD program was a significant predictor of teachers’ final performance in the CK test explaining 40% of its variance. Correspondingly, we found that the variable pertaining to the teachers’ participation in the PD had the strongest effect in predicting student achievement. In particular, teachers’ participation in the PD explained 10.38% of the variance attributed to the teacher level –which represents the 64.92% of the unexplained variance at the teacher level. Our findings also resonate with previous findings suggesting that teacher CK is of critical importance to student achievement. That is, the variable pertaining to teachers’ final performance in the teacher CK test explained 3.65% of the variance attributed to the teacher level – which represents the 22.83% of the unexplained variance at the teacher level. Finally, the study’s findings provided empirical support for specific high-quality PD features (e.g., focus on content, sustained duration, active learning, coherence). Although several limitations should be considered in interpreting the results of the current study, theoretical, methodological, and practical implications are discussed along with suggestions for future research.