Η παρουσίαση φορτώνεται. Παρακαλείστε να περιμένετε

Η παρουσίαση φορτώνεται. Παρακαλείστε να περιμένετε

Βήματα στην Κατασκευή ενός Ψυχομετρικού Εργαλείου (Μέρος B) Εργαστήριο: Κατασκευή ενός Ψυχομετρικού Εργαλείου 3 η Διάλεξη.

Παρόμοιες παρουσιάσεις


Παρουσίαση με θέμα: "Βήματα στην Κατασκευή ενός Ψυχομετρικού Εργαλείου (Μέρος B) Εργαστήριο: Κατασκευή ενός Ψυχομετρικού Εργαλείου 3 η Διάλεξη."— Μεταγράφημα παρουσίασης:

1 Βήματα στην Κατασκευή ενός Ψυχομετρικού Εργαλείου (Μέρος B) Εργαστήριο: Κατασκευή ενός Ψυχομετρικού Εργαλείου 3 η Διάλεξη

2 Βήματα στην Κατασκευή ενός Τεστ  Ο στόχος του τεστ  Δημιουργώντας το θεωρητικό πλαίσιο  Δημιουργώντας τα στοιχεία του τεστ  Σχεδιάζοντας το τεστ  Πιλοτική Έρευνα  Ανάλυση στοιχείων  Αξιοπιστία  Εγκυρότητα  Στάθμιση

3 Πιλοτική Έρευνα  Στόχος της πιλοτικής έρευνας είναι να επιλέξουμε τα στοιχεία εκείνα που θα συνθέσουν την τελική έκδοση του τεστ μας.  Επιλέγουμε ένα αντιπροσωπευτικό του πληθυσμού στον οποίο απευθύνεται το τεστ δείγμα ατόμων, και χορηγούμε το τεστ  Ο αριθμός των ατόμων του δείγματος ποικίλει ανάλογα την τεχνική που θα χρησιμοποιηθεί για την ανάλυση στοιχείων

4 Η Ανάλυση Στοιχείων Στόχος της Ανάλυσης Στοιχείων (Item Analysis) είναι να εντοπιστούν τα στοιχεία εκείνα που σύμφωνα με μια σειρά από ψυχομετρικά κριτήρια μπορούν να μετρήσουν με αποτελεσματικότητα το χαρακτηριστικό που μετρά το συγκεκριμένο ψυχομετρικό εργαλείο.

5 Μέθοδοι Ανάλυσης Στοιχείων  Ανάλυση Στοιχείων σύμφωνα με την Κλασική θεωρία (Classic Theory)  Ανάλυση Στοιχείων με τη μέθοδο της Παραγοντικής Ανάλυσης (Factor Analysis)  Ανάλυση Στοιχείων σύμφωνα με τη Θεωρία του Υπολογισμού των Ικανοτήτων (Item Response Theory)

6 Ανάλυση Στοιχείων σύμφωνα με την Κλασική Θεωρία  Χρησιμοποιείται κυρίως για την επιλογή στοιχείων γνωστικών τεστ.  Ανάλυση εσφαλμένων εναλλακτικών απαντήσεων  Ανάλυση δείκτη δυσκολίας (p)  Ανάλυση δείκτη διαφοροποίησης (d)

7 Η ανάλυση των εσφαλμένων απαντήσεων  Η ανάλυση της δύναμης των εσφαλμένων εναλλακτικών απαντήσεων αξιολογεί το ποσοστό των εξεταζόμενων που επιλέγουν καθεμία από τις εσφαλμένες εναλλακτικές απαντήσεις.  Κατά πόσο οι εσφαλμένες εναλλακτικές απαντήσεις είναι χρήσιμες.

8 Ο Δείκτης Δυσκολίας (p)  Ο Δείκτης Δυσκολίας (Item Difficulty) δείχνει το ποσοστό των ατόμων που απαντούν σωστά στο κάθε στοιχείο.

9 Ο Δείκτης Διαφοροποίησης (d) Δ Δ = Δείκτης Διαφοροποίησης ΑΟ ΑΟ = ο δείκτης δυσκολίας για την ανώτερη ομάδα ΚΑ ΚΑ = ο δείκτης δυσκολίας για την κατώτερη ομάδα Ο δείκτης διαφοροποίησης (item discrimination index) αξιολογεί κατά πόσο κατά πόσο τα άτομα δίνουν διαφορετικές απαντήσεις σε ένα στοιχείο.  Ο δείκτης διαφοροποίησης (item discrimination index) αξιολογεί κατά πόσο κατά πόσο τα άτομα δίνουν διαφορετικές απαντήσεις σε ένα στοιχείο.

10 Επιλογή Στοιχείων μέσω της Ανάλυσης Παραγόντων  Χρησιμοποιείται και στα τεστ ικανοτήτων και στα τεστ προσωπικότητας  Στόχος η εύρεση των στοιχείων που συνθέτουν τις «διαστάσεις» (παράγοντες) του χαρακτηριστικού που μετράμε  Μπορεί να αποτελέσει εναλλακτική μέθοδο υπολογισμού του δείκτη διαφοροποίησης  Οι συσχετίσεις του κάθε στοιχείου με τον κάθε παράγοντα μας επιτρέπουν να επιλέξουμε τα καταλληλότερα στοιχεία για το τεστ μας.

11 Τι είναι η ανάλυση παραγόντων συνοψίσει να γίνει αντιληπτή μια έννοια ή ιδιότητα • Σκοπός της ανάλυσης παραγόντων (ΑΠ) είναι να συνοψίσει τις σχέσεις ανάμεσα σε ένα μεγάλο αριθμό μεταβλητών με έναν περιεκτικό και ακριβή τρόπο, ώστε να βοηθήσει να γίνει αντιληπτή μια έννοια ή ιδιότητα Παράδειγμα: τέσσερις βασικές μεταβλητές παράγοντες • Η ΑΠ μπορεί να βοηθήσει έναν ερευνητή να αντιληφθεί ότι μια συστοιχία από είκοσι τέσσερα επιμέρους τεστ αντιπροσωπεύει μόνο τέσσερις βασικές μεταβλητές, που ονομάζονται παράγοντες

12 Είδη ανάλυσης παραγόντων  Διερευνητική Ανάλυση Παραγόντων (Exploratory Factor Analysis)  Επιβεβαιωτική Ανάλυση Παραγόντων (Confirmatory Factor Analysis)

13 Διερευνητική Ανάλυση Παραγόντων  Χρησιμοποιείται για την αρχική διερεύνηση και τη συνοπτική περιγραφή ενός σετ μεταβλητών μέσα από την ομαδοποίησή τους  Χρησιμοποιείται κυρίως στην κατασκευή τεστ που ανήκουν στη συναισθηματική σφαίρα (π.χ. προσωπικότητα)  Δημιουργήθηκε από τον Charles Spearman στις αρχές του προηγούμενο αιώνα

14 Παράδειγμα

15 Παράδειγμα

16 Παράδειγμα Αποτελεσμάτων

17 Επιβεβαιωτική Ανάλυση Παραγόντων  Χρησιμοποιείται για να διαπιστώσει κατά πόσο ένα προκαθορισμένο πλαίσιο σχέσεων ανάμεσα σε κάποιες μεταβλητές (σχέσεις) επιβεβαιώνεται και στην πράξη (από τα δεδομένα)  Χρησιμοποιείται για την προσαρμογή εργαλείων από το ένα πολιτισμικό περιβάλλον στο άλλο

18 Παράδειγμα

19 Παράδειγμα Αποτελεσμάτων Table 2. Goodness-of-fit indices of the hypothesized factor models of the TAS-20 Modelχ 2 /dfGFICFINNFIRMSEARMSRAIC Model I (measurement model ) Model II (two-factors) Model III (three-factors) Model IV (four-factors)

20 Αξιοπιστία μετρά με ακρίβεια θα έχουμε το ίδιο αποτέλεσμα Η διαδικασία με την οποία διαπιστώνουμε κατά πόσο ένα τεστ μετρά με ακρίβεια, αυτό για το οποίο κατασκευάστηκε να μετρά. Με άλλα λόγια, όταν χορηγήσουμε το τεστ πάλι στο ίδιο άτομο, θα έχουμε το ίδιο αποτέλεσμα;

21 Μέθοδοι Υπολογισμού της Αξιοπιστίας • Αξιοπιστία Επαναληπτικών Μετρήσεων • Αξιοπιστία Εναλλακτικών Τύπων • Αξιοπιστία Εσωτερικής Συνοχής •Αξιοπιστία Δύο Ημίσεων •Δείκτης Alpha • Αξιοπιστία Βαθμολογητών

22 Η Εγκυρότητα αυτό για το οποίο κατασκευάστηκε Η διαδικασία με την οποία διαπιστώνουμε κατά πόσο ένα τεστ μετρά αυτό για το οποίο κατασκευάστηκε

23 Είδη Εγκυρότητας και τρόποι υπολογισμού της Φαινομενική Εγκυρότητα Εγκυρότητα Περιεχομένου Εγκυρότητα σε σχέση με το κριτήριο Συγχρονική Εγκυρότητα Προβλεπτική Εγκυρότητα Εγκυρότητα Εννοιολογικής Κατασκευής Συγκλίνουσα Εγκυρότητα Αποκλίνουσα Εγκυρότητα

24 Στάθμιση Νορμών  Δημιουργία Νορμών δομημένη διαδικασία  Νόρμα είναι μια δομημένη διαδικασία (μέθοδος) εννοιολογικής απόδοσης της βαθμολογίας ενός ατόμου σε ένα τεστ. σύγκριση της βαθμολογίας  Η μέθοδος αυτή, δεν είναι τίποτε άλλο από τη σύγκριση της βαθμολογίας από το τεστ, με το δείγμα της στάθμισης

25 Τεστ Νορμών: τη θέση που έχει το άτομο Με αυτή τη μέθοδο μπορούμε να καθορίσουμε τη θέση που έχει το άτομο σε σχέση με το γενικό ή ειδικό πληθυσμό (αναφορικά με την επίδοσή του στο τεστ). Π.χ. Ο Γιάννης είναι καλύτερος από το 60% των ατόμων της τάξης του.

26 Είδη Νορμών  Εκατοστημόρια  Τυπικοί Βαθμοί •Z-scores •T-scores  Νόρμες Νοητικού Πηλίκου


Κατέβασμα ppt "Βήματα στην Κατασκευή ενός Ψυχομετρικού Εργαλείου (Μέρος B) Εργαστήριο: Κατασκευή ενός Ψυχομετρικού Εργαλείου 3 η Διάλεξη."

Παρόμοιες παρουσιάσεις


Διαφημίσεις Google