PIAAC steht für Programme for the International Assessment of Adult Competencies. Ähnlich wie bei PISA (Programme for International Student Assessment) handelt es sich dabei um eine von der Organisation für wirtschaftliche Zusammenarbeit und Entwicklung (OECD) in Auftrag gegebene internationale Vergleichsstudie zur Erfassung von grundlegenden Kompetenzen. Untersucht wird eine Stichprobe der erwachsenen Wohnbevölkerung im Alter von 16 bis 65 Jahren.
Ziele der Studie Nach Veranstalterangaben werden mit PIAAC „grundlegende Kompetenzen untersucht, die notwendig sind, um den alltäglichen und beruflichen Anforderungen erfolgreich begegnen zu können.“ PIAAC liefere „Anhaltspunkte, inwiefern Schul- und Ausbildungssysteme der einzelnen Länder in der Lage sind, die erforderlichen Kompetenzen zur erfolgreichen Teilnahme an der Gesellschaft zu fördern. Diese Erkenntnisse bieten eine wissenschaftliche Grundlage für mögliche politische Interventionen und gesellschaftliche Veränderungen.“PIAAC im Überblick - Website von PIAAC. Abgerufen am 1. Oktober 2013.
Untersucht werden Lesekompetenzen, alltagsmathematische Kompetenzen sowie technologiebasierte Problemlösekompetenzen Erwachsener. Mit zusätzlich erhobenen soziodemografischen Merkmalen und Hintergrundinformationen können zudem Indikatoren identifiziert werden, die mit dem Erlangen von Kompetenzen im Zusammenhang stehen. Somit liefere PIAAC „sowohl auf nationaler Ebene als auch im internationalen Vergleich ein umfassendes Bild des Humankapitals der teilnehmenden Länder.“Ziele von PIAAC – Website von PIAAC. Abgerufen am 1. Oktober 2013.
Inhalt der Studie In PIAAC werden die folgenden Kompetenzen untersucht: Lesekompetenz (Literacy) sowie grundlegende Komponenten der Lesekompetenz (Reading Components): Damit wird das Verstehen, Nutzen und Interpretieren von geschriebenen Texten verstanden. Die Lesekompetenz ist die Voraussetzung, um eigene Ziele zu erreichen, das eigene Wissen und Potenzial weiterzuentwickeln und am gesellschaftlichen Leben teilzunehmen. Neben Aufgaben wie dem Lesen und Verstehen eines Medikamentenbeipackzettels oder eines kurzen Zeitungsartikels sind ebenso Aufgaben enthalten, die das Lesen in elektronischen Medien erfordern, wie z. B. einer Stellenanzeige in einem Onlineportal.Lesekompetenz (Literacy) – Website von PIAAC. Abgerufen am 1. Oktober 2013. Alltagsmathematische Kompetenz (Numeracy): Es bezeichnet die Fähigkeit, alltägliche mathematische Informationen abzurufen, zu verwenden, zu interpretieren und den unterschiedlichen mathematischen Anforderungen im Alltag erfolgreich zu begegnen. Operationalisiert wird alltagsmathematische Kompetenz mit Aufgaben wie z. B. der Einschätzung eines Sonderangebots oder der Interpretation von numerischen Informationen in Grafiken und Tabellen.Alltagsmathematische Kompetenz (Numeracy) - Website von PIAAC. Abgerufen am 1. Oktober 2013. Technologiebasiertes Problemlösen (Problem Solving in Technology-Rich Environments): Das technologiebasierte Problemlösen ist als Kompetenzdomäne erstmals in PIAAC operationalisiert. Sie bezeichnet die Verwendung digitaler Technologien, Kommunikationshilfen und Netzwerke zur erfolgreichen Informationssuche, -vermittlung und -interpretation. Im Fokus der ersten Befragungswelle bei PIAAC steht hierbei, wie Personen sich Informationen in einer computergestützten Umgebung erfolgreich beschaffen und wie sie diese verwenden. Diese Domäne beinhaltet Aufgaben wie das Sortieren und Versenden von E-Mails, die Bearbeitung von virtuellen Formularen und die Beurteilung des Informationsgehalts sowie der Vertrauenswürdigkeit von verschiedenen Internetseiten.Technologiebasiertes Problemlösen (Problem Solving in Technology Rich Environments) - Website von PIAAC. Abgerufen am 1. Oktober 2013.
Zusätzlich werden in einem umfassenden Hintergrundfragebogen Informationen zu den befragten Personen aus den folgenden Bereichen erfragt:B. Rammstedt, D. Ackermann, S. Helmschrott, A. Klaukien, D. B. Maehler, S. Martin, N. Massing, A. Zabal: Grundlegende Kompetenzen Erwachsener im internationalen Vergleich. Ergebnisse von PIAAC 2012. Waxmann, Münster 2013, ISBN 978-3-8309-2999-4. soziodemografische Merkmale (z. B. Alter, Geschlecht) Aus- und Weiterbildung (z. B. höchster Bildungsabschluss, Fachrichtung und Weiterbildungsbeteiligung) Erwerbsstatus, Erwerbsbiografie und Arbeitsplatzmerkmale (z. B. Beruf der derzeitigen oder letzten Erwerbstätigkeit, Erwerbseinkommen) Gesellschaftliches Engagement, Einstellungen und Gesundheit (z. B. ehrenamtliche Tätigkeiten, Selbsteinschätzung der eigenen Gesundheit) allgemein und beruflich ausgeübte Tätigkeiten (z. B. Häufigkeit von unterschiedlichen Lese- und Schreibaktivitäten)
Methodik Projektstruktur Internationale Projektstruktur PIAAC wird im Auftrag der OECD durchgeführt, das die internationale Projektdurchführung Anfang 2008 einem Konsortium unter Leitung von Educational Testing Service (ETS) übertragen hat. Zentrales Entscheidungsorgan für PIAAC ist das Board of Participating Countries (BPC), in welchem die Geldgeber der beteiligten Länder vertreten sind.
Teilnehmende Länder waren in Runde I: Australien, Dänemark, Deutschland, England/Nordirland (GB), Estland, Finnland, Flandern (Belgien), Frankreich, Irland, Italien, Japan, Kanada, Niederlande, Norwegen, Österreich, Polen, Russische Föderation, Schweden, Slowakische Republik, Spanien, Südkorea, Tschechische Republik, Vereinigte Staaten, Zypern; in Runde II: Chile, Griechenland, Indonesien, Israel, Litauen, Neuseeland, Singapur, Slowenien, TürkeiTeilnehmende Länder – Website von PIAAC. Abgerufen am 1. Oktober 2013.
Die internationale Studie wurde von Andreas Schleicher geleitet. Der deutsche Teil der Studie wurde vom sozialwissenschaftlichen Forschungsinstitut Gesis in Mannheim unter Leitung der Psychologin Beatrice Rammstedt durchgeführt. Weltweit wurden 166.000 Menschen repräsentativ getestet, in Deutschland 5.465.
Projektstruktur in Deutschland In Deutschland wurde PIAAC unter der Leitung von Beatrice Rammstedt von GESIS – Leibniz-Institut für Sozialwissenschaften durchgeführt. Finanziert wurde die deutsche Durchführung vom Bundesministerium für Bildung und Forschung unter Beteiligung des Bundesministeriums für Arbeit und Soziales. Von GESIS wurden im Rahmen der nationalen PIAAC-Umsetzung weitere Institutionen mit Aufgaben betraut: Leibniz-Institut für Bildungsforschung und Bildungsinformation: nationale IT-Koordination TNS Infratest: Datenerhebung IEA Data Processingand Research Center (IEA DPC): Auswertung der papierbasierten Aufgabenhefte und Kodierung der offenen Berufsangaben in das internationale Klassifikationsschema für Berufe (International Standard Classification of Occupations, ISCO).
In Deutschland wird PIAAC durch vernetzte Studien ergänzt, die Zusatzstichproben erheben. Zum gegenwärtigen Zeitpunkt gibt es zwei Ergänzungsstudien: CiLL – Competencies in Later Life: Durchführung der PIAAC-Studie mit Älteren (66- bis 80-Jährigen)Projekthomepage von CiLL DIE – Deutsches Institut für Erwachsenenbildung. Abgerufen am 1. Oktober 2013. PIAAC-Erweiterung zu „gering Qualifizierten“: Studie zum Zusammenhang von Kompetenzen und Arbeitsmarktchancen von gering Qualifizierten in Deutschland – Website von PIAAC. Abgerufen am 1. Oktober 2013.
Darüber hinaus wird im Rahmen einer Kooperation zwischen GESIS, dem Sozio-oekonomischen Panel (SOEP) und dem Leibniz-Institut für Bildungsverläufe (LIfBi) die Langzeitstudie PIAAC-L durchgeführt, bei der die PIAAC-Stichprobe weiterbegleitet wird, um die Entwicklung der Kompetenzen von Erwachsenen und deren Bedeutung im Zeitverlauf untersuchen zu können.
Testzyklus und Stichprobe PIAAC 2012 stellt den Startpunkt dar, wobei in einem 10-Jahres-Turnus Wiederholungen geplant sind. Die erste Erhebung von PIAAC wurde in fast allen teilnehmenden Ländern zwischen Sommer 2011 und Frühjahr 2012 durchgeführt.
Die Grundgesamtheit in PIAAC besteht aus in Privathaushalten lebenden Personen eines Landes im Alter von 16 bis 65 Jahren, unabhängig von deren Nationalität und Aufenthaltsstatus. In jedem Teilnehmerland beruht die Stichprobe auf einer repräsentativen Zufallsauswahl aus dieser Grundgesamtheit. Pro Teilnehmerland wurden dafür mindestens 5.000 zufällig ausgewählte Erwachsene im Alter von 16 bis 65 Jahren befragt und getestet.
Datenauswertung → Siehe auch: Methodik der PISA-Studien
Wie bei PISA ist die Datenauswertung rein quantitativ-reduktionistisch: Teilnehmerleistungen werden als richtig oder falsch codiert und in „Kompetenzpunkte“ umgerechnet, wobei Leistungen von Teilnehmern, die unterschiedliche Aufgabensätze zu bearbeiten hatten, mithilfe des Rasch-Modells aufeinander skaliert werden; diese Skalierung sorgt zugleich dafür, dass die Kompetenzpunkte für die OECD-Gesamtheit annähernd nach Gauß verteilt sind. Aus der so ermittelten Punktwertung werden dann Ländermittelwerte gebildet und als Ranglisten veröffentlicht.
Zur Interpretation der Punktwerte wird die kontinuierliche Gauß-Verteilung willkürlich in Kompetenzklassen unterteilt. Anhand von Aufgaben, die typischerweise ab einem bestimmten Punktergebnis bewältigt werden, wird dann eine qualitative Beschreibung der Anforderungen erarbeitet. Besonders herausgestellt und von den Medien besonders beachtet wird der Bevölkerungsanteil auf der niedrigsten Kompetenzstufe („kann lesen wie ein Zehnjähriger“).
Sprach- und kulturblinder Test → Siehe auch: Kritik an den PISA-Studien
Eine zentrale Annahme bei PIAAC ist, dass es möglich und gelungen ist, einen Test zu konstruieren, der unabhängig von Sprache und Kultur in verschiedenen Staaten dasselbe Konstrukt, z. B. Lesekompetenz, misst. Dieser Ansatz lag schon den PISA-Studien zugrunde und ist dort heftig kritisiert worden: Unter anderem wurde herausgearbeitet, dass es zu Übersetzungsfehlern gekommen ist, dass Texte beim Übersetzen tendenziell länger werden und dass deutsche Texte ohnehin schon länger sind als englische, und dass die überwiegende Herkunft der Testaufgaben aus dem angelsächsischen Kulturkreis eine erhebliche Verzerrung verursachen könnte. Für all diese Faktoren gibt es im Auswerteverfahren von PIAAC jedenfalls keinen Ausgleichsmechanismus. Neben der Fähigkeit zu sinnerschließendem Lesen dürfte PIAAC auch eine durch das Schulsystem geprägte TestfähigkeitWolfram Meyerhöfer: PISA - Ein Test im Test. Vortrag auf der GDM-Jahrestagung Klagenfurt, März 2000. In: kentron. Journal zur Lehrerbildung. extra 2004, S. 4–7. messen.
Ergebnisse Erste Ergebnisse wurden am 8. Oktober 2013 veröffentlicht. Die Presse berichtete, wie schon bei PISA, vor allem über das Länderranking (Finnland und Japan vorne, Deutschland im Mittelfeld) und griff ansonsten auf, was in den nationalen Ergebnispräsentationen herausgestellt wurde (in Deutschland: starke Abhängigkeit der Kompetenzen vom Elternhaus). Die Ergebnisse zeigen, dass die Grundkompetenzen der in Deutschland lebenden Erwachsenen in allen drei Domänen im Mittel relativ durchschnittlich sind. So weist Deutschland eine leicht unterdurchschnittliche Lesekompetenz, eine leicht überdurchschnittliche alltagsmathematische Kompetenz und eine durchschnittliche technologiebasierte Problemlösekompetenz auf.B. Rammstedt, D. Ackermann, S. Helmschrott, A. Klaukien, D. B. Maehler, S. Martin, N. Massing, A. Zabal: Grundlegende Kompetenzen Erwachsener im internationalen Vergleich. Ergebnisse von PIAAC 2012. Waxmann, Münster 2013, ISBN 978-3-8309-2999-4.
Ergebnisse Lesekompetenz