Är det verkligen förståelse vi mäter?
Av Torsten Madsén


Pedagogiska magasinet - arkiv
Recension: Vagt om lärande (4/01)
Gästtyckare/ Lotta Gröning: Handskas varligt med demokratin! (4/01)
Ledare: Skolan måste stå för civilkurage! (4/01)
Recension: Med hjärtat hos de utsatta (4/01)
Larsson&Lagerlöf: Extremhögern - land för land (4/01)
Mathiasson: ”Den tunna hinnan mellan omsorg och grymhet” (4/01)
Mathiasson: Turbulensen i Durban (4/01)
Recension: Lärarprofessionalitet och status (4/01)
Granath: ”Svikna människor behöver någon att skylla på” (4/01)
Recension: Dansinspiration för barn (4/01)
Johansson: Makt och hierarki i sandlådan (4/01)
Otterbeck: Stereotyper styr vår syn på islam (4/01)
Recension: Inspirerande om förskolan (4/01)
Ljunghill: Intervju med Göran Persson: Rasistiska övergrepp är det fegaste som finns! (4/01)
Recension: Ojämnt om utvecklingsarbete (4/01)
Debatt: Gymnasieskolans nya tudelade ansikte (4/01)
Recension: Vänbok med bredd (4/01)
Debatt: Ovetenskaplig lek med siffror (4/01)
Debatt: Carl Tham slåss mot väderkvarnar (4/01)
Tham: Striden om bokstavsbarnen (4/01)
Recension: Samverkan och yrkesidentitet (4/01)
Thors Hugosson: Fördomarna kan dyka upp lite överallt (4/01)
Larsson&Lagerlöf: Extremhögern i Europa (4/01)
Mathiasson: Den livsfarliga lydnaden (4/01)
Debatt: Stora metodiska brister och dåligt underbyggda slutsatser (4/01)
Recension: Ett förändrat ledarskap (4/01)
Pedagogiska magasinet 4/2001
Recension: Språk och identitet (4/01)
Göranzon: Dramatiken en snäcka för örat (3/01)
Sohlman: Fantasi&kreativitet - med kultur som inspiration (3/01)
Colnerud: ETIK och IT (3/01)
Ledare: Varning för en trist treämnesskola (3/01)
Debatt: Alla vinner på en gemensam skola (3/01)
Nobel: Från ORD till HANDling (3/01)
Recension: Perspektiv på perspektiv (3/01)
Recension: Läromedlens betydelse (3/01)
Debatt: Vi står för våra slutsatser! (3/01)
Fredriksson: Sverige satsar på skolan men lärarna har låga löner (3/01)
Pedagogiska magasinet 3/2001
Mathiasson: Sinnligheten som kunskapsform (3/01)
Thors Hugosson: Det man har gjort har man lärt (3/01)
Nordheden: Med lusten som ledstjärna (3/01)
Recension: Lärarens utnyttjande av forskning (3/01)
Eftertanken: Skärp dig, sa Elin (3/01)
Recension: Läroplansteori och didaktik (3/01)
Recension: En vidgad intelligens (3/01)
Recension: Originellt om dokumentation (3/01)
Thors Hugosson: Nya slöjdlärare greppar hela fältet (3/01)
Recension: Arbetsglädje som projekt (3/01)
Recension: Lärandets grundval (3/01)
Madsén: Den mångsidiga intelligensen (3/01)
Recension: Genus och förskolans innehåll (3/01)
Alexandersson: Från Homeros till cyber space (3/01)
Mathiasson: Hela världen i barngruppen (2/01)
Broady: Gymnasieskolan och eliterna (2/01)
Kotsinas: Från Ekenssnack till Rinkebyska (2/01)
Thors Hugosson: Nämen, det här går ju inte! (2/01)
Tema 2/2001: Andra språk och andraspråk
Viberg: Modersmål, fadersmål och andra språk (2/01)
Nordheden: Litteraturkrönikan: Tre perspektiv på andraspråk (2/01)
Ledare: Alla har rätt till sitt modersmål (2/01)
Mathiasson: Klassikerporträttet: Janusz Korczak (2/01)
Sjöqvist: Mitt möte med Cummins (2/01)
Debatt: Så ljuger man med statistik (2/01)
Recension:Skarp kritik av skolan (2/01)
Pedagogiska magasinet 2/2001
Recension: Engagerat om utsatta barn (2/01)
Eftertanken: Då tiden stod still … (2/01)
Recension: Akademiska rapporter (2/01)
Recension: Snäv syn på undervisning (2/01)
Recension: Ur elevens perspektiv (2/01)
Debatt: Privata lösningar fräter sönder solidariteten (2/01)
Recension: Kan man förutsäga en elevs framtid? (2/01)
Recension: Vem styr egentligen skolan? (2/01)
Debatt: Rapport med tveksamma slutsatser (2/01)
Debatt: Att avskaffa betygen på sikt är en pedagogisk nödvändighet (2/01)
Recension: Mediesamhället och skolan (2/01)
Debatt: Diagnoser i tid och otid... (1/01)
Debatt: Betygen är en helig ko... (1/01)
Pedagogiska magasinet 1/2001
Debatt: Någon borde forska om... (1/01)
Berg: Alla tiders managementbok (1/01)
Lindö: ”Man får medalj när man bygger fult” (1/01))
Debatt: Så slarvigt får man inte... (1/01)
Debatt: Eva Kärfves ”Hjärnspöken” (1/01)
Lundahl: Förändringar på gott och ont (1/01)
Lindblad: Segregationen har ökat (1/01)
Ledare: Skolan borde inte vara till salu (1/01)
Tema 1/2001: Det stora systemskiftet
Peters: Valfrihet på de svagas bekostnad (1/01)
Lindblad: Radikal kursändring av skolan (1/01)
Lindgren&Zackari: Skilda världar – olika villkor (1/01)
Nordheden: Kommer det på betyget? (4/00)
Debatt: Konkurrens på olika villkor (4/00)
Shepard: Utvärdering som en källa... (4/00)
Debatt: Luddig diagnos får oetiska konsekvenser (4/00)
Lindblad: Verklighetens omätbara aspekter (4/00)
Lundahl&Öqvist: Omtolkningens milda konst (4/00)
Hermansson: Produktionsdirektören... (4/00)
Thavenius: Förr var skolan... (4/00)
Madsén: Är det verkligen förståelse... (4/00)
Debatt: Vi handikappar en hel generation (4/00)
Pedagogiska magasinet nr 4/2000
Ledare: Betyg är inte en fråga för politiker! (4/00)
Alexandersson: Vår tolkning av världen... (3/00)
Ellström: Den svåra balansen... (3/00)
Mathiasson: I de små barnens namn (3/00)
Thors Hugosson: Lärandet sker... (3/00)
Ljunghill: Porträtt av Åke Isling (3/00)
Rönnerman: Med dagboken som redskap (3/00)
Madsén: Lärares eget lärande (3/00)
Pedagogiska magasinet nr 3/2000
Liedman: Långsamhetens och eftertankens... (3/00)
Ledare: Den goda viljan... (3/00)
Thelin: Generalens besök... (2/00)
Alexandersson: John Dewey i vår tid (2/00)
Thors Hugosson: Historien om Fredrik (2/00)
Odensten: Anton Tjechovs hembesök... (2/00)
Carlgren&Marton: Läraren har nyckeln... (2/00)
Haug: Bryt etablerade föreställningar (2/00)
Persson: ”Galenskapen finns i var och en” (2/00)
Kärfve: DAMP – en fantasiprodukt (2/00)
Mathiasson: Bökiga barn och bråkiga ungar (2/00)
Pedagogiska Magasinet nr 2/2000
Ledare: Alltmedan klyftorna bara växer (2/00)
Emanuelsson: Hotet mot en skola... (2/00)
Ullman: Rektorshistorier ur bakfickan (4/99)
Sandberg&Targama: Att leda är att... (4/99)
Thors Hugosson: Är det detta jag ska göra? (4/99)
Calander: Myten om det jämlika mötet (4/99)
Eriksson: Perspektiv på ledarskap (4/99)
Ledare: Om vi verkligen satte... (4/99)
Mathiasson: Omöjligt uppdrag? (4/99)
Debatt: Hallå, Mats Ekholm... (4/99)
Goodson: Professionalism i reformtider (4/99)
Steinberg: "Do you like the food today?" (4/99)
Ledare: Debatt i återvändsgränd (2/99)
Aili : Lärarna själva sänker sin status (2/99)
Thors Hugosson: Drömmen om skolan... (2/99)
Debatt: Florin, Frykman och ritualerna (2/99)
Nilsson: En skoldag i Peter Perssons liv (2/99)
Colnerud&Granström: De oundvikliga... (2/99)
Debatt: Betygen fördärvar skolan (2/99)


Resultaten från nationella utvärderingar och internationella jämförelser väcker ofta stor uppmärksamhet och används som slagträn i utbildningspolitiken. Men hur säkra är sådana mätningar, vars resultat i regel tas för givna?
En avhandling från Linköping visar att man får helt
andra bilder enbart genom att ändra provbetingelserna. Om detta gäller prov som utarbetats av högt meriterade
forskargrupper – hur står det då till med de dagliga proven i skolan, som avgör betygen?


Det är sällan doktorsavhandlingars resultat ger genomslag i utbildningspolitiken. Jan Schoultz, lärarutbildare vid Linköpings universitet, lade i februari i år fram avhandlingen Att samtala i/om naturvetenskap som borde ge kraftigt eko i debatten. I den visar han att relativt små förändringar av betingelserna vid prov leder till helt andra resultat på frågor, som tidigare används i internationella jämförelser (TIMSS) respektive nationella utvärderingen (NUNA) av elevers kunskaper i naturvetenskap. I Jan Schoultz test framstår eleverna som mycket mera kompetenta! Låga resultat på traditionella test används ofta som argument för högre krav och mer betyg i skolan. Ofta tas de också till intäkt för att vi bör återgå till mer ”traditionell” undervisning.
 
I sin studie har Jan Schoultz valt ut ett litet antal uppgifter, som alla tidigare är noga utprövade och utforskade. Betingelserna har sedan ändrats, dels genom att papper-och-penna test har gjorts om till intervjuer, dels genom att intervjuer har förändrats så att eleverna haft tankeredskap (artefakter) framför sig. I en intervju med elever i årskurs 1, 2 och 5 fick eleverna ha en jordglob framför sig under samtalet, som handlade om jordens form och dragningskraft. Flera tidigare forskningsstudier har konstaterat att så små barn inte förstår gravitationen utan till exempel tror det är omöjligt att bo i Australien utan att ”ramla av”. I samtalen tyckte barnen däremot att det är självklart att det inte finns ”upp” och ”ner” på ett klot.
När han lägger fram en skriftlig uppgift från NUNA 1993, om hur mycket man kan trycka ihop en sluten kolv, och för ett samtal med eleverna händer samma sak: Mångdubbelt fler elever kan resonera korrekt om resultatet. Vad värre är – de klarar uppgiften utan att använda sig av de naturvetenskapliga begrepp som uppgiften skulle testa! En viktig slutsats är att man bör vara mycket försiktig med att dra praktiska slutsatser från traditionella test.

Avhandlingen utmanar en hel forskningstradition – kognitivismen – som länge dominerat både Sverige och världen. I denna försöker man kartlägga det ”rena tänkandet”, genom att studera det i tillrättalagda situationer, till exempel skriftliga test utan hjälpmedel. Grunden för denna tradition är Piagets på sin tid epokgörande studier av barns tänkande.
Roger Säljö, som varit handledare, ifrågasatte redan i en artikel 1995 den nationella utvärderingen i NO, som han menade aldrig kom åt elevernas verkliga förståelse. Det är först när man befinner sig i en situation, i vilken man känner behov av att kommunicera om ett upplevt problem, som det visar sig hur mycket man egentligen förstår. Jan Schoultz har genom sitt arbete konkret demonstrerat riktigheten i detta. Det visar sig vara all världens skillnad mellan begrepp ”on display” och ”in action”!
Roger Säljö är den främste företrädaren i Sverige för den sociokulturella forskningsansatsen, som vuxit kraftigt i världen de två senaste decennierna. Denna menar att tänkande alltid är ”situerat”, det vill säga beroende av den situation man befinner sig i. Det blir då missledande att studera tänkandet i artificiella provsituationer, exempelvis genom skriftliga test. Att elever uppvisade svårigheter i den nationella utvärderingen 1993 (NUNA) kan i hög grad förklaras med den speciella kommunikativa situationen. Eleverna förstod ofta inte vilken typ av svar som förväntades av dem. Sådana svårigheter är vanliga i kommunikationssituationer, men i ett samtal kan man steg för steg pröva sin problemtolkning. Säljö betonar i sin artikel att i NUNA hade de som konstruerat provet tolkningsföreträde, trots att det förmodligen var deras formuleringar som vållade elevernas svårigheter, inte problemen i sig. Alltså kunde de dra slutsatsen att den svagare parten – eleverna – saknade den önskvärda förståelsen!

De resultat som Jan Schoultz får ligger helt i linje med en i dag omfattande internationell forskning. Den har till exempel visat att elever med goda betyg på sin skolmatematik får stora svårigheter när de ska göra beräkningar i en praktisk situation. Å andra sidan visar det sig att människor med låg eller ingen matematisk skolning klarar avancerade kalkyler i sitt arbete! De uppfinner helt enkelt fungerande beräkningsmetoder, utifrån situationens krav. Skriftliga svar på skriftliga frågor är en kravsituation vi främst möter i skolan. Den mäter där sällan verklig förståelse och kompetens. Sociokulturellt inspirerad forskning har bidragit till både en uppvärdering av praktisk kunskap och ett ifrågasättande av värdet av formaliserad utbildning i traditionella former. Tyvärr har resultaten ännu inte slagit igenom i den skolpolitiska debatten.

Jag träffar Jan Schoultz i arbetsrummet på Campus Norrköping, den del av Linköpings universitet som ligger i det gamla industriområdet mitt i staden. Jag vill veta hur han själv ser på de praktiska slutsatserna från avhandlingen. Inledningsvis är jag dock nyfiken på hur han, som under lång tid varit NO-lärare, hittat fram till det sociokulturella perspektivet, som i mycket relativiserar kunskapen. Naturvetenskapen brukar ju karakteriseras av ”fakta och rätta svar”?
– Det var när jag arbetade med läromedelsproduktion, som jag kom i kontakt med forskare med språkvetenskaplig bakgrund, berättar han. Sedan dess har jag intresserat mig för språkets betydelse i NO-undervisningen. När jag blev erbjuden att medverka i Roger Säljös projekt, visste jag dock inte mycket om det sociokulturella perspektivet.
– Det visade sig vara svårt att byta perspektiv, när man är fostrad i den piagetanska traditionen. Jag har märkt att naturvetarkollegor har svårt att se poängen med mina resultat. Det kan bland annat bero på forskningstraditionen inom naturvetenskap. Där är exakta mätningar i fokus och resultaten tolkas ofta som ”den sanna bilden” av verkligheten. Det sociokulturella perspektivet tillför en dimension som skapar osäkerhet kring resultat och metoder.

Hur påverkar det nya tänkandet Jan Schoultz arbete som lärarutbildare? Både han och kollegorna på Campus Norrköping arbetar med att mjuka upp studenternas syn på naturvetenskap. En mindre respektfull hållning överförs förhoppningsvis sedan till eleverna. Han menar att det sociokulturella perspektivet bäddar för en undervisning, som kan göra fler elever intresserade av naturvetenskap. De inser att det finns flera olika sätt att tänka, och genom att de får mera stöd genom samtal tar de sig fram bättre i undervisningen. Detta måste rimligtvis stärka deras självförtroende.
När jag ber honom om fler slutsatser för en förändrad NO-undervisning lyfter han först fram det som även kognitivistiskt orienterade forskare sagt länge: Begränsa antalet begrepp som behandlas i undervisningen! Men han betonar också att man måste skapa mycket mera utrymme för samtal, både mellan eleverna och mellan dem och läraren. Eftersom läraren inte hinner ha dialog med många elever på en gång blir gruppverksamhet centralt. Men det måste då handla om mycket genomtänkta aktiviteter – många lärare blev brända på ostrukturerade grupparbeten under 1970-talet.
En viktig poäng är att det sociokulturella perspektivet öppnar för en ny syn på elevernas utvecklingsmöjligheter. Om läraren får syn på elevernas tänkande, kan han också hjälpa dem vidare i det som Vygotskij kallar ”den närmaste utvecklingszonen”. I sina intervjuer såg Jan Schoultz tydligt att eleverna redan hade många begreppsfragment, som lätt kunde vidareutvecklas genom en dialog. Eleverna kan också skriva med egna ord kring undervisningsinnehållet, när läraren inte hinner prata med alla elever.
– Ytterst handlar detta om vad lärarna orkar och hinner med, betonar Jan.

Vad ser han då för utvecklingsmöjligheter när det gäller just utformningen av prov? Han skriver i avhandlingen att det inte finns någon neutral miljö, där man kan dokumentera tänkande. Jan Schoultz har förstås inga färdiga svar på vad han skulle göra, om han var ansvarig för den nationella utvärderingen i NO. Men de förändringar han gjorde i sina studier närmade uppgifterna till en autentisk situation, och i den riktningen menar han att man borde kunna gå mycket längre. Det skulle bidra till att proven i ökad utsträckning mäter det vi vill komma åt – det ökar den så kallade validiteten. Om proven har som syfte att ge underlag för förbättringar är det bättre om de bygger på samtal, även om man då kan ta med färre elever. Man borde även låta eleverna använda redskap. Uppgifterna måste också utformas så att de hjälper eleverna att komma in i rätt diskussion – den naturvetenskapliga diskursen – eftersom många elever annars faller platt för vissa ord i frågorna.

Gäller samma slutsatser för proven som lärare ger i skolan?
– Ja, svarar Jan Schoultz, det är precis samma sak här. Proven i skolan styr kraftigt elevernas lärande. Kan vi inte ändra dem blir det ingen utveckling. Men lärarna har en fördel framför konstruktörerna av nationella prov: De kan lättare bygga sina bedömningar på andra intryck än skriftliga svar.
Jan Schoultz tycker att lärarna ska tona ner de skriftliga proven och i stället lyssna mera på hur eleverna resonerar. Med det sociokulturella perspektivet har läraren en avgörande roll. Den som förstår mer behövs för att hjälpa eleverna vidare. De kan inte upptäcka den naturvetenskapliga världsbilden på egen hand, hur mycket de än laborerar. Avgörande är att läraren får fram elevernas tänkande – då blir undervisning och utvärdering två sidor av samma mynt. I pedagogiken som bygger på Vygotskijs tänkande har alla elever utvecklingsmöjligheter.
– Tänker man som Piaget blir det mera statiskt och stämplande – man konstaterar bara var eleverna befinner sig i sin utveckling, avslutar Jan.

På tåget hem från Norrköping funderar jag på hur viktigt det är att lärare (och skolpolitiker!) förstår att all forskning leder till speciella perspektiv och resultat, beroende på vilka grundantaganden man utgår ifrån. Behavioristisk och kognitivistisk forskning har bidragit till att lärare fått en alltför statisk bild av elevers möjligheter. Den växande sociokulturella forskningen väcker nya tankar och därmed också nya handlingsmöjligheter. I USA har den till exempel lett till ett stigande intresse bland både forskare och lärare för vad man kallar för ”authentic assessment”; prov som så långt det är möjligt efterliknar verkliga problemlösningssituationer. Det sociokulturella perspektivet ger, som jag uppfattar det, mycket bättre praktiska förutsättningar för att skapa en skola för alla.
Innan jag slumrar till, trött efter tre timmars intensiv diskussion med Jan Schoultz, hinner jag tänka en hädisk tanke: Varför måste vi göra naturvetenskapen i skolan så svår? Handlar det kanske också om att denna aura av svårtillgänglighet bidrar till att bevara etablerade makt- och statuspositioner i samhället? Måste vi inte bestämma oss för om det främst är en fråga om allmänbildning eller en förberedelse för universitetsstudier för en liten elit? Tänk om alla elever egentligen kan lära sig förstå naturvetenskap, om de bara möter en bra undervisning!                                                        

Torsten Madsén
(2000-11-15)