fredag 27. november 2015

Urban myte blant byplanleggere


For ei tid sia sto det en lang artikkel av professor Erling Røed Larsen i «Aftenposten». Under tittelen «Nærere, høyere, tettere» propaganderte han iherdig for en myte som er blitt gjentatt så lenge at den er blitt en Sannhet blant byplanleggere og urbanister. I hans versjon lyder den: «Miljøet tjener på at mange bor nær hverandre. ... Alle som sier noe annet, har lagt vekk transportkalkulatoren.»

Men alle som snakker slik Røed Larsen gjør har kastet stål-, glass- og betongkalkulatoren, hvis de noen gang har hatt en slik en. Skal folk bo stadig tettere, må det bygges stadig nye og stadig høgere bygninger. Byggematerialene er gjerne glass, stål og betong – kikk på Oslos nybygde strekkodemur hvis du tviler. Sementproduksjon medfører ca 1 kg CO2-utslipp pr. kg; glass ca 1.1, og stål ca 1.5. (Tallene kan variere, avhengig av råstoff og energikilde. Dette er gjennomsnittstall.) I tillegg kommer anleggsmaskiner og transport i forbindelse med byggevirksomhet – heller ingen liten utslippskilde.

Hva som medfører størst utslipp – sentralisering eller desentralisering – er et komplekst regnestykke, der fasit helt sikkert varierer fra tilfelle til tilfelle. Dessverre har omtrent alle landets fagmiljøer innen stedsutvikling tatt til seg en enkel og lettfattelig myte som fritar dem for å sette opp et regnestykke i det hele tatt: Omtrent alle arealplaner som utarbeides i norske kommuner inneholder standardformuleringer om fortetting som et viktig klimatiltak. Dette er en oppfatning som det er svært krevende å utfordre i et kommunestyre, sia den kommer fra «faglig» hold og følgelig er uangripelig. Dermed styres arealpolitikken i store deler av landet av en myte.

Det burde jo være et tankekors at mens fortetting, sentralisering og urbanisering har valset over landet fra Kirkenes til Lista, så har landets utslipp av klimagasser fortsatt å øke. Det er nok på tide å finne en kalkulator som summerer alle utslipp, ikke bare sånne som følger av arbeidsreiser med egen bil.

fredag 28. august 2015

Thomas Nordahl rides again!

Professor Thomas Nordahl har i årevis reist rundt og presentert «Kvalitet i skolen» for kommunestyrer som ønsker faglige råd om hvordan de kan få mest og best mulig læring ut av pengene de bevilger til grunnskolen. Nordahl kan utvilsomt svært mye om dette temaet. Han opptrer både sjarmernde og engasjerende, så politikerne synes nok at de har stort utbytte av hans besøk.

Han har en grunntanke som er svært kontroversiell blant forskere, nemlig at klassestørrelse har lite eller ingenting å si for læringsutbyttet. At ideen er kontroversiell skulle en ikke tru når en hører ham; tvert imot harselerer han med forestillingen om at klassestørrelse kan være viktig. Men fordi det er kjent at dette er ett av hans hovedpoenger, blir han stadig invitert til kommuner der administrasjonen og ordføreren sysler med planer om nedskjæring. Og når han reiser igjen, sitter politikerne med en god og varm følelse av at de har fått et faglig alibi for å gjennomføre disse planene. De har kanskje hatt litt dårlig samvittighet fordi de har pønsket på å ta ressurser bort fra skolen, men nå er den dårlige samvittigheten erstattet av vissheten om at egentlig er større klasser bra for skolen, bare lærerne får litt videreutdanning. Et månedskurs er jo atskillig billigere enn en hel lærer.

I seinere år har Nordahl supplert presentasjonen sin med argumenter fra John Hatties «Visible Learning». Den som tar seg bryet med å lese Hattie, ser fort at Nordahl er på tynn is, for Hattie skriver ikke det som Nordahl tillegger ham. Men dessuten avdekker en grundigere lesning at mange av Hatties konklusjoner bygger på kreative statistiske metoder. Mer presist: Hans bruk av statistikk er bare rør. Men den jevne lokalpolitiker oppfatter nok ikke at både Nordahl og Hattie framstår som tvilsomme sannhetsvitner når det gjelder klassestørrelse.

Nå har Nordahl, på oppdrag fra NRK, sammenliknet læringsutbyttet i grunnskolen i Trondheim og Bergen. Det har han gjort ved å sammenlikne grunnskolepoeng i 10. klasse gjennom 5 år. Han finner at Bergen kommer bedre ut enn Trondheim, til tross for at Trondhem har større lærertetthet enn Bergen. Forskjellen er svært klar; Bergen kommer klart best ut hvert eneste år, med en differans som varierer fra 0,6 til 1,5 grunnskolepoeng. Forskjellen er statistisk signifikant. Dermed får han sin yndlingstese bekreftet enda en gang. Når intervjueren spør: «Kan det tenkes at lærerne i Bergen gir bedre standpunktkarakterer enn lærerne i Trondheim?» svarer han: «Det er det jo ingen grunn til å tro!»

Men han trenger ikke «tro» noe som helst, for dette er det svært lett å finne ut! Alle sånne tall er lett tilgjengelig på Skoleporten.

Grunnskolepoeng består av to elementer: Eksamensresultater og standpunktkarakterer. Jeg har sett på eksamensresultatene gjennom 5 år i 9 forskjellige fag. I alle fag kommer de to byene forbløffende likt ut; ett år er Bergen litt bedre, og neste år er Trondheim ørlitt bedre. Dette gjelder i alle fag jeg har sett på. De små variasjonene den ene eller den andre vegen framstår som tilfeldige statistiske utslag.

I gjennomsnitt kommer Trondheim ørlitt bedre ut enn Bergen i engelsk muntlig, matte skriftlig, matte muntlig, norsk hovedfag – skriftlig, samt norsk sidemål. Til gjengjeld komme Bergen litt bedre ut i engelsk skriftlig, naturfag, norsk muntlig og samfunnsfag.

Når eksamensresultatene er så godt som like, og Bergen likevel kommer klart best ut i grunnskolepoeng, kan det bare skyldes en eneste ting: Nemlig at lærerne i Bergen gir vesentlig bedre standpunktkarakterer enn lærerne i Trondheim, i forhold til hvor godt elevene gjør det på eksamen.

Det er antakelig en god ide å praktisere målstyring i skolen, slik Høyre gjør i mange kommuner, der rektorene måles på resultatene i skolen. Men da må man måle elevenes resultater, ikke resultatet av lærernes karakterpraksis! Når rektor måles på grunnskolepoeng, veit hele skolen at de standpunktkarakterne som deles ut kan avgjøre hvilken vurdering både rektor og skolen får ved skoleårets slutt. Da oppfordres rektorene i realiteten til å selge strikk i metervis.

Helt galt blir det hvis lønn er direkte knyttet til hvor gode standpunktkarakterer skolen deler ut! Det blir nesten som å overlate lønnsfastsettelsen til den enkelte skoles egenvurdering.

Ja da, ja da: Jeg veit at rektorer, lektorer og alle andre skoleansatte har sin faglige integritet, og den er selvfølgelig lytefri. Derfor ville de jo ikke finne på ... og så videre.

Men rektorer er mennesker. Og som du veit, gode leser, finns det bare to helt feilfrie mennesker her i verden, og det er du og jeg. Alle andre har sine små feil og mangler. Menneskelige svakheter, som iblant får dem til å forveksle fellesgodene med egeninteressene. Det gjelder lektorer og lærere også, så utrulig det enn kan høres.

Thomas Nordahl har ikke vist at læringsutbytte er uavhengig av lærertetthet, for forskjellen i lærertetthet mellom Bergen og Trondheim er faktisk ganske liten. En ordentlig undersøkelse ville ha krevd at han gikk ned på den enkelte skole – gjerne det enkelte årstrinn også – , og fant ut hvordan læringsutbyttet varierte med lærertetthet, lærerkompetanse, foreldrenes sosioøkonomiske status i den enkelte skolekrets --- og så videre. Dette er ingen enkel sak; det er derfor de bruker statistikere til sånne undersøkelser, ikke bare pedagoger.

Og han har ikke vist at Bergenselevene har bedre læringsutbytte enn Trondheimselevene heller. Han har bare vist at de får mye bedre standpunktkarakterer. Vi kan jo spekulere på hvorfor det er slik. Men hvis du har en viss erfaring med målstyring i andre bransjer, så gjetter du fort på at grunnen henger sammen med måten skolene målstyres på. Høyre-politikere burde kanskje gjøre seg bedre kjent med hvordan sånt funker i næringslivet.

I sine eksterne oppdrag opptrer Nordahl stadig mer som en skoleideolog.



søndag 23. august 2015

Kommunesammenslåing og byråkrati


Du har sikkert hørt at hvis flere kommuner slås sammen, kan de spare noen sjefer og bli mer effektive. Den nye kommunen får bedre råd, og innbyggerne får bedre tjenester. Ikke sant?

Tenk om igjen! Følg meg gjennom et eksempel:

Tenk deg 8 like store kommuner. Hver kommune har en eiendomsavdeling på 9 personer, hvorav 1 leder. Hver av de 8 utførende tjener 400.0001. Lederen tjener 500.000. Da har hver vedlikeholdsavdeling lønnskostnader på 3,7 millioner. (8 ganger 400.000, pluss en ganger 500.000.) 8 kommuner har altså lønnskostnader til eiendomsavdelingene sine på tilsammen 29,6 millioner. (8 ganger 3,7 millioner.)

Så skal kommunene bli «robuste»2 og ta ut «synergier»! De blir slått sammen, og 8 eiendomsavdelinger blir 1 stor avdeling. Får vi færre ledere? Nei: Hver tidligere eiendomssjef blir områdesjef i sitt geografiske område. De sammenslåtte eiendomsavdelingene får en felles leder. Han (det er som regel en «han»!) er annenlinjeleder, så han tjener 700.000. - De sammenslåtte eiendomsavdelingene har nå lønnskostnader på tilsammen 30.3 millioner. (64 ganger 400.000, pluss 8 ganger 500.000, pluss en ganger 700.000.) Og de utfører akkurat den samme jobben som før ble gjort for 29,6 millioner.

Nei – ikke helt: Den nye organisasjonen må samordnes, ha samme måte å utføre oppgavene på. Det blir nødvendig med faste ledermøter, der de 8 områdesjefene og den nye eiendomssjefen drøfter felles utfordringer. Det tar en halv dag pr. uke for hver leder. Hver områdesjef har da igjen bare 4 1/2 dager pr. uke til å følge opp sine ansatte, fordele oppgaver og snakke med oppdragsgiverne, mot tidligere 5 dager. Vi har mistet i alt 4 arbeidsdager (8 ganger 1/2) i uka til å utføre fag- og personalledelse! Da må vi gjøre en organisasjonsendring. Vi kan enten ansette en koordinator som avlaster de 8 områdesjefene for rutineoppgaver så de får tilbake 1/2 arbeidsdag hver, eller vi kan dele eiendomsavdelingen i 9 områder i stedet for 8, og ansette en ny områdesjef. I begge tilfeller innfører vi et ekstra årsverk. Totale lønnskostnader er nå 30,8 millioner, mot 29,6 millioner før den store reformen.

Nå får vi gjort den samme jobben som før. Riktignok må alle viktige beslutninger og beskjeder gjennom to ledd, opp og ned, før det skjer noe, så slike ting tar dobbelt så lang tid som før. Vi har fått byråkratisering i stedet for effektivisering, og nettokostnaden er 1,2 millioner kroner.

Tuller jeg? Tilbring noen år i en større organisasjon – offentlig eller privat – før du påstår det. Det ligger i alle organisasjoners natur at de prøver å ekspandere: Hver sjef, stor eller liten, ønsker seg større territorium og flere medabeidere, og vil alltid ha gode grunner til det. «I et byråkrati vil arbeidsmengden alltid ekspandere til den fyller alle tilgjengelige ressurser», sier Parkinsons lov, og den står seg like godt i dag som i 19573. Kommuner skiller seg på ingen måte fra andre organiasjoner når det gjelder denne ekspansjonstrangen. I private bedrifter holdes byråkratiseringa til en viss grad i tøyler av risikoen for å gå konkurs. I en offentlig etat er denne risikoen bare teoretisk, så her skjer knoppskytinga mye raskere.

I 2007 ble de 271 kommunene i Danmark slått sammen til 98. De skulle bli mer effektive og billigere i drift, og det skulle bli mindre byråkrati. - Året etter var antall byråkrater økt med 1650, og tilhørende kostnader (justert for lønnsvekst) hadde økt med 920 millioner. En undersøkelse noen år seinere viste at politikere og byråkrater var godt fornøyd med kommunereformen, mens brukerne av de enkelte tjenestene var tildels svært misfornøyd.

Som gruppeleder i Gran Bygdeliste deltok jeg i styringsgruppa til prosjektet «Ny kommune», som utredet mulig sammenslåing av Gran og Lunner kommuner. Der prøvde jeg å fremme sånne resonnementer som disse. Men arbeidsgruppene som utredet forskjellige sider ved sammenslåing var dominert av politikere, byråkrater og saksbehandlere som helt fra starten gikk inn for sammenslåing, og utredet deretter. Motforestilingene ble ikke tatt særlig alvorlig, så konklusjonen var gitt på forhånd: Prosjektet anbefalte kommunesammenslåing så fort som praktisk mulig, og begge kommunestyrene anbefalte velgerne å stemme JA i høstens folkeavstemming.4

Folk som satser på en lederkarriere ønsker selvfølgelig å komme inn i en større organisasjon, der lederjobbene er flere og mulighetene større. Deres entusiasme er lett å forstå. Men den jevne velger, som må bære kostnaden i form av mer byråkrati og mindre tjenester, er nok litt mer innstilt på å høre på motforestillinger.

Det finnes sikkert kommuner som er for små til at de klarer å levere fullverdige tjenester. Gran og Lunner, med henholdsvis 14.000 og 7.000 innbyggere, er ikke to av disse kommunene. Og blir de først slått sammen, så får vi ingen angrefrist, slik vi har om vi sier NEI denne gangen.

Så det kommer i hvert fall jeg til å gjøre.


1Dette er et eksempel! Derfor tar jeg ikke med sosiale kostnader, kontorutgifter osv. Hvis du vil ha helt realistiske tall, kan du gange alle lønnsutgiftene med 1,5. Det endrer ingenting på konklusjonen.

2«Robust» er det motsatte av «grasil», som betyr smekker; slank. Vil Sanner virkelig ha mindre slanke kommuner?

3C. N. Parkinson: «Parkinson's Law, or The Persuit of Progress», 1957.

4Det arrangeres rådgivende folkeavstemming i begge kommuner. Politikerne ber altså velgerne om et råd. Samtidig fortelle de velgerne hva det rådet bør gå ut på! Jeg er ikke brått sikker på at det er særlig lurt hvis du faktisk ønsker et «Ja».

torsdag 6. august 2015

Kommunen vår er stor nok!


Jeg sitter i kommunestyret i Gran kommune, der jeg representerer Gran Bygdeliste. En viktig sak som skal avgjøres til høsten (etter rådgivende folkeavstemming) er hvorvidt Gran skal slås sammen med Lunner, til den nye storkommunen Hadeland kommune.

Bygdelista har gått inn for rådgivende folkeavstemming om kommunesammenslåing så lenge vi har eksistert. Vi har lovet at uansett hva resultatet blir, så vil vi følge velgernes råd. Derfor har vi to ganger fremmet forslag om slik avstemming. Begge gangene ble vi nedstemt av storkoalisjonen, Arbeiderpartiet og Høyre. Men etterhvert er det blitt politisk opportunt å gå inn for avstemming; derfor vedtok et enstemmig kommunestyre at det skal holdes rådgivende folkeavstemming sammen med kommunevalget.

Men storkoalisjonen fikk bare med seg Venstre og FrP på vedtaket om å anbefale velgerne å stemme JA. Altså: Kommunestyret ber om et råd fra velgerne, og gir samtidig velgerne råd om hva dette rådet bør gå ut på! Bygdelista, SP og SV stemte mot denne finurlige formen for rådspørring.

Bygdelista har ikke tatt stilling for eller mot sammenslåing. Det finnes nok både tilhengere og motstandere blant oss, og en del usikre. Men vi ønsker en grundig debatt om denne saken før avstemminga, og i den debatten kan hver av oss delta på fritt grunnlag.

Mange av oss har likevel en sunn skepsis mot iherdig dytting og påvirkning fra øvrigheta. Jo mer iherdig det dyttes, jo mer skeptiske blir vi, så lenge øvrigheta ikke klarer å gi oss noen god grunn til at vi skal gå dit vi blir dyttet. Denne skepsisen har vi med oss fra tidligere rådgivende folkavstemminger: I ettertid har det jo vist seg at velgerne var mer forutseende enn hele den politiske, byråkratiske og økonomiske eliten. Det kan radt vise seg å være tilfellet nå også.

Som gruppeleder i Bygdelista satt jeg i styringsgruppa til samarbeidsprosjektet «Ny kommune». I dette prosjektet fikk Gran og Lunner kommuner laget utredninger om forskjellige problemstillinger knyttet til mulig kommunesammenslåing: Tjenesteyting, samfunnsutvikling, demografi, økonomi, demokrati. Det kom fram mye interessant statistikk som vil gi nyttig grunnlag for politiske diskusjoner, uavhengig av om kommunene blir slått sammen. Men utredningene har ikke gitt oss klare og utvetydige argumenter for å slå sammen kommunene. I stedet har vi fått mange ulne vurderinger og antakelser; det vil si synsing: «Ved en totalvurdering finner vi at...» Og uten unntak konkluderer vurderingene med at kommunene bør slås sammen.

Vi visste jo at det ville bli konklusjonen. Prosjektet fulgte et vegkart fra Sanners departement, der poenget var å finne argumenter for sammenslåing. Og for å være sikre på at vi fant alle argumentene hadde departementet listet dem opp på forhånd. Med mild, men bestemt hånd ble vi ledet mot den konklusjonen statsråden ville ha av prosjektleder og rådgivere. Jeg fikk gehør for at motforestillinger også skulle utredes, og satte opp ei smørbrødliste over sånne betenkeligheter. Disse ble drøftet i skolestilform. I hvert tilfelle ble utredernes konklusjon at motforestillingene var reelle, men at de ble mer enn oppveid av fordelene.

Den som holder pennen har makta. Utrederne var folk fra de to kommunenes administrasjoner, og utredningene ble ført i pennen av positivt innstilte rådgivere. Den utvidete arbeidsgruppa var forsterket med to ordførere som åpenbart hadde bestemt seg på forhånd, men lot som om de ikke hadde det. Der satt det også to varaordførere som – trur jeg – var genuint usikre på hva de skulle ende opp med. Og som representanter for «opposisjonen» satt det to politikere som i lang tid har argumentert høgt og tydelig for kommunesammenslåing.

Men de avgjørende argumentene kom aldri. Det ble gjentatt i hver utredning at en sammenslått kommune ville bli mer «robust». Den ville også bli mer demokratisk, fordi det ville bli færre og flinkere politikere, og fordi de to kommunene ville slippe å samarbeide om barnevern og kulturskole. Og administrasjonen ville bli mer effektiv.

En større kommune ville også tiltrekke seg flere kompetente medarbeidere. Dette argumentet er sikkert reelt: En større organisasjon gir flere muligheter for en administrativ karriere, fordi den har flere lederstillinger og et høgere hierarki. Å ha vært kommunalsjef i Nittedal lyser nok klarere på CVen enn å ha vært kommunalsjef i Etnedal. Posten som ordfører eller varaordfører i en storkommune gir også et mye bedre springbrett for ambisiøse lokalpolitikere. Men for folk på golvet – læreren, sjukepleieren, hjelpepeieren – spiller mulighetene til lederkarrierer ingen rolle, for de har ikke tenkt seg den vegen. Tvert imot frykter mange at jo høgere pyramiden blir, jo vanskeligere blir det å bli hørt helt på toppen, der de viktige beslutningene blir tatt.

Følgende motforestillinger ble drøftet fordi jeg ba om det, men bare overflatisk: Større avstand mellom politikere og velgere. Større avstand til rådhuset for mange ansatte. Større avstand til rådhuset for mange innbyggere. Vanskeligere å finne fram til «rette vedkommende» i en større organisasjon. Mindre nærket mellom saksbehandlere og innbyggere. Dårligere lokalkunnskap hos mange beslutningsfattere. Og noen til.

Når det ikke viste seg mulig å få fram bedre og mer (jeg kan ikke dy meg!) robuste argumenter for sammenslåing enn dem vi har hørt i lang tid på forhånd, så sier jeg nei. Da trur jeg at stordriftsulempene overgår eventuelle fordeler. Det er en kjensgjerning at når en organisasjon blir større, så vokser byråkratiet mer enn antall ansatte. Tegn en organisasjonspyramide, så skjønner du hvorfor det er slik! Men pengesekken blir ikke større fordi om det blir flere ledere. Dermed må det skjæres ned på golvplanet, der tjenestene skal utføres. Derfor bør en organisasjon være stor nok til å dekke alle sine viktige oppgaver, men heller ikke større. Blir kommunen større, kan vi få flere høvdinger og færre indianere. Gode ledere er helt nødvendige hvis en organisasjon skal fungere. Men kommunen eksisterer for innbyggerne, ikke for å sikre karrieremulighetene til folk som vil bli ledere.

Derfor kommer jeg til å stemme NEI til sammenslåing. Men når saken kommer til kommunestyret etter valget, så kommer jeg til å stemme slik velgerne har bedt meg. Hvis de sørger for at jeg fortsatt sitter i kommunestyret, da.

 


tirsdag 21. juli 2015

Skogeiere må få betaling for å eie


En flink fyr i tankesmia Civita vil innføre samme slags CO2-avgift i kjøttproduksjonen som i andre næringer. Produksjon av rødt kjøtt medfører vesentlig større utslipp av klimagasser enn produksjon av hvitt kjøtt, skriver han. Og i alle andre næringer er det et prinsipp at forurenser betaler. En avgift på klimagasser i matproduksjonen vil føre til at forbruket dreier i mer klimavennlig retning.

I tillegg til oljefyrte klimafornektere har vi her i landet fått fram en helt ny flokk av klimafornektere, nemlig næringsdrivende som iherdig avviser at akkurat deres egen næring fører til utslipp av klimagasser. Tvert imot er det bra for klimaet å slippe ut mengder med grønt karbon, for da sparer vi sikkert utslipp av svart karbon, hevder mange av dem. (Grønt karbon har det til felles med grønn kryptonitt at det har magiske egenskaper og bare finnes i tegneserier.)

Følgelig har Civita-utspillet, akkurat som ventet, ført til oppskjørting og hissige utfall. Lundteigen har som vanlig rykket ut med stor faglig-agronomisk tyngde og avvist fysikken. Andre talspersoner for næringsinteressene har også latt høre fra seg. Gardbruker Mathias Sellæg, for eksempel, presenterer følgende pussige synspunkt («Aftenposten», 21. juli): «De CO2-ekvivalentene som slipper ut fra dyremagene må man f. eks. kunne avregne mot de CO2-ekvivalentene husdyrprodusentene binder i skogene sine,» skriver han. «Likeså bør man vel også få betalt om det viser seg at man samlet sett binder mer enn man slipper ut?»

Resonnementet bygger på en oppfatning som synes å bre seg blant skogeiere, nemlig at det er eierne som driver med fotosyntese og binder CO2. (En spør seg uvilkårlig om hvordan sånne eiere ser ut: Omtrent som entene i «Lord of the Rings», kanskje?) Mange forskere har som kjent den oppfatningen at det er skogen som holder på med fotosyntese, helt uavhengig av hvem som eier den. De meiner også at det ville den gjøre om det ikke fantes eiere i det hele tatt!

Sellæg meiner nok at man skal motta betaling fra fellesskapet for den tjenesten man gjør oss ved å eie skog. Men den tjenesten kan fellesskapet få utført helt gratis: Jeg påtar meg frivillig den byrden det er å sitte som eier av hvor mange tusen dekar det skal være. Bare overfør eiendomsretten til meg, så garanterer jeg å få utført fotosyntesen aldeles gratis så lenge jeg lever. Det må være godt for Sellæg og andre skogeiere å slippe strevet med all denne fotosyntesen.
 






lørdag 16. mai 2015

Gratulerer med dagen!


17. mai er en politisk dag. Grunnloven vi feirer er et politisk manifest – et (langtfra perfekt) dokument som setter på plass noen merkestolper for rettighetene til alle innbyggere her i landet. Alle vi som kaller oss norske.

Og hvem er «vi»? La oss ta gjøre ei opptelling.

Alle nordmenn er etterkommere etter innvandrere. Hele dette steinete landet låg folketomt til slutten av istida. De første fangstfolka kom fra det som nå heter Russland og det som nå heter Danmark, og sikkert også fra det som nå heter Nordsjøen.

Seinere kom det jordbrukere; folk som hadde tatt med seg krøtter og såkorn fra Lille-Asia oppover langs elvene i Europa. Etter dem kom det folk som fulgte vestkysten nordover fra Iberia; de bygde store gravmonumenter som det ennå finns rester av langs strender i Oslofjorden. Andre igjen kom i store båter fra Sverige, Polen og de baltiske land. De hadde med seg hester og (antakelig) det språket som er blitt til norsk. De hogg bilder i stein av båtene sine, av store høvdinger med løftet øks og av solguden. Vi veit ikke når samenes forfedre kom, men fra folkevandringstida finns det spor etter samisk jaktkultur i store deler av innlandet, også på Østlandet.

Bare i de siste tusen åra er det kommet treller hit som vikingene tok med seg fra Irland, England og Skottland, og noen helt fra Hellas, Tyrkia og Nord-Afrika. De folka vi kalte 'tatere' kom fra India, via Hellas, Ungarn og Tyskland. Fra Tyskland og Nederland kom det sjøfolk og handelsfolk til Bergen og andre havnebyer. Fra Danmark kom det prester og embedsmenn - vår nasjonalhelt, Fridtjof Nansen, hadde danske forfedre, akkurat som Kongen. Fra Finland kom det skogsfolk og bureisere, og ryddet plasser som i dag har slike navn som Finstad, Finneplassen og Finborud. Katnosa, sør i Lunner, er et finsk ord. På Veståsen her i Gran kryr det av forvanskninger som antakelig har vært finske navn: «Korpeberget», «Kophaug» og andre. Mange plasser med navn som «Svenskerud» ble ryddet av finner som hadde vandret inn via Värmland.

Det kom arbeidsfolk med familier fra Böhmen for å bygge ut gruvedriften og lage glass. Noen kom til Jevnaker, og uten disse innvandrerne hadde det ikke vært noe glassverk der. Svenske rallare bygde de norske jernbanene, og ikke få av dem fikk avleggere her i landet, enten de slo seg til her eller ikke. Jøder flyktet hit fra pogromer i Russland og Polen og ble gode norske borgere fra første dag. Til vår skam og ulykke lot vi en stor del av den jødiske befolkningen bli hentet til Hitlers drapshelvete. Aldri, aldri, aldri mer må et slikt vanvidd få smitte oss her i landet.

For snart seksti år sia kom det mange flyktninger hit fra Ungarn. Norge var et fattig land den gangen: En vanlig familie brukte halve inntekten på mat. Folk badet i stamp en gang i uka. Klær ble håndvasket med vaskebrett og balje. Far min hadde en av de få bilene i Vestre Gran, og det var ei storhending da vi kjørte på grusveger helt til Sandefjord på sommerferie. Fartsgrensa var 60: Greitt nok, for den gamle Morrisen gikk ikke fortere. Mallorca hadde ingen hørt om; langt mindre Thailand. I fattige Norge tok folk imot flyktningene med åpne armer og skaffet husvære i gymsaler og privatboliger, uten å diskutere om vi hadde «mottaksmuligheter». Nå er vi søkkrike, så nå er vi ikke brått sikre på om vi har plass til folk som risikerer livet for å komme hit.

Og i de siste førti åra er det kommet arbeidsfolk fra Pakistan og Tyrkia, og flyktninger fra Chile, Vietnam, Sri Lanka, Somalia, Eritrea, Bosnia. Vi venter nye bølger fra Syria og flere andre land.

Folk som kom hit gjennom århundrer og årtusener har blandet seg og fått etterkommere. Vi som kaller oss norske er resultatet av disse blandingene. Det er derfor noen av oss er lyse og noen er mørke, og noen er midt imellom. Noen har brune øyne; andre har blå. Noen har rødt hår og fregner, akkurat som folk i Irland. I slekta mi finns det en arvelig sjukdom som opprinnelig kommer fra India. Her i landet dukket den opp på 1700-tallet, og den må ha kommet hit med tatere.

På samme måte har det vi kaller vår kultur stadig tatt opp i seg det som nye innflyttere hadde med seg: Skipsbygging og jordbruk, handel og sjøfart. Reindrift var en god idé som spredte seg fra Sibir til Finnmark. Kristendommen kom hit med irske treller og vikinger på langfart. Det norskeste som finns, folkevisene og folkedansen, er laget etter mønster fra Sør-Frankrike på 12-1300-tallet. Fargerike norske bunader er utviklet etter mønster av folkedrakter i Mellom-Europa. Språket har tatt opp ord og vendinger fra gresk, latin, fransk, tysk, dansk, samisk, engelsk. I det siste har det utviket seg lokale dialekter i enkelte bydeler med ord og tonefall fra arabisk, tyrkisk, urdu, punjabi. Anorakk og kajakk er eskimoiske ord; pall er irsk. Grunnloven vår er formet etter ideer fra Frankrike og fra den amerikanske grunnloven, som i sin tur har mottatt impulser fra irokeserforbundets lover.

Reinlender og pols. Fotball og golf. Blues og køntri. Pizza og kebab!

Norge er ikke blitt et flerkulturelt samfunn nå nettopp, slik mange liker å påstå. Norge har vært flerkulturelt så lenge det har bodd folk her. Alle som er kommet hit har hatt med seg sine egne tråder til den fargerike veven som vi kaller norsk. Sammen bygde de dette landet som de ble enige om å kalle Nordvegen. Sjøl kalte de seg nordmenn, uansett hvilken himmelretning de først var kommet fra. Men hva er det særegne og spesielle som vi kaller 'norsk', og hvordan ble det akkurat slik?

Skulle folk overleve i dette steinete landet hvor det var langt til nærmeste nabo og enda lengre til nærmeste slektning, da måtte de lære seg sjølstendighet. De måtte være sjølhjulpne i det daglige, men de måtte også hjelpe hverandre når nøden krevde det. De måtte utforme et sinnelag, en måte å tenke og leve på, som vi godt kan kalle grunnleggende norsk.

Den tenkemåten som festet seg, det var idéene om frihet, likeverd og medansvar. Disse idéene sier at alle skal kunne leve og tru slik de vil så lenge de ikke skader andre; at alle er like for loven og skal omgås som likeverdige, og at vi har ansvar for å hjelpe hverandre. Vi har aldri hatt en mektig adel eller folk som bestemmer over andres liv i dette landet, og vi ser med skepsis på alle som prøver å bestemme over oss. Det skal vi fortsette med.

Frihet, likeverd og medansvar finns ikke omkring oss bare av seg sjøl. De må skapes på nytt hver dag. Hver gang du eller jeg møter et medmenneske med respekt, hver gang vi hjelper noen som trenger det eller forsvarer naboens rett til å leve ansless enn vi gjør, da bygger vi disse verdiene. Da oppfører vi oss som gode nordmenn. Men når vi mobber Ola fordi han ikke har smartphone og kule klær, eller Akmed fordi han er muslim, da river vi de samme verdiene ned. Hvis vi fortsatt skal ha noe å feire på 17. mai, da må vi bygge og vedlikeholde disse verdiene, ikke rive dem ned.

Harmonisk og konfliktfritt? Langt ifra! Det blir aldri det når folk fra forskjellige kulturer møtes. Det blir aldri det når folk fra forskjellige bygdelag møtes heller: «Næsning på Hamarmarten, skund dekk og skund dekk, legg ifrå dekk gebisset og kom hit og sløss!» sang Prøysen. Da jeg var guttunge, kriget vi i «Grymyr-banden» med «Støa-banden», med spretterter og på tørre never. «Totning og tomflasker!» sa vi seinere, og trengte ikke si mer. Det er ikke konfliktfritt i den enkelte familie en gang – men:

Skal folk fra forskjellige steder i verden møtes og samarbeide – og det må vi, for verden blir stadig mindre, og behovet for samarbeid blir stadig større – , så må vi gjøre vårt beste for å følge det vi godt kan kalle den norske modellen:

Vi skal fortsette å møte hverandre som likeverdige. Vi skal verdsette at fremmede kommer for å leve og arbeide i dette landet, og gir nye bidrag til dét å være norsk. Vi skal respektere hverandre som enkeltmennesker, uansett hvor ulike vi er. Vi skal ta ansvar for hverandre når ulykker rammer.

Vi som er vaksne nå har ansvaret for at vi greier å være norske på denne måten. Da trenger vi ikke være skamfulle når vi leverer ansvaret videre til ungdommen. Da blir Norge fortsatt verdens beste land å bo i, og vi kan fortsatt feire 17. mai med stolthet.

Gratulerer med dagen!



fredag 1. mai 2015

Hattie og hans tjenere: En kritikk i ti punkter


I diskusjonen om klassestørrelse fortsetter Høyre å insistere på at «all forskning viser at»... Med «all forskning» meiner de egentlig John Hattie, eller mer presist professor Nordahls tolkning av Hattie.1

Det trengs en drøftelse av hva Hattie egentlig skriver, og en kritikk av hvordan han er kommet fram til det. Dette er en begynnelse.

1: Hatties bok «Visible learning» er en litteraturgjennomgåelse, ikke et produkt av sjølstendig forskning. Den mye omtalte tabellen over «hva som virker» er satt opp ved at Hattie har regnet ut et gjennomsnitt fra de metastudiene han har funnet, uavhengig av hvor pålitelige grunnlagsdataene har vært. I forordet bruker han mye plass på å begrunne den manglende kvalitetskontrollen. Hovedargumentet er at han finner omtrent samme gjennomsnitt og standardavvik i både gode og dårlige analyser! Dermed spiller det ingen rolle at han ikke sorterer bort de dårlige.2 Det skriver han til tross for at en av de største metastudiene han baserer seg på, Glass & Smith fra 1979, påpeker hvor stort utslag kvaliteten på en studie gjør: «Forskjellen i resultater mellom gode studier og dårlige studier er dramatisk», skriver de. De gode studiene finner store forskjeller mellom små og store klasser; de dårlige finner nesten ingen forskjell. Og når Hattie beregner gjennomsnittet av «Stor forskjell» og «Ingen forskjell», finner han selvfølgelig «Halvstor forskjell».

2: Hattie måler virkningen av hver enkeltfaktor ved å regne ut hvor stor del den gjennomsnittlige økningen i læringsutbytte som faktoren representerer utgjør av et standardavvik i elevenes læring. Elevenes tilegnelse av kunnskap er normalfordelt, og hvert tiltak øker den gjennomsnittlige tilegnelsen med en større eller mindre del av standardavviket i denne fordelinga. Vi ser fort at «alt virker»: Gjennomsnittet for de 138 enkeltfaktorene ligger på ca. 0,4 standardavvik. Det tilsvarer, ifølge Hattie, ca ett års læring! Da skulle det være en smal sak å øke læringsutbyttet med flere års læring: Gjennomfør to av de tiltakene som virker best, to som gir 1,8 standardavvik tilsammen – så er mirakelet utført! - Problemet er selvfølgelig Hatties skalering. Observasjonene fra hver enkelt studie kan godt være riktige: At «alt virker» skyldes at hvert enkelt tiltak har hatt en dokumentert virkning i en eller annen studie, en eller annen gang. Den studien kan være gjennomført i ei bestemt aldersgruppe, på ett bestemt sted, i en bestemt skole, under bestemte ytre forhold som gjaldt akkurat der og da. Men i tabellen over «hva som virker» utvides dette til å være gyldig for alle aldersgrupper, i alle skoler, på alle tider og steder, under alle forhold. Dermed sprenges skalaen, og følgelig truverdigheten.

3: De 138 tiltakene er svært forskjellige. Noen er gjensidig avhengige; andre ikke. Når Hattie setter opp en kurve over 815 metastudier som viser antall effekter pr. intervall av virkning (40 effekter gir en økning på 0,45 til 0,49 standardenheter, osv), er det ingen grunn til å vente at resultatet skal bli normalfordelt. Men det blir det! Et slikt resultat vil vi få hvis hvert tiltak har en virkning som utgjør et tilfeldig avvik fra gjennomsnittet for alle tiltak. Men virkningen av (for eksempel) «klassestørrelse» eller «sosioøkonomisk status» utgjør ikke tilfeldige avvik fra samme gjennomsnitt; de utgjør resultatet av kvalitativt forskjellige faktorer. Hvert tiltak bør derfor gi et systematisk avvik fra gjennomsnittet; ikke et tilfeldig avvik. - Hvis jeg slår tre terninger 815 ganger og skalerer summen av øyne ned fra 10,5 til 0,4 i gjennomsnitt, så får jeg ei tilnærmet normalfordeling. Det skyldes tilfeldige avvik. Men når jeg ser på bidrag til (økt) læringsutbytte fra eleven, fra hjemmet, fra skolen, fra læreren og fra undervisningsmetoden, da bør de avvikene jeg finner helst ikke være tilfeldige. Det er ingen grunn til at de skal fordele seg i en Gauss-kurve – og at de gjør det, er ikke noe godt tegn. En fristes til å spørre: Er disse resultatene målt, eller er de generert med tre terninger?

4: Sjøl om Hatties bok bygger på enorme mengder publisert forskning, er det flere viktige studier som han merkelig nok har unnlatt å ta med. Det dreier seg blant annet om tre store prosjekter som er gjennomført nettopp for å finne ut hvordan klassestørrelsen påvirker læringsutbyttet. Disse studiene er dessuten gjennomført med betryggende statistiske metoder for å eliminere de svakhetene som har preget mange eldre undersøkelser.3 Det dreier seg om STAR- og SAGE-prosjektene i USA, og CSPAR-prosjektet i England. Disse undersøkelsene viser entydig at elever i de yngste årsklassene har stor nytte av redusert klassestørrelse. Utbyttet er størst hos de svakeste elevene, og hos barn av foreldre med svak økonomi og kort utdannelse. Hattie nevner ikke disse studiene med ett ord, enda de er godt kjent og mye diskutert i den engelskspråklige verden.

5: Hattie skiller ikke mellom korrelasjon og kausalitet – et skille som er elementært når du tolker statistikk. Den overlegent viktigste faktoren av de 138 som påvirker læring, ifølge tabellen, er «Self-report grades». Det går ut på at eleven vurderer sine egne ferdigheter, og så måler forskerne hvor godt dette stemmer med læringsutbyttet. 6 forskjellige metastudier viser sterk korrelasjon mellom elevens egen oppfatning og den framgangen som eleven har i skolen. Den som leser tabellen som en oversikt over «hva som virker», vil tru at vi har med en årsakssammenheng å gjøre, mens undersøkelsene bare viser at elever flest har en realistisk oppfatning av hvor «flinke» de er. Og sånn kan det være gjennom hele tabellen: Når Hattie finner en korrelasjon mellom læringsutbyttet og forskjellige egenskaper ved læreren (skjønt liten sammenheng med lærerens etterutdannelse!), så kan det jo tenkes at gode lærere får gode elever. Men pila kan også gå den andre vegen, slik at gode elever får gode lærere! (Søker de beste lærerne seg til de beste skolene? Det kan godt hende – men det sier Hattie ingenting om.) For å finne ut om korrelasjonen viser en årsakssammenheng, og i så fall hvilken, trengs det gode statistiske verktøy og forskere som kan å bruke dem. Hattie viser ikke at han har slike verktøy.

6: Eksemplet med flinke lærere og flinke elever viser den effekten som skoleforskeren Bonesrønning kaller «resiprok kausalitet». Her er et annet eksempel: Enhver rektor strever hver eneste dag med å utnytte sine ressurser optimalt. Tenk deg en rektor som har to klasserom han4 kan bruke; et stort og et lite. Han har også to mulige klasselærere; en erfaren og en nyutdannet. Hvordan fordeler rektor lærerne mellom de to klassene? En annen rektor har kanskje de samme to klasserommene og to omtrent like gode lærere. Rektor veit at det finnes et par-tre ustyrlige villbasser blant årets nye klienter5. I hvilket klasserom plasserer rektor dem? - Svaret på begge spørsmål avdekker prioriteringer og ressursbruk som foregår på hver eneste skole hver eneste dag, og som alltid søker å motvirke uheldige utslag av slike faktorer som klassestørrelsen. Den naive forsker som bruker tall for klassestørrelse og læring ukritisk vil konkludere med at klassestørrelsen betyr lite. Hvis du kjenner situasjonen bedre, griper du dine statistiske verktøy, som hjelper deg til å trekke mer nyanserte konklusjoner.

7: Anta likevel at de tre metastudiene som Hattie bruker når det gjelder klassestørrelse er uangripelige. Anta at alle tre bygger på perfekt gjennomførte enkeltstudier, og at det gjennomsnittet Hattie kommer fram til – 0.21 standardavvik – gir et helt korrekt bilde. - Men dette gjennomsnittet omfatter elever fra første til trettende klasse – fra femåringer til nittenåringer! Ingen har påstått at effekten av reduserte klasser er den samme i den videregående skolen som i småskolen. Tvert imot; de tre store studiene jeg har vist til sier klart at effekten er størst blant de yngste elevene. - Sett at effekten målt i læringsutbytte faller jevnt og halveres hvert tredje år. Da vil et gjennomsnitt på 0,21 gjennom 12 år tilsvare et gjennomsnitt på 0,45 i de tre første åra. For de yngste elevene er klassestørrelsen da ett av skolens viktigste bidrag – tett bak «Classroom cohesion», «Peer influences» og «Classroom management». - Og ifølge forfatterne av den største metastudien som Hattie bruker i forbindelse med klassestørrelse, er altså denne effekten kraftig undervurdert på grunn av dårlige studier.

8: Hatties tabellverk er basert på statistikk. Men han bruker statistikk på originale måter. I sine detaljerte tabeller over effekter av forskjellige faktorer slik de er dokumentert i 815 forskjellige metastudier, opererer han med en størrelse CLE, som uttrykker sannsynligheten for at nevnte faktor vil ha positiv virkning for en tilfeldig valgt elev. I flere tilfeller er denne sannsynligheten større enn 100 %. Et eksempel: Falchikov & Goldfinch viser i sin metastudie av «Self-assessment in college» fra 2000 angivelig at det er 135% sannsynlighet for at effekten vil være positiv! Av 100 studenter vil altså hele 135 ha nytte av den. Og i den andre enden av skalaen: Razels metastudie fra 2001 viser at sannsynligheten for at TV skal være bra for læringsutbyttet er minus 18 %. Av 100 elever kan vi altså vente at minus 18 vil få bedre læring takket være TV – og følgelig at i alt 118 vil få dårligere læring! Her ser vi antakelig et resultatet av at programvaren som Hattie og studentene hans har brukt går amok når ingen passer på den. Men ingen har oppdaget det etterpå – ikke Hattie, ikke forleggeren, ikke den skaren av skolefolk som har trykket Hattie til sitt bryst, og slett ikke Høyre! Jeg kan gjerne være barnet som sier at keiseren ikke har klær på, men jeg synes noen kunne ha oppdaget det litt før.

9: Mer merkelig statistikk: Forskjellige metastudier viser svært forskjellige resultater av samme faktor. De tre som omfatter klasserom, for eksempel, spriker. De dekker store variasjoner i antall studier og antall elever. Hattie måler alltid nytten av et tiltak i hvor stor del av et standardavvik i elevens læring som tiltaket fører til. Men metastudiene har sikkert operert med forskjellige standardavvik for læring. Da er det en lang og fæl prosess å beregne gjennomsnittlig forbedring for hele elevmassen i samtlige metastudier, deretter standardavviket for hele elevmassens læring, og til slutt forholdet mellom de to. Det regnestykket gjør ikke Hattie; han tar en snarveg: Han legger sammen forbedringene og deler på antall metastudier. Uten vekting; uten at vi aner hvor store standardavvik vi har hatt i hver metastudie. Og det er viktig: Hvis standardavviket i én studie er dobbelt så stort som i en annen, så vil en forbedring på 0,4 standardavvik også utgjøre en dobbelt så stor forbedring i den første studien som i den andre! Men det ser ikke Hattie. Hans regnemåte forutsetter at hver metastudie omfatter like mange elever, og at standardavvikene i hver metastudie også er de samme. Når det gjelder første antakelse, så framgår det at omfanget spenner fra 29.000 til 520.000 elever, bare i to av de metastudiene han bruker for å se på effekten av klassestørrelse.6 Og når det gjelder standardavviket for læring i hver studie, kan vi bare gjette – men når spriket ellers er så stort, er det all grunn til å tru at standardavvikene spriker også.

10: Tabellen over «hva som virker» har to desimaler i svaret. Da er det godt å vite at de er beregnet med stor nøyaktighet: Mange av dem oppgis med «standard error»; det vil si usikkerheten i tallet. Ett eksempel: Hattie oppgir «Effect of Principals or School Leaders» - altså rektors påvirkning – til å utgjøre 0,36 standardavvik. Usikkerheten i dette tallet oppgis til 0,031. Det er jo betryggende? Tja! Usikkerheten er oppgitt i bare 2 av de 11 metastudiene som ligger til grunn for tallet 0,36. 0,031 er – du gjettet det: Gjennomsnittet av disse to usikkerhetene. - Men jeg er nysgjerrig. Jeg betrakter tallet fra hver metastudie som én observasjon (det er egentlig det Hattie gjør også, når han regner ut «gjennomsnittet» 0,36). Så regner jeg ut standardavviket i denne mengden av observasjoner. Det blir 0,37! Rektor påvirker altså læringsutbyttet (positivt) med 0,36, pluss minus 0,37, standardenheter. Observasjonene fordeler seg pent slik det sømmer seg i ei normalfordeling: 1 under intervallet, 2 over, resten innafor. Men hvis observasjonene er normalfordelt, så kan jeg finne usikkerheten i middelverdien også: Den blir 0,11! Det betyr at ut fra Hatties egne tall skal middelverdien for rektors påvirkning være 0,36 pluss minus 0,11, og slett ikke 0,36 pluss minus 0,03, slik han oppgir. Sånn kan en finne usikkerheten i flere av de 138 faktorene som Hattie oppgir. Resultatet blir alltid det samme: Den usikkerheten som kan beregnes ut fra oppgitte tall er alltid mye større enn Hattie oppgir. Den blir faktisk så stor at det gir lite meining å rangere faktorene i det hele tatt over store deler av skalaen.

Jeg kunne fortsette. Og fortsette. Og fortsette! Hatties tabell over «hva som virker» rakner når du utsetter den for kritisk analyse. Det samme gjør flere av hans resonnementer. Men betyr det at boka hans er ubrukelig? Slett ikke! Den formidler enorme kunnskapsmengder, samlet gjennom 40 år og bearbeidet i 15 år. Hattie presenterer og drøfter den på en kunnskapsrik, intelligent og underholdende måte. En må bare ikke finne på lese boka som en Bibel som oppsummerer all skoleforskning i urokkelige Sannheter. Framfor alt må en ikke bruke tabellen over «hva som virker» som en fast målestokk for alle tenkelige tiltak i alle tenkelige skoler: Den er i beste fall en pekepinn, et utgangspunkt for diskusjon. Og når sant skal sies, gjør ikke Hattie krav på noe mer heller! Han understreker stadig at boka hans er en litteraturgjennomgåelse. I det ligger det at ikke all litteratur er like god! Og om klassestørrelse sier han slett ikke det som Høyre tillegger ham, nemlig at den ikke betyr noe for elevenes læring. Nei, han sier at redusert klassestørrelse må følges av endret måte å undervise på, dersom den skal ha en slik virkning som vi ønsker. Det betyr at lærerne må lære og trenes til å drive tilpasset opplæring til hver enkelt elev! Akkurat det som kreves i norsk skole. Og hvem kan drive tilpasset opplæring av hver elev i en førsteklasse på 30 elever?

I mange kommuner brukes Hattie i praksis som en god unnskyldning for å redusere lærertettheten og øke klassestørrelsen – gjerne etter at professor Nordahl har besøkt kommunestyret og gitt dem god samvittighet for å tenke slik. Da er det sjelden noen som er ufin nok til å sitere Hattie direkte: «The positive sign of the average effect size suggests that increasing class size is poor policy.»

Bibelen er ei samling myter, legender og halvt historiske nedtegnelser fra vidt forskjellige tider og steder. Alt er gjengitt med stor avstand mellom hendelse og gjenfortelling. Bibelen egner seg til fordypelse, refleksjon, inspirasjon, drøfting. Den egner seg absolutt ikke som kilde til den urokkelige og bokstavelige historiske Sannhet! Men noen bruker den akkurat slik. Det påstås at mange av disse ikke har lest Bibelen i det hele tatt. Og de som har det, har i hvert fall ikke forstått den, sies det.

Akkurat slik er det nok med John Hatties «Visible Learning» også.


1Kanskje har de ikke hørt om andre forskere! Da vil jeg anbefale at de bruker litt tid og energi på å sette seg inn i resultatene til den anerkjente britiske forskeren Peter Blatchford. De presenteres blant annet i hans bok «The Class Size Debate: Is Small Better?», og de avviker sterkt fra Hatties.

2Argumentet ville ha hatt noe for seg hvis de dårlige studiene bare introduserte tilfeldige avvik; ikke systematiske avvik. Problemet med mange dårlige studier er at de trekker resultatet i en og samme retning – omtrent som en terning som er tyngst på den ene sida. Psykologen Eysenck har oppsummert sin kritikk av metastudier uten kvalitetskontroll på følgende enkle måte: «Garbage in, garbage out».

3I andre undersøkelser har man ofte ikke klart å skille mellom forskjellige påvirkningsfaktorer: Elevenes sosiale bakgrunn, lærernes erfaring og kompetanse, osv. Slike studier finner, ifølge Glass & Smith, «nesten ingen forskjell».

4For ordens skyld: «Han» er i dette tilfellet grammatisk kjønn! Rektor kan godt være kvinne. Vær så snill; la meg slippe å bruke den krampefeministiske konstruksjonen «hen»!

5Ikke ett vondt ord om villbasser! De er Jordens salt. Men de utgjør en prøvelse i klasserommet – særlig i den feminiserte skolen der kravet er at alle skal være søte og snille og greie.

6I den tredje, McGiverins metastudie fra 1989, er antall elever ikke oppgitt.