Titolo

Alcune prime osservazioni sui risultati dei test PISA 2009

8 commenti (espandi tutti)

Al test precedente mesi dopo presentarono le stesse domande fatte agli studenti, ad un gruppo di professori di quell'ordine di scuola, i quali ignari delle domande PISA, risposero come la media dei ragazzi italiani. Stessi errori. Il risultato fu che le risposte erano praticamente le stesse. Stesse % di risposte giuste e sbagliate.

Mi sembra poco credibile. Hai una fonte?

Il benckmark degli studenti si trasforma in un benchmark sulla docenza.

No. Se vuoi valutare seriamente dovresti tenere conto di una serie di altri fattori che influiscono sul rendimento scolastico degli alunni. I docenti sono uno di questi fattori. Quello che segue è un elenco casuale, incompleto, non sistematico, a puro titolo esemplificativo:

  • il livello di scolarizzazione delle famiglie
  • l'attenzione dei genitori ai risultati dei figli
  • la percezione della scuola come mezzo di affermazione sociale
  • la percezione della sua inutilità sul piano lavorativo
  • la selezione degli alunni in entrata (ad esempio con formazione di scuole/classi di serie A, B, C)
  • la selezione in uscita (la consapevolezza della necessità di doversi impegnare)
  • la continuità didattica/l'assenza di continuità
  • il numero di materie studiate
  • la qualità dei locali e delle strutture
  • il funzionamento degli enti locali (edilizia scolastica, servizi)
  • il funzionamento delle asl (disabili, disagio)
  • l'efficacia della dirigenza

Per valutare bisogna mettere a confronto situazioni tra loro comparabili: scuole dello stesso tipo, appartenenti a contesti socio-culturali sufficientemente simili. Una scuola di periferia con un'altra di periferia, un classico con un classico, eccetera. Altrimenti sono solo chiacchiere.

All'interno di ciascuna tipologia possiamo valutare se si è lavorato bene o male. Ma pretendere lo stesso livello di comprensione di un testo nella classe di un docente liceale che insegna ai figli di papà e in quella di uno che si è ammazzato in un professionale di frontiera sarebbe semplicemente idiota.

I test PISA sono una misura dell'efficienza complessiva del sistema scolastico, di cui gli insegnanti sono parte importante. Non sono una misura sic et simpliciter della qualità dell'insegnamento.

Ed allora la domanda vera (ma da verificare) potrebbe essere: perché alla scuola privata vanno docenti che finiscono con l'essere mediamente peggiori di quelli della pubblica (mentre altrove ci vanno i migliori)?

Sono domande da extraterrestre, almeno in Italia. Nel nostro paese il titolo di studio ha valore legale ed è richiesto per molti lavori indipendentemente dal livello di competenza posseduto. La scuola pubblica sarà poco selettiva, ma resta troppo impegnativa per una parte dei nostri studenti. Si è quindi creato un fiorente mercato del "pezzo di carta". Negli esamifici l'attività didattica è puramente pro forma (e in qualche caso estremo nemmeno esiste). Oltre a ciò, siccome l'insegnamento nelle scuole private può essere riconosciuto per accedere al "ruolo" in quelle pubbliche, sia le scuole private finte sia quelle "serie" in molti casi non pagano o pagano male i docenti, dato che troveranno comunque qualche giovane aspirante disponibile a lavorare per la gloria e per il punteggio.

Mi sembra poco credibile. Hai una fonte?

mmmmmm la cosa fu riportata in molti giornali (altrimenti come avrei potuto saperlo?) ... 
Purtroppo devo andare a memoria.... erano i test del 2007, quelli in cui gli studenti italiani risultarono avere idee confuse, in fisica, sul perché del giorno e della notte, tra rotazione e rivoluzione. 

Mi pare che i test agli studenti uscirono a dicembre 2007 mentre il clone fatto ai professori alcuni mesi dopo, quindi a naso ho ristretto una rcerca su google ed ho trovato questo: 

 

 

L'inchiesta di «Panorama» sugli insegnanti di scienze 

«I prof sanno meno degli allievi» 

Usate le domande che l'Ocse aveva rivolto agli studenti. Solo il 36% ha saputo spiegare perché lievita la pasta 

ROMA — L'indagine Ocse- Pisa 2006, che ha visto i nostri quindicenni piazzarsi agli ultimi posti nella graduatoria internazionale relativa alla cultura scientifica, non risparmia neppure i prof. Gli stessi test sono stati infatti proposti dal settimanale Panorama a un campione di 100 docenti di Scienze delle medie e superiori con risultati non molto diversi. Se la maggior parte dei nostri quindicenni non ha saputo rispondere alla domanda: perché si alternano giorno e notte, non pochi insegnanti di Scienze si sono trovati in difficoltà di fronte alla domanda: «Perché la fermentazione fa lievitare la pasta?». Pisa-Ocse, la vendetta: ovvero i professori di Scienze non sempre sanno rispondere alle domande destinate ai propri allievi quindicenni. 

Il settimanale ha selezionato cinque test dal questionario Pisa-Ocse 2006 che ha coinvolto un campione di oltre 400 mila studenti quindicenni di 57 Paesi e li ha proposti ai professori che avrebbero dovuto mettere i ragazzi in condizione di rispondere ai quesiti. I risultati sono stati sorprendenti. Per esempio, alla domanda «Perché la fermentazione fa lievitare la pasta? », appunto, ha risposto correttamente, scegliendo l'unica opzione giusta sulle quattro proposte, solo il 36 per cento degli intervistati: «La pasta lievita perché si produce un gas, il biossido di carbonio ». Per tre domande le percentuali di risposte esatte sono state inferiori al 40 per cento. Inoltre, in due casi su cinque le percentuali di risposte esatte dei docenti delle medie inferiori sono state più alte di quelle dei loro colleghi delle superiori. «Stiamo lavorando su un piano di aggiornamento degli insegnanti», è il laconico commento del ministro Fioroni, che proprio in seguito ai risultati dell'indagine Ocse-Pisa 2006 ha deciso di varare un piano di emergenza. 

L'inchiesta di «Panorama» non stupisce il presidente dell'associazione nazionale dei presidi, Giorgio Rembado. «La selezione del personale attraverso i concorsi — spiega — è sparita dagli orizzonti della scuola da moltissimi anni». «La maggior parte degli attuali insegnanti — continua Rembado — sono entrati attraverso lo scorrimento delle graduatorie per supplenti, ovvero per anzianità. E l'anzianità non è mai un buon criterio di selezione». «Fino a quando non avremo la possibilità di selezionare i docenti attraverso le competenze disciplinari e didattiche — conclude Rembado — non avremo la certezza di poter contare su un buon corpo docente». «Non penso che gli insegnanti di scienze siano così ignoranti — protesta Anna Pascucci, presidente dell'associazione nazionale dei docenti di Scienze naturali —. In queste statistiche non si sa mai chi sono le persone intervistate e che cosa si vuole sondare. Penso che si stiano amplificando dei dati sulla cui validità bisognerebbe riflettere ». «I docenti di Scienze — conclude Anna Pascucci — non sono ignoranti. Certamente hanno poco tempo per aggiornarsi: solo cinque giorni l'anno». 

Giulio Benedetti 

04 gennaio 2008 

www.corriere.it

Ci sarebbe da precisare anche che "la maggior parte degli insegnanti" è entrata, non "sono entrati", ma qui non so se il refuso è del giornalista o del presidente dell'associazione nazionale dei presidi. Forse oggi si insegnano cose diverse ma "ai miei tempi" era un errore abbastanza grave. 

Perché come dicono le famose regole "autocontraddittorie" ...  i verbi deve concordare con i propri soggetti

il corriere che cita un'inchiesta di panorama è una fonte credibile?

Fonte più accurata,

http://blog.panorama.it/italia/2008/01/03/scuola-litalia-bocciata-in-scienze-a-partire-dai-professori/ , scrive:

Un esempio? Alla domanda sul ”perché‚ la fermentazione fa lievitare la pasta” ha saputo rispondere soltanto il 36 per cento dei professori di scienze intervistati.

Qui (http://www.uaar.it/news/2008/01/04/scuola-italiana-bocciati-scienze-anche-prof/)

Scrive un commentatore:

  1. Elio scrive:
    5 gennaio 2008 alle 11:32

    Premetto che non ho letto il servizio completo su Panorama, ma ho visto solo la notizia su Studio Aperto.

    Sul tt (tele-tabloid) di Italia 1 sbeffeggiavano i professori, riportando, come scritto sopra, che pochi hanno saputo rispondere come avviene la fermentazione. Per il “giornalista”, con tono sarcastico, la fermentazione avviene “per la produzione di CO2″ (vero) “e non, come affermano i professori, per la presenza di FANTOMATICI funghi unicellulari”. A essere semeiologi, avviene per la produzione di CO2, ma così, dal nulla? I fantomatici funghi unicellulari sono i LIEVITI, che respirando producono la CO2. Quindi di fatto corretta. Io ci andrei un po’ piano…

Stante la persistente cialtroneria e scarsa rigoriosità del giornalista italiano medio (di Panorama durante un governo di centrosinistra, poi!), ho un dubbio piuttosto forte sul metodo utilizzato dal giornalista per "ripetere" il test PISA, sono quasi certo che per non perdere tempo il giornalista di panorama ha fatto domande orali a risposta aperta (e non il test PISA che prevede domande scritte a crocette a risposta multipla) e poi ha controllato se le risposte assomigliavano a quelle del test PISA.

Bisognerebbe però leggere l'articolo originale, per fugare ogni dubbio, ma non riesco a trovarlo. Gli archivi di panorama arrivano fino a marzo 2007...

 

 

 

Ah ah questa dei lieviti è impagabile!

Povero giornalista, "fantomatici funghi"... io non mi farei vedere in giro per un mese dalla vergogna.

il corriere che cita un'inchiesta di panorama è una fonte credibile?

Era stata chiesta "qualche fonte". Non una "credibile". Comunque, fonte a parte, come siano messi i docenti italiani alle medie lo sappiamo. Sono passati quasi 40 anni ma ricordo ancora una prof di scienze che mi corresse "grigio" in "griggio" in un compito di scienze. Al liceo. :-(

Francesco 

Era stata chiesta "qualche fonte". Non una "credibile".

non ci crederà ma mi aspettavo una Sua risposta del genere. ma leggendo con attenzione il sig. guglielmo Le ha chiesto:

Mi sembra poco credibile. Hai una fonte?

nella frase immediatamente percedente alla interrogativa, il sig. guglielmo ha espresso delle perplessità proprio a riguardo della credibilità delle Sue affermazioni: risulta chiaro quindi che quando chiede "una fonte", la richieda che sia anche "credibile".

Lei ha appena effettuato un test PISA di comprensione del testo. ;)

 

Comunque, fonte a parte, come siano messi i docenti italiani alle medie lo sappiamo

sinceramente, io, non lo so. ho sempre avuto ottimi insegnanti di scienze naturali alle scuole medie inferiori e superiori, e maledetti loro, mi hanno pure fatto appassionare a queste materie...

ciò che so, e che do per certo, è la scarsissima rigorosità e professionalità di molti giornalisti italiani, a confronto non solo alla rigorosità richiesta in Italia a qualunque altra professione, ma anche a quella rispettata dai giornalisti stranieri (e da pochi altri giornalisti italiani).

i test PISA sono fatti da team specializzati dell'OSCE, vengono standardizzati per poter essere effettuati in decine di paesi diversi con diverse lingue e quindi somministrati nei territori dei vari stati in modo tale che abbiano significatività statistica (coprendo città e campagna, nord, sud, est e nord, quarteiri più ricchi e più poveri, ecc. -ad eccezione della Cina...).

in italia, poi, arriva un giornalista, fa domande a caso senza neanche capirle e dice: "ha, ha, non è colpa degli studenti se sono ignoranti, è colpa degli insegnanti..." basando l'efficacia del suo messaggio sul fatto che gli italiani pensano:

Comunque, fonte a parte, come siano messi i docenti italiani alle medie lo sappiamo

basandosi su aneddoti personali vecchi di decenni senza significato statistico o scientifico:

Sono passati quasi 40 anni ma ricordo ancora una prof di scienze che mi corresse "grigio" in "griggio" in un compito di scienze.

e poi, ovviamente, scaricando le responsabilità su di un governo che ha diverso colore politico da quello del parlamentare, datore di lavoro del giornalista stesso.

Fortunato tu, io ero in periferia e 40 anni fa la realtà era diversa. Trovare un prof che fosse bravo e riuscisse ad appassionare sulla materia era un terno al lotto. Ora non so. 

E non so cosa c'entrino le mie critiche con le responsabilità di un particolare governo oggi. 

Credo che le responsabilità siano comuni e decennali. 

nella frase immediatamente percedente alla interrogativa, il sig. guglielmo ha espresso delle perplessità proprio a riguardo della credibilità delle Sue affermazioni: risulta chiaro quindi che quando chiede "una fonte", la richieda che sia anche "credibile".

Non è assolutamente chiaro. la fonte è una fonte. Poi se uno non reputa credibile una particolare fonte è pienamente legittimo ma sono fatti suoi. Se il sig guglielmo avesse reputato credibile panorama, per lui il caso era chiuso. Ma ci sono milioni di lettori e qualcuno sicuramente reputerà non credibile panorama, o l'unità, o repubblica, o il sole24ore. Mi è stata chiesta una fonte ed io l'ho fatto, andando a rivangare un po' di mail nel mio eurora e post in vari forum. Se poi, malgrado il fatto che panorama anche a me possa sembrare in generale poco credibile, la notizia quadra con i miei ricordi per me quella particolare notizia diventa credibile. Questo è il mio modo di interpretare la lettura del testo e della realtà. 

Francesco 

 

E non so cosa c'entrino le mie critiche con le responsabilità di un particolare governo oggi.

Mi scusi. Non era un'invettiva contro di Lei. Ci mancherebbe. Era contro (alcuni) giornalisti che scimmiottando le ricerche PISA rovinano nei fatti il lavoro di chi, con alta professionalità, crea, fa eseguire ed analizza questi test.

Ho solo evidenziato, utilizzando le sue parole, come questi riescano nel loro intento.