Loe raamatut: «El que fan els millors professors universitaris»

1

Introducció: definir el millor

Quan Ralph Lynn es va graduar a la universitat, el 1932, guarnit amb un munt d’honors acadèmics, va començar a fer la bugada dels altres per sobreviure a la Depressió. Deu anys després, va obtenir un certificat d’ensenyament per correspondència i va fer classes d’història en un institut durant sis mesos, abans d’enrolar-se en l’exèrcit cap a la fi del 1942. Va passar la major part de la Segona Guerra Mundial a Londres, mirant-se els draps bruts dels altres –censurant les cartes dels soldats per evitar que revelassen massa detalls sobre moviments de tropes als amics, allà a casa– i llegint història. Quan va tornar a casa el 1945, va demanar a la seua alma mater, Baylor University, que li deixàs fer classe. Més tard, va marxar al nord, a la Universitat de Wisconsin, per fer un doctorat en història europea. El 1953, va tornar a Texas, on va fer classe durant els vint-i-un anys següents.

Quan Lynn es va jubilar, el 1974, més de cent dels seus antics alumnes que ara tenien càrrecs acadèmics li van fer un homenatge. Un d’ells, Robert Fulghum, que més tard va escriure un llibre molt cèlebre en què afirmava que havia après tot el que necessitava saber sobre la vida al parvulari, va confessar que Ralph Lynn era el «millor professor del món». Una altra estudiant, Ann Richards, que el 1991 va arribar a ser governadora de Texas, va escriure que les classes de Lynn «ens oferien una finestra al món, i per a una jove de Waco, les seues classes eren una gran aventura». Eren, va explicar uns anys després de deixar la residència del governador, com «recorreguts màgics per les grans ments i moments de la història». Hal Wingo, que va assistir a les classes de Lynn molt abans de ser editor de la revista People, va concloure que Lynn oferia el millor argument que ell coneixia a favor de la clonació humana. «Res no em donaria més esperança per al futur», explicava l’editor, «que pensar que Ralph Lynn, amb tota la seua saviesa i enginy, serà per allà educant noves generacions d’aquí a l’eternitat.»¹

Què va fer Lynn per tenir aquesta influència duradora i important en el desenvolupament intel·lectual i moral dels seus estudiants? Què fan els millors professors universitaris per ajudar i encoratjar els estudiants per tal que aconseguesquen resultats notables en el seu aprenentatge? Què fa Jeanette Norden, una professora de biologia cel·lular que fa classes sobre el cervell a estudiants de medicina a la Vanderbilt University, que permet que els seus estudiants aprenguen amb tanta profunditat? Com aixeca Ann Woodworth, una professora de teatre a la Northwestern University, els seus estudiants d’art dramàtic a altures de brillantor tespiana? Ja que la clonació humana no és una opció, és possible fer una mena de clonació intel·lectual, per captar la manera de pensar de Don Saari de la Universitat de Califòrnia a Irvine, els estudiants de càlcul del qual han assolit el 90 per cent de les A als exàmens dels departament?* Podem capturar la màgia de Paul Travis i Suhail Hanna, que van ensenyar història i literatura en una petita universitat provinciana a Oklahoma als anys 70 i més tard en d’altres, des de Pennsylvania fins a Kansas, inspirant els seus estudiants fins a nous nivells intel·lectuals?

Què fa que alguns professors tinguen èxit amb estudiants d’uns historials diversos? Considere’s el cas de Paul Baker, un professor que va passar prop de cinquanta anys preparant els seus estudiants perquè trobassen la seua pròpia creativitat. Als anys 40 Baker va desenvolupar un curs anomenat «Integració de capacitats» per a un programa de la llicenciatura de teatre, una exploració mentalment estimulant del procés creatiu que va atreure tant futurs enginyers, científics i historiadors com actors i d’altres artistes. Cap a la fi dels 50, va fer servir el curs per muntar la llicenciatura de teatre al Dallas Theatre Center i més tard a la Trinity University, tot revolucionant les produccions teatrals arreu del món. Als 70 treballava en el sistema d’integració com a cap del nou institut de districte d’arts dramàtiques a Dallas, on va canviar la vida de força estudiants que uns altres havien menystingut com a fracassats. A l’inici dels 90, retirat ara en un petit ranxo a l’est de Texas, va crear, des del mateix punt de vista, un programa per a l’escola local d’ensenyament primari que va fer augmentar els resultats habituals dels tests d’aquesta comunitat rural a altures històriques. Com ho va fer?

Durant més de quinze anys m’he fet aquestes preguntes observant les pràctiques i el pensament dels millors professors, aquella gent que té un èxit notable ajudant els seus estudiants perquè assolesquen resultats excepcionals en l’aprenentatge. Una bona part de la inspiració per a l’estudi va venir dels professors extraordinàriament reeixits que m’havia trobat en la meua vida. Se m’ha acudit que l’ensenyament és un d’aquells afanys humans que rarament es beneficia del seu passat. Els grans professors emergeixen, colpeixen les vides dels seus estudiants i tal vegada només mitjançant algun d’aquells estudiants tenen una autèntica influència en l’extens art de l’ensenyament. Pel que fa a la majoria, les seues intuïcions moren amb ells, i les següents generacions han de descobrir de nou la saviesa que dirigia les seues pràctiques. En el millor dels casos, un petit fragment del seu talent perdura, el trencadís sobre el qual les generacions posteriors s’instal·len sense adonar-se de tota la dimensió de l’antiga riquesa que tenen a sota.

Fa una dècada, vaig afrontar la tragèdia de perdre una part d’aquesta riquesa amb la mort d’un professor amb talent que no vaig conèixer formalment. Quan era estudiant de llicenciatura a la Universitat de Texas, a l’inici dels 70, vaig sentir que esmentaven un jove professor, acabat de llicenciar a la Universitat de Chicago, que tenia estudiants que s’asseien en terra per tal de tenir l’oportunitat d’assistir a la seua classe. Gairebé cada dia, veia un petit exèrcit de gent que seguia Tom Philpott des de classe a la sala del departament, on continuaven les converses que les seues classes havien suscitat. A la fi dels 80 el meu fill i la meua nora van agafar les classes de Philpott sobre història urbana dels Estats Units i vaig observar com provocava noves preguntes i perspectives. Vaig escoltar amb renovat interès les seues històries d’estudiants –fins i tot bastants que no estaven matriculats en l’assignatura– que atapeïen l’aula del llegendari professor per tal de carregar les piles intel·lectuals. Volia entrevistar Philpott sobre el seu ensenyament i tal vegada enregistrar en vídeo algunes classes, però mai no es va presentar l’ocasió. Poc temps després es va treure la vida. Els seus col·legues l’elogiaven, els seus estudiants recordaven les seues classes i potser uns quants d’ells que es van fer professors van portar alguns aspectes del seu talent a les seues classes. Però la major part de la seua biblioteca de talent per exercir l’ensenyament es va cremar fins als fonaments quan ell va morir. La seua erudició sobre el desenvolupament dels veïnats a Chicago roman, però mai no va reproduir la seua erudició pel que fa a l’ensenyament, i cap altre no ho va fer per ell.

En aquest llibre he tractat de reproduir l’erudició col·lectiva d’alguns dels millors professors dels Estats Units, registrar-hi no només què fan sinó també què pensen, i sobretot començar a conceptualitzar les seues pràctiques. L’estudi, a l’inici, incloïa només uns quants professors de dues universitats, però finalment va incloure professors de dues dotzenes de centres –des d’universitats d’admissió lliure fins a universitats de recerca força selectives. Alguns feien classe principalment a estudiants amb els millors expedients acadèmics; d’altres treballaven amb estudiants amb notes per sota de la mitjana. En conjunt, els meus col·legues i jo vam observar el pensament i les pràctiques d’entre seixanta i setanta professors. En vam estudiar gairebé tres dotzenes a fons, la resta, menys exhaustivament. Uns quants d’aquests darrers van parlar en una de les sèries de conferències que vaig organitzar a Vanderbilt i Northwestern, on es presentaven professors d’altres centres que havien assolit resultats docents impressionants. Venien de facultats de medicina i departaments de llicenciatures d’un gran nombre de disciplines, que incloïen les ciències naturals i socials, les humanitats i les arts dramàtiques. Uns quants venien de programes per a llicenciats en empresarials i dos, de facultats de dret. Volíem saber què fan i què pensen els professors excepcionals que pogués explicar els seus assoliments. Més important encara, volíem saber si les lliçons que ens donaven es podien comunicar a l’ensenyament d’uns altres. He adreçat aquest llibre a gent que ensenya, però les seues conclusions també haurien d’interessar els estudiants i els seus pares.

DEFINIR L’EXCEL·LÈNCIA

Per començar aquest estudi havíem de definir què volíem dir amb professors excepcionals. La qual cosa va resultar ser una qüestió bastant simple. Tots els professors que vam triar per posar-los sota el nostre microscopi pedagògic havien assolit un notable èxit i havien afavorit l’aprenentatge dels seus estudiants amb uns mètodes que exercien una influència prolongada, substancial i positiva sobre com pensaven, actuaven i sentien aquells estudiants. L’actuació efectiva dels professors en l’aula no ens importava; amb la condició que els professors no fessen cap mal als seus estudiants en el procés (ni a ningú més), no ens preocupàvem gaire de com obtenien els seus resultats. Estils de lliçó enlluernadora, vius diàlegs a classe, exercicis basats en problemes i recerca o projectes sobre temes populars podien o no contribuir al telos del bon ensenyament. La presència o absència d’uns o d’altres, tanmateix, mai no va decidir quines persones investigàvem. Vam triar uns professors perquè obtenien resultats educatius importants.

Què es considerava una prova que un professor ajudava i encoratjava profundament els estudiants a aprendre d’una manera fonda i notable? Aquesta qüestió es va demostrar que era més complexa. En cada cas no servia un sol tipus de prova. Simplement buscàvem proves de l’excel·lència d’un educador i, si les trobàvem, fèiem servir aquella persona en l’estudi. En alguns casos la prova va arribar clarament empaquetada i etiquetada; en d’altres, vam haver de recollir-la de gerres sense etiqueta i recompondre-la com antropòlegs a la recerca d’una civilització perduda. Els tipus de prova disponible depenien tant de l’individu com de la disciplina.

Jeanette Norden, de la facultat de medicina de la Vanderbilt University, i Ann Woodworth, del departament de teatre de Northwestern, il·lustren dos models diferents de prova. Els estudiants de medicina de Norden afronten un test estandarditzat del seu aprenentatge de la National Board of Medical Examiners i de la Medical Licensing Examination dels Estats Units. L’actuació del seu grup en les seccions de l’examen que cobreix l’àmbit de Norden proporciona un bon indicador de l’aprenentatge dels seus estudiants. També el testimoniatge dels estudiants sobre la bona preparació que els donava la seua classe per a la rotació de neurologia, els National Boards i la carrera de medicina. També els exàmens que feia a les seues classes, uns instruments curosament i rigorosament construïts que feien passar els estudiants per casos específics que requereixen ampli coneixement, comprensió avançada i sofisticades habilitats clíniques de raonament. I també les declaracions dels seus col·legues sobre com estaven de ben preparats els seus estudiants per al treball posterior. Norden ha guanyat tots els premis d’ensenyament concedits per la facultat de medicina i triats pels estudiants –alguns dels premis més vegades de les que a partir d’ara permetrà la universitat. Quan el rector de Vanderbilt va dotar càtedres per a l’excel·lència en l’ensenyament, el 1993, Norden va ser la primera que va rebre aquest honor. A la fi del 2000, l’American Association of Medical Colleges la va guardonar amb el seu premi Robert Glaser per a l’excel·lència en l’ensenyament.

Ann Woodworth també arribava amb una plètora de premis d’ensenyament –inclòs el nomenament per a una càtedra per a l’excel·lència en l’ensenyament a Northwestern. Però aquests reconeixements, tot i ser importants i substancials, no ens donaven cap prova directa de l’aprenentatge dels estudiants. L’àmbit de Woodworth donava certament gran importància a l’actuació de l’estudiant, però no hi ha una mesura estandarditzada dels assoliments dramàtics. Què ens va convèncer que el seu ensenyament mereixia un estudi detingut? En primer lloc, teníem un gran nombre de testimoniatges dels seus estudiants sobre el fet que no només era entretinguda o enginyosa, sinó que els ajudava a assolir resultats substancials. Ens va impressionar la consistència del testimoniatge, amb el tipus de lloança que en feien els estudiants («s’aprèn més en la seua classe que en cap altra d’aquesta facultat»; «aquesta classe em va canviar la vida») i amb les puntuacions perfectes que li donaven als qüestionaris sobre estimulació de l’interès intel·lectual i ajuda als estudiants per aprendre. En segon lloc, teníem proves considerables sobre el que ensenyava Woodworth, informació que vam recollir dels seus estudiants, del que ens contava ella sobre les seues classes i d’una observació durant un curs d’una de les seues classes. Finalment, vam veure les actuacions dels seus estudiants, tant en muntatges de fi de curs com en el treball a l’aula, en els quals ella, amb la seua ajuda, sovint transformava una interpretació insulsa en quelcom de màgic.

Tanmateix, no n’hi havia prou tan sols amb els informes entusiastes dels estudiants i dels col·legues. Volíem indicacions de diverses fonts que determinat professor era digne d’estudi. Malgrat que no insistíem en el fet que cada docent presentàs exactament els mateixos tipus de suports, sí que teníem dues proves de foc que tots els docents havien de passar abans que els incloguéssem en els nostres resultats finals.

En primer lloc, insistíem en l’evidència que la major part dels seus estudiants estaven força satisfets amb l’ensenyament i encoratjats per ell a continuar aprenent. Això no era un simple concurs de popularitat; no estàvem interessats en algú pel fet que els caigués força bé als estudiants. Més aviat, volíem indicacions per part dels estudiants que el professor «els havia arribat» intel·lectualment i educativament, i que els havia deixat amb ganes de més. Vam rebutjar les premisses d’un antic degà que solia dir «no m’importa si als estudiants els ha agradat la classe o no, sempre que aprenguen la matèria», la qual cosa volia dir «Només vull veure com ho fan en els finals». També a nosaltres ens importava com ho feien els estudiants en els finals, però havíem de sospesar el creixent conjunt de proves que els estudiants podien «fer» en diversos tipus d’exàmens sense canviar la seua comprensió o per consegüent la seua manera de pensar, actuar o sentir.² Ens importava el mateix com s’ho feien després dels finals. Estàvem convençuts que si els estudiants eixien de classe odiant l’experiència, era menys probable que continuassen aprenent o, fins i tot, que retinguessen el que suposadament havien obtingut a classe. Un professor podria atemorir els seus estudiants perquè memoritzassen material per recordar-lo a curt termini tot amenaçant-los amb càstigs o imposant càrregues de treball excessivament feixugues, però aquestes tàctiques també podrien deixar els estudiants traumatitzats per l’experiència i fastiguejats de la matèria de l’as signatura. Qualsevol professor que faça que els estudiants odien l’as signatura ha violat del cert el nostre principi de «no fer mal».

Reconeixem que alguns professors podien tenir un èxit enorme ajudant a aprendre uns pocs estudiants, però molt menys a la majoria d’ells. Els col·legues ens han parlat d’antics professors que van estimular el seu desenvolupament intel·lectual però que deixaven aplanats la major part dels estudiants. Aquella gent, òbviament, valorava aquells mentors i de vegades fins i tot modelava les seues carreres seguint les d’ells, tot sentint-se orgullosos del que consideraven l’elit dels seus estudiants satisfets, i potser creient fins i tot que l’alienació de les masses els situava en un pla superior. Aquests professors poden tenir un gran valor per a l’acadèmia, però a nosaltres no ens fan el pes. Buscàvem gent que pogués fer demanar la lluna a partir del que uns altres podien veure com un reflex en un cove, que ajudassen constantment els seus estudiants a fer-ho molt millor del que ningú no s’esperava.

La nostra segona prova de foc es referia al que aprenien els estudiants. Això és delicat, perquè implica judicis sobre un munt de disciplines. Vam buscar proves que col·legues d’aquell àmbit o de àmbits molt propers considerassen els objectius d’aprenentatge importants i substancials. Tot i això, restàvem oberts a la possibilitat que alguns professors destacats desenvolupassen objectius d’aprenentatge força valuosos que ignorassen les fronteres de la disciplina i fins i tot, de vegades, ofenguessen alguns puristes d’aquesta disciplina –la professora de la facultat de medicina, per exemple, que integrava temes de desenvolupament personal i emocional en una classe bàsica de ciències, tot ajudant a redefinir l’estudi de la medicina. En realitat, molts dels professors força reeixits de l’estudi trencaven les definicions tradicionals dels cursos, tot convencent-nos que l’èxit en l’ajuda als estudiants a aprendre certes matèries bàsiques es beneficia de la predisposició del professor a reconèixer que l’aprenentatge humà és un procés complex. A més, vam haver de recórrer a un sentit profund de la importància de l’educació que paga la pena, que no provenia de cap disciplina en concret, sinó d’una àmplia tradició educativa que valora les arts liberals (incloses les ciències naturals), el pensament crític, la solució de problemes, la creativitat, la curiositat, que s’interessa pels temes ètics, i ensems l’amplitud i la profunditat del coneixement específic i de les diverses metodologies i estàndards de proves utilitzats per crear aquest coneixement.

En resum, vam incloure al nostre estudi només aquells professors que mostraven proves clares d’ajudar i encoratjar els seus estudiants a aprendre d’una manera que normalment es guanyaven l’elogi i el respecte tant dels col·legues de la seua disciplina com de la comunitat acadèmica en un sentit més ample. Però també vam mirar d’incloure-hi alguns educadors que treballaven en els marges de les normes establertes, tot definint la riquesa de l’aprenentatge de maneres noves i importants. També vam estudiar gent que tenia molt d’èxit en algunes classes i menys en unes altres. Per exemple, alguns professors assolien magnífics resultats en classes grans o petites, en cursos avançats o de principiants, però no en ambdós. Aquests casos ens permetien fer algunes comparacions entre el que funcionava i el que no.

Volíem estudiar professors que tenien una influència prolongada en els seus estudiants, però les proves van ser difícils d’obtenir, especialment en les primeres fases de la nostra investigació. Vam parlar amb alguns estudiants anys després que haguessen tingut un determinat professor i vam escoltar els seus testimoniatges sobre com les classes havien afectat les seues ments i havien influït en les seues vides. Tanmateix, no vam seguir sistemàticament els estudiants; ni ens vam basar només en aquelles entrevistes per decidir que algú mereixia atenció. En comptes d’això, vam buscar alguna cosa que ens digués més immediatament que l’impacte era durador. El concepte d’aprenents profunds, desenvolupat per primera vegada pels teòrics suecs als anys 70, ens va proveir d’indicacions sobre el terreny d’influència prolongada.³

Vam suposar que l’aprenentatge profund era probable que duràs, i per tant vam parar orella de ben a prop per trobar-ne proves en el llenguatge que feien servir els estudiants per descriure les seues experiències. Parlaven d’«aprendre la matèria» o de desenvolupar un enteniment, fent seu quelcom, «introduint-s’hi» i «traient-ne l’entrellat»? Ens van portar a classes en què els estudiants no parlaven de quantes coses havien de recordar, sinó de quant van arribar a aprendre (i en conseqüència ho recordaven). Alguns estudiants parlaven de cursos que «van transformar les seues vides», «van canviar-ho tot plegat», i fins i tot «es van entremetre en els seus caps». Vam buscar senyals que els estudiants desenvolupaven múltiples perspectives i la capacitat de pensar sobre el seu propi pensament; que intentaven comprendre idees per ells mateixos; que tractaven de raonar amb els conceptes i la informació que es trobaven, de fer servir àmpliament la matèria i de relacionar-ho amb l’experiència i l’aprenentatge previs. Pensaven en suposicions, proves i conclusions?

Considere’s, per exemple, dos grups de comentaris. L’un venia d’estudiants que ens havien dit que la classe «requeria força treball», que el professor els motivava per «fer-lo», i era meticulós i just, «tot cobrint», com ho va plantejar un estudiant, «tota la matèria que eixiria a l’examen» i «no sorprenent-nos mai amb problemes que no havíem vist». Els estudiants insistien en tenir èxit «en el curs» i feien grans elogis perquè el docent els ajudava a aconseguir aquesta meta. Tot i que aquests comentaris eren tots bastant favorables, no portaven necessàriament a l’aprenentatge profund. En canvi, el segon grup d’estudiants van parlar sobre com podien «relacionar ara un munt de coses» o «introduir-se» en els seus caps. Insistien que volien aprendre més, de vegades parlaven de canviar d’especialitat per estudiar amb determinat professor i semblaven atemorits i fascinats de tant com ignoraven. «Pensava que tot estava dat i beneït abans de fer aquest curs», va explicar un estudiant. «És una matèria força engrescadora». Parlaven de temes que el curs havia suscitat, de com van aprendre a pensar de manera diferent, de com el curs havia canviat les seues vides i del que pensaven fer amb el que havien après. Discutien amb facilitat sobre els raonaments que s’hi havien trobat, qüestionaven suposicions i distingien entre prova i conclusions. Els estudiants esmentaven llibres que tot seguit havien llegit perquè el curs havia suscitat el seu interès, projectes que havien emprès o canvis de plans. Parlant d’una classe de matemàtiques, un estudiant va explicar «no només ens ensenyava com resoldre el problema, sinó que ens ajudava a pensar-hi per tal que poguéssem ferho per nosaltres mateixos. Ara puc plantejar-me millor els problemes». En referència a una classe de història, aquesta reflexió es convertia en «no només memoritze matèria aquí. He de pensar en raonaments i proves». El segon grup de comentaris suggeria influències prolongades, mentre que el primer no ens en deia prou.

A mesura que la nostra enquesta es desenvolupava, va generar un enorme interès entre els col·legues, que sovint suggerien que consideràssem determinades persones. Tots els subjectes potencials es van incloure a prova en l’estudi mentre examinàvem els seus objectius d’aprenentatge i els seguíem de prop per aconseguir proves d’èxit en la fomentació de resultats significatius. De vegades, discretament, vam deixar de considerar-ne alguns, no perquè arribàssem a creure que eren professors ineficaços, sinó simplement perquè no teníem prou dades per saber-ho, en un sentit o en un altre. En aquest llibre, el meu objectiu no és fer saber a aquells col·legues que no van ser inclosos en l’estudi, sinó aprendre tant com siga possible dels professors amb més èxit. En conseqüència, encara que esmente els noms de molta gent que vam analitzar, no en proporcione una llista completa.

DIRIGIR L’ESTUDI

Una vegada havíem identificat els nostres subjectes, els vam estudiar. Alguns els vam observar a l’aula, al laboratori o al seminari; uns altres, els vam enregistrar en vídeo. Amb uns altres, totes dues coses. Vam tenir llargues converses amb molts dels professors i dels seus estudiants; vam examinar els materials del curs, inclosos els plans d’estudi, els exàmens, els fulls on s’expliquen les tasques i fins i tot alguns apunts de classes; vam tenir en consideració exemples de treballs d’estudiants; vam dirigir el que vam anomenar «anàlisis de grup petit», en què entrevistàvem classes senceres en petits grups; vam demanar a algunes persones que analitzassen i descrivissen les seues pràctiques i filosofies d’ensenyament amb reflexions més formals; i en alguns casos de fet ens hi vam as seure durant un curs sencer. Els mètodes de recollida i anàlisi van variar, però tots ells van sorgir a partir d’enfocaments habituals en història, anàlisi literària, periodisme d’investigació i antropologia. Les xerrades que vam escoltar, les entrevistes que vam dirigir, els materials de classe i la resta d’escrits que vam llegir i les notes que vam prendre mentre observàvem una classe van conformar els textos que a continuació vam escodrinyar (vegeu l’apèndix per a més detalls sobre l’estudi).

VALORACIONS DELS ESTUDIANTS

Abans de començar a fer un resum de les principals troballes del nostre estudi, hauríem de considerar un assumpte metodològic més: quin paper poden tenir les valoracions dels estudiants a l’hora d’ajudar a identificar l’ensenyament excepcional? Com van influir en les nostres decisions?

En les trobades amb membres del professorat acabats d’incorporar, he descobert que molts professors tenen un vague coneixement dels experiments del famós Doctor Fox, un coneixement suficientment confús per produir escepticisme pel que fa a qualsevol intent d’identificar i definir l’excel·lència en l’ensenyament. En aquell estudi, publicat per primera vegada als anys 70, tres investigadors van contractar un actor per fer una classe a un grup d’educadors. Li van donar instruccions perquè fes la seua exposició força expressiva i entretinguda, però perquè oferís poc contingut en una xerrada plena de confusions lògiques i repeticions. Els experimentadors van donar al seu «professor» un currículum vitae fals, completat amb una llista de publicacions, i li van dir Doctor Fox. Quan van demanar als assistents que avaluassen la classe, les puntuacions es van mostrar bastant favorables, i un dels qui havien respost fins i tot va afirmar haver llegit alguns treballs del Doctor Fox.⁴

Molts membres del professorat familiaritzats amb aquest experiment n’havien conclòs que les valoracions dels estudiants són inútils perquè les classes plenes de ximpleries poden «seduir» els estudiants si el professor és entretingut. Però en un examen més profund, l’estudi original del Doctor Fox tenia un greu defecte: feia les preguntes equivocades. Algunes de les preguntes simplement demanaven si l’actor feia el que se li havia dit que fes. Per exemple, se li havia dit que mostràs expressivitat i entusiasme i una de les preguntes de l’enquesta demanava «Semblava interessat en la seua matèria?»⁵ No és estrany que les valoracions fossen tan altes. Ni una sola de les vuit preguntes va demanar als membres de l’audiència si havien après alguna cosa –l’element que consideràvem tan crucial en el descobriment de l’ensenyament excel·lent. Els investigadors no van fer cap esforç per posar a prova els assistents pel que fa al coneixement que havien obtingut de les classes (tot i que els posteriors experiments amb el Doctor Fox sí que ho van fer), o ni tan sols per preguntar-los si creien que de fet havien après alguna cosa.

Molt menys coneguts i publicitats van ser els posteriors estudis que es van fer sobre el que es va anomenar «efecte Doctor Fox», en els quals s’assenyalaven aquells defectes metodològics de l’estudi original i s’extreien de les investigacions unes conclusions molt més conservadores. Dit això, el que podem aprendre dels experiments del Doctor Fox sobre la identificació de l’excel·lència en l’ensenyament sembla bastant magre. En el millor dels casos, ens poden ajudar a entendre quines preguntes s’haurien i no s’haurien de fer en els fulls de valoració dels estudiants. En comptes de preguntar si els professors eren expressius o feien servir una tècnica particular, hauríem de preguntar si ajudaven els estudiants a aprendre o estimulaven el seu interès per la matèria. En efecte, la investigació ha trobat correlacions força positives entre les valoracions dels estudiants i les valoracions externes de l’aprenentatge dels estudiants quan es fan servir aquestes preguntes.⁶ El que és més important, les valoracions dels estudiants poden, com va plantejar un observador, «informar de fins a quin punt s’ha arribat [educativament] als estudiants».⁷ Si volem saber si els estudiants pensen que alguna cosa els ha ajudat i els ha encoratjat a aprendre, quina millor manera de descobrir-ho que preguntar-los-ho. Pel que fa a l’expressivitat, Herbert Marsh, un investigador australià, i d’altres investigadors van descobrir en posteriors experiments del Doctor Fox que els estudiants normalment fan millor els exàmens després d’escoltar classes engrescadores que si n’escolten d’avorrides, però això no hauria de sorprendre ningú.⁸