Les grands enseignants sont-ils de pauvres érudits?

Les collèges et les universités doivent équilibrer de nombreux objectifs, et les universités de recherche en particulier aspirent à l'excellence dans l'enseignement et la recherche. Les administrateurs universitaires et les décideurs politiques souhaitent s'assurer que les universités privées et publiques soutenues par l'État fonctionnent à des niveaux élevés de qualité pédagogique et universitaire, mais à ce jour, nous savons peu de choses sur le fait de savoir si l'excellence scientifique a un coût en termes de qualité de l'enseignement, ou vice versa. .
Nous utilisons des données appariées uniques d'étudiants et de professeurs de la Northwestern University, une université de recherche de taille moyenne qui est l'une des 26 universités privées parmi les 62 membres de l'Association of American Universities, pour étudier la relation entre l'enseignement et la qualité savante. En utilisant l'ensemble de la population de tous les étudiants de première année inscrits au Northwestern entre l'automne 2001 et l'automne 2008 (plus de 15 000 étudiants au total), nous générons empiriquement deux nouvelles mesures de la qualité de l'enseignement - l'une un indicateur d'inspiration (le taux de conversion »des non - majeures à majeures) et l'autre un indicateur de l'apprentissage en profondeur (le degré auquel un professeur ajoute une valeur durable à l'apprentissage des élèves qui se reflète dans la réussite dans les classes futures). Nous étudions également deux mesures de la qualité de la recherche - l'une basée sur une mesure de l'importance relative de la recherche d'un chercheur dans le domaine, et l'autre une mesure de l'importance nationale ou internationale comme en témoignent les principales récompenses.
Nous constatons que, quelle que soit notre mesure de la qualité de l'enseignement ou notre mesure de la qualité de la recherche employée, il n'y a pas de relation entre la qualité de l'enseignement et la qualité de la recherche des professeurs permanents du Nord-Ouest. Nos estimations sont des zéros précis », indiquant qu'il est peu probable qu'une mauvaise mesure de la qualité de l'enseignement ou de la recherche explique l'absence de relation entre les deux. Par conséquent, alors que Northwestern occupe certes un espace raréfié dans la hiérarchie des universités américaines, nos résultats suggèrent qu'un excellent enseignement et une excellente recherche ne sont pas des substituts (même s'ils ne sont apparemment pas complémentaires).
Les collèges et les universités ont divers objectifs de production. Dans une université de recherche, la production universitaire est essentielle, mais il en va de même de l'enseignement réussi aux niveaux du premier cycle, des écoles professionnelles et des cycles supérieurs. Certains membres du corps professoral sont fabuleux dans les deux tâches essentielles. Ils sont vénérés par les étudiants de premier cycle pour leurs capacités en classe, même lorsqu'ils enseignent au niveau d'introduction le plus élémentaire. En même temps, ils sont largement reconnus par leurs pairs pour leur excellence en recherche. D'un autre côté, certains professeurs sont beaucoup plus compétents en édition qu'en enseignement, tandis que d'autres excellent principalement en classe. D'autres, malheureusement, luttent contre les deux.
Étant donné l'importance de ces différents résultats souhaités pour les administrateurs universitaires et les décideurs souhaitant garantir que leurs universités privées et publiques soutenues par l'État fonctionnent à un niveau élevé de qualité pédagogique et universitaire, on pourrait penser que les doyens, les prévôts et les présidents en sauraient pas mal. sur la production à la fois de recherche de pointe et d'enseignement de premier ordre, et, en particulier, ils sauraient si les professeurs qui sont des superstars dans la classe de premier cycle paient un prix en termes de reconnaissance scientifique. i Connaître la réponse à cette question pourrait aider les institutions à mieux allouer leurs maigres ressources.
Malheureusement, ce type d'analyse est entravé par deux problèmes: la difficulté de mesurer l'efficacité de l'enseignement et la difficulté de comparer le succès de la recherche dans un large éventail de domaines universitaires. Une longue littérature ii sur la relation entre l'excellence dans l'enseignement et la recherche couvrant quatre décennies (y compris les articles publiés récemment iii) examine diverses mesures de chacun de ces attributs professoraux. Les études antérieures mesurent l'excellence de la recherche en fonction du nombre de publications, des subventions accordées, du nombre de citations, de l'évaluation par les pairs / directeurs de département, du temps consacré aux activités de recherche, de l'adhésion de professeurs aux sociétés de recherche universitaire et des prix pour la recherche. Bien que certaines de ces mesures soient des indicateurs plausibles de la qualité de la recherche, d'autres sont assez étroites ou ne favorisent pas la comparabilité entre les disciplines. Pendant ce temps, les études dans la littérature existante ont été encore plus gênées par les limites de la mesure de la qualité de l'enseignement. Les analyses précédentes de la relation enseignement-recherche ont utilisé les évaluations des cours des étudiants, les évaluations par les pairs, le temps consacré aux activités d'enseignement et la nomination ou la réception d'une bourse d'enseignement comme mesures de la qualité de l'enseignement iv, mais ces mesures ont des limites importantes. Les évaluations des étudiants reflètent souvent la popularité ou les normes de notation, plutôt que la véritable qualité de l'enseignement, et présentent des biais de genre, raciaux et ethniques, v tandis que les évaluations par les pairs sont soumises à des effets de halo »résultant de la connaissance par les évaluateurs du dossier de recherche d'un membre du corps professoral. vi Ce qu'il faut, ce sont des mesures de l'efficacité de l'enseignement qui ne soient pas soumises à ces types de biais.
Professeur d'économie et président - Northwestern University
Dans ce rapport, nous proposons deux mesures des résultats de l'enseignement et deux indicateurs de l'importance de la recherche afin d'évaluer directement la relation entre l'enseignement et l'excellence en recherche. Nos mesures de l'importance de la recherche sont similaires à celles utilisées dans les travaux antérieurs, mais avec quelques améliorations pour nous permettre de comparer les différentes disciplines. Nous tirons empiriquement nos mesures de l'excellence de l'enseignement à partir de données sur le suivi des cours des étudiants et les performances futures. L'une des mesures de la qualité de l'enseignement est un indicateur d'inspiration tandis que l'autre est un indicateur d'apprentissage profond.
Nous étudions la qualité de l'enseignement et de la recherche des professeurs titulaires à la Northwestern University, une université de recherche de taille moyenne qui est l'une des 26 universités privées parmi les 62 membres de l'Association of American Universities. Nous construisons nos mesures d'enseignement en utilisant les données du registraire sur tous les étudiants de première année de l'Université Northwestern qui sont entrés entre l'automne 2001 et l'automne 2008, un total de 15662 étudiants, et sur la faculté qui les a enseignés pendant leur premier trimestre à Northwestern. Dans un article récent, nous documentons que les cours suivis par les étudiants au cours de cette session semblaient être essentiellement aléatoires en ce qui concerne les mesures de la qualité du corps professoral, fournissant des indicateurs de la qualité de l'enseignement qui ne sont pas affectés par la sélection non aléatoire des étudiants. vii

Nous nous concentrons ici uniquement sur les 170 membres permanents du corps professoral qui ont enseigné au moins 20 étudiants du premier trimestre dans les huit cohortes. Nous limitons nos analyses à celles ayant 20 observations ou plus d'élèves du premier trimestre afin de réduire la probabilité que les valeurs aberrantes influencent nos mesures de la qualité de l'enseignement. viii Nous nous concentrons sur les membres permanents du corps professoral parce qu'ils ont eu plus de temps pour établir les antécédents d'enseignement et de recherche nécessaires pour effectuer cette analyse, et parce qu'ils ont déjà atteint la barre supérieure de l'enseignement, de la recherche et des services nécessaires pour la permanence dans un leader américain université de recherche.
Nous décrivons la première de nos mesures d'enseignement en détail dans notre article cité ci-dessus. ix Nous nous appuyons sur les travaux d'autres chercheurs x pour examiner la probabilité de suivre des cours supplémentaires dans une matière comme mesure de l'excellence de l'enseignement - plus l'élève est susceptible de poursuivre ses études dans une discipline particulière, mieux on pense que l'enseignant a été. Nous approfondissons ensuite cette approche en développant notre propre mesure objective - l'écart de la note reçue par un étudiant dans les cours de suivi dans cette matière. Un enseignant de premier cycle qui réussit, disons, en biologie introductive, incite non seulement ses étudiants à suivre des cours de biologie supplémentaires, mais les conduit à faire de manière inattendue de bons résultats dans ces classes supplémentaires (sur la base de ce que nous aurions prédit sur la base de leurs résultats aux tests normalisés , autres notes, normes de notation dans ce domaine, etc.) Dans notre article précédent, nous exposons les techniques statistiques xi utilisées pour contrôler les impacts des cours et des étudiants autres que celles liées directement à l'efficacité pédagogique du professeur d'origine. D'autres chercheurs ont utilisé des approches similaires pour mesurer la qualité des instructeurs à l'aide des performances des cours de suivi. xii
Il s'agit d'une mesure imparfaite de la réussite de l'enseignement. Un enseignant particulièrement pauvre peut amener les élèves à abandonner complètement cette matière - par conséquent, nous n'aurions aucune information sur la façon dont leurs élèves se seraient débrouillés dans les cours ultérieurs. De plus, notre ensemble de données est axé sur la réussite dans l'enseignement des cours ouverts aux étudiants de première année du premier trimestre, dont la plupart sont des cours d'introduction. Dans environ un cinquième des cas, il s'agit de classes de niveau intermédiaire ou supérieur suivies par des étudiants ayant une expérience antérieure dans le domaine, comme celle acquise dans les classes AP au lycée. xiii Enfin, et plus important encore, certains professeurs semblent être de piètres enseignants à notre mesure, mais font un meilleur enseignement des séminaires pour les étudiants de premier cycle ou les cycles supérieurs. L'enseignement ne se limite certainement pas à ce qui se déroule dans une salle de classe remplie d'étudiants de première année.
Notre deuxième indicateur de l'efficacité de l'enseignement utilise le même ensemble de données mais se concentre sur les majeures plutôt que sur les notes. Les enseignants convaincants incitent vraisemblablement les élèves à se spécialiser dans leurs disciplines, que ces élèves soient prédisposés à le faire ou non. Un professeur de chimie talentueux dans un cours d'introduction peut diriger une majeure en chimie déclarée pour garder cette majeure; mais encore plus impressionnant, ce professeur peut convaincre un étudiant non déclaré de se spécialiser en chimie, ou conduire un étudiant spécialisé en physique ou en économie à devenir un majeur en chimie. La capacité de convertir des majors reflète vraisemblablement une dimension importante de l'excellence en enseignement.
En substance, donc, nos deux mesures de la qualité de l'enseignement reflètent, dans le premier cas, la valeur ajoutée (ou l'apprentissage en profondeur ») qui est transférable aux classes suivantes dans la matière, et, dans le second cas, l'inspiration, comme l'indique la capacité pour convertir les étudiants à un sujet qu'ils n'avaient pas prévu d'étudier en profondeur auparavant. Fait intéressant, les professeurs qui réussissent le mieux à inciter les étudiants à devenir des majors dans leur matière ne sont plus distingués pour faciliter l'apprentissage en profondeur »: la corrélation entre les deux mesures de la qualité de l'enseignement est pratiquement nulle (le coefficient de corrélation est trivial, à - 0,025), ce qui suggère que ces deux dimensions de la qualité de l'enseignement sont essentiellement indépendantes. Autrement dit, les enseignants charismatiques qui laissent des dizaines de majors dans leur sillage, ne semblent ni meilleurs ni pires à enseigner le matériel que leurs homologues moins inspirants; les enseignants qui sont exceptionnels pour transmettre le matériel de cours ne sont pas plus susceptibles que les autres d'inspirer les élèves à suivre plus de cours dans le domaine.
Ces mesures distinctes de l'excellence en enseignement nous permettent de déterminer empiriquement si les professeurs qui réussissent particulièrement bien en classe paient un prix en termes de bourses. Mais d'abord, un mot sur nos mesures de bourses. Si la mesure de l'excellence universitaire est un peu moins litigieuse que dans le cas de l'évaluation de l'efficacité de l'enseignement, elle n'en est pas moins lourde. Dans certains domaines, des livres bien reçus témoignent du succès, dans d'autres des performances, et dans d'autres, des articles très cités ou l'octroi de subventions. Comment reconnaître une érudition exceptionnelle en chimie et théâtre, ingénierie et musique, économie et anglais, mathématiques et anthropologie?
Nous utilisons deux mesures de bourses très différentes. Heureusement, pour chaque année depuis 1988, Northwestern a eu un comité de faculté composé de professeurs éminents d'un large éventail de disciplines dont la tâche a été d'examiner les réalisations savantes de la faculté au cours de l'année universitaire précédente, et de sélectionner un sous-ensemble à honorer pour leur excellence en recherche lors d'un dîner annuel. Les raisons d'être honoré incluent la reconnaissance par les principales organisations savantes dans leurs domaines tels que leur élection à la National Academy of Sciences, Engineering or Medicine, ou à l'American Academy of Arts and Sciences, la réception de bourses prestigieuses telles que celles accordées par le MacArthur. et les fondations Guggenheim, remportant d'importants prix de recherche décernés par les meilleures associations savantes et des réalisations comparables. Grâce à cette mesure de l'importance de la recherche, 57% des 170 professeurs titulaires de notre ensemble de données ont été reconnus au moins une fois comme un chercheur extraordinaire.
Comme mesure alternative, nous avons suivi une approche plus traditionnelle et construit pour chaque membre du corps professoral un indicateur intra-départemental de l'influence du travail universitaire de cette personne. Plus précisément, nous calculons l'indice h d'un universitaire - un indicateur qui mesure simultanément la fréquence des publications et l'influence scientifique de ces publications, capturant ainsi des aspects à la fois de la productivité d'un chercheur et de l'importance du travail de cette personne. Nous ajustons ensuite cet indice h afin de comparer chaque chercheur à ses propres collègues de Northwestern. Nous procédons à cet ajustement au sein du département du Nord-Ouest pour tenir compte du fait que les normes de publication et de citation varient considérablement d'une discipline à l'autre et parce que certains départements du Nord-Ouest sont plus éminents que d'autres. Néanmoins, il existe une variation très importante au sein du département des indices h des professeurs titulaires.
Ces deux mesures de la qualité de la recherche sont beaucoup plus fortement corrélées que nos deux mesures de la réussite pédagogique: les membres du corps professoral dont la recherche a été reconnue par la moyenne universitaire dans le 49e centile des indices h ajustés sur le terrain des professeurs titulaires, tandis que ceux qui ont n'ont pas été reconnus pour leur moyenne de recherche dans le 36e centile des indices h ajustés sur le terrain des professeurs titulaires.