﻿<?xml version="1.0" encoding="UTF-8"?>
<rss version="2.0"
	xmlns:content="http://purl.org/rss/1.0/modules/content/"
	xmlns:wfw="http://wellformedweb.org/CommentAPI/"
	xmlns:dc="http://purl.org/dc/elements/1.1/"
	xmlns:atom="http://www.w3.org/2005/Atom"
	xmlns:sy="http://purl.org/rss/1.0/modules/syndication/"
	xmlns:slash="http://purl.org/rss/1.0/modules/slash/"
	>

<channel>
	<title>Indiscipline ! &#187; évaluation</title>
	<atom:link href="http://indiscipline.fr/fr/tag/evaluation/feed/" rel="self" type="application/rss+xml" />
	<link>http://indiscipline.fr</link>
	<description>Recherche, université, culture, institutions et critique sociale</description>
	<lastBuildDate>Fri, 30 Jul 2010 06:54:10 +0000</lastBuildDate>
	<language>en</language>
	<sy:updatePeriod>hourly</sy:updatePeriod>
	<sy:updateFrequency>1</sy:updateFrequency>
	<generator>http://wordpress.org/?v=3.0.1</generator>
		<item>
		<title>Les évaluateurs de l’AERES sont-ils des « pairs » ?</title>
		<link>http://indiscipline.fr/fr/les-evaluateurs-de-l%e2%80%99aeres-sont-ils-des-%c2%ab-pairs-%c2%bb/</link>
		<comments>http://indiscipline.fr/fr/les-evaluateurs-de-l%e2%80%99aeres-sont-ils-des-%c2%ab-pairs-%c2%bb/#comments</comments>
		<pubDate>Wed, 08 Apr 2009 11:26:34 +0000</pubDate>
		<dc:creator>micbarth</dc:creator>
				<category><![CDATA[Critiques]]></category>
		<category><![CDATA[Positions]]></category>
		<category><![CDATA[aers]]></category>
		<category><![CDATA[évaluation]]></category>
		<category><![CDATA[recherche]]></category>

		<guid isPermaLink="false">http://indiscipline.fr/fr/?p=656</guid>
		<description><![CDATA[Réflexions sur le débat à l’EHESS sur le thème « L’AERES et après ? » Par Michel Barthélémy, Sociologue, Cnrs Le premier des « Grands Débats de l’EHESS » à s’inscrire dans le prolongement de l’opération « Changeons le programme » s’est tenu le 25 mars 2009. Il a présenté un ensemble de témoignages, de [...]]]></description>
			<content:encoded><![CDATA[<p><strong>Réflexions sur le débat à l’EHESS sur le thème « L’AERES et après ? »</strong></p>
<p><strong><em>Par Michel Barthélémy, Sociologue, Cnrs</em></strong></p>
<p style="text-align: justify;">Le premier des « Grands Débats de l’EHESS » à s’inscrire dans le prolongement de l’opération « Changeons le programme » s’est tenu le 25 mars 2009. Il a présenté un ensemble de témoignages, de réflexions et d’analyses présentés quasiment à chaud sur la dernière vague en voie d’achèvement de l’évaluation des équipes de recherche par les comités de visite de l’AERES (Agence d’Evaluation de la Recherche et de l’Enseignement Supérieur) (1). Ces interventions étaient le fait d’universitaires dont l’unité avait été l’objet de l’une de ces visites.</p>
<p style="text-align: justify;">Le présent texte ne prétend pas restituer en détail les différents points du débat (2). Il est plus limitativement consacré à discuter l’affirmation courante, et du reste réitérée par le représentant de l’AERES qui participait au débat, qui tient que l’évaluation à laquelle concourent ces comités est le fait de « pairs ». En ajoutant que le choix offert était entre cette configuration là ou bien le recours à un cabinet de consultants externes ou encore à des administratifs – « comme en Allemagne », a-t-il précisé.</p>
<p style="text-align: justify;">D’un point de vue formel, il est indéniable que les participants à ces comités de visite sont composés de membres de la communauté universitaire. Un certain nombre d’entre eux sont des universitaires étrangers. A ce titre, ils peuvent se réclamer légitimement de ce statut de « pairs » vis-à-vis des membres des unités de recherche qu’ils viennent évaluer (3). Toutefois, une bonne partie du débat a avancé des arguments rendant cette identité pour le moins problématique. Le point faisant problème était précisément la signification qu’il convient d’accorder au terme évaluation en comparant les anciennes aux nouvelles pratiques qui se mettent en place.</p>
<p style="text-align: justify;">Si l’on reprend l’affirmation du représentant de l’AERES, et qu’on la compare à l’intervention de N. Dodier, on s’aperçoit que les deux formes d’évaluation qui se font face sont très différentes l’une de l’autre dans leur esprit comme dans leur procédure. L’évaluation en vigueur jusque là, dans les commissions des organismes de recherche, notamment, est le fait de petits groupes de chercheurs et d’enseignants-chercheurs, dont une partie sont élus par leurs pairs, pour une durée de quelques années et qui mettent en place des règles d’évaluation ad hoc. Ils le font en fonction de critères qu’ils dégagent de l’intérieur même de leur comité et pour les fins pratiques de la tâche qui leur est assignée, soit l’évaluation d’équipes, projets de colloque ou d’édition, chercheurs, etc. La mise en place des critères jugés pertinents donc objectifs, c&#8217;est à dire acceptables par les participants comme fondement adéquat de leur travail d’évaluation, et reconnaissable sous ce jour par les instances supérieures de même que, potentiellement, par l’ensemble des membres de la communauté scientifique à laquelle ils appartiennent, suppose de faire activement partie de ces commissions et de prendre part à leur définition collective. En ce sens, la commission est à une double place d’observateur et de juge de la vie de la communauté dont elle est appelée à se prononcer sur les réalisations les plus récentes de ses membres ainsi que sur les activités projetées. Elle évalue leur intérêt et portée scientifique, sur la base de critères localement établis, internes à la profession, à son état et ses pratiques disciplinaires du moment, à la nature et à la teneur des dossiers à traiter ici-et-maintenant, en mobilisant la compétence et l’expertise variées de ses membres qui sont appelés à parvenir à une position commune sur les principes leur permettant de traiter les dossiers soumis à l’appréciation de la commission. C’est une version éprouvée de la parité et de la collégialité. Perfectible, certes, mais effective.</p>
<p><span id="more-656"></span></p>
<p style="text-align: justify;">Qu’en est-il maintenant de la démarche de l’AERES ? Les propos du représentant de l’AERES, cités plus haut, apportent un éclairage précieux sur ce point. La notion de « pairs » est présentée comme une protection, ou du moins comme une situation préférable à celle d’une évaluation réalisée par des « non-pairs ». Cependant, l’idée même que cette option pourrait être le cas, affaiblit gravement la pertinence de la défense que représenterait le fait qu’elle soit réalisée par des collègues, à partir du moment où il est explicitement admis que des membres de catégories étrangères au domaine d’activités examiné et à ses spécificités, pourraient tout aussi bien faire le (même) travail. Ceci conduit à penser que l’esprit et la procédure de l’évaluation dans ce nouveau système ont d’ores et déjà rompu avec la pratique collégiale qui existait jusque là. Ceci au sens où cette dernière exigeait que les évaluateurs soient des membres compétents du milieu sur lequel portait leur activité d’évaluation. Dans cette approche il n’était pas concevable de faire appel à des praticiens non informés des aspects distinctifs qui constituent le socle des activités des membres de la communauté universitaire. Ce n’est désormais plus le cas. On pourrait avancer que les « collègues » sont ici instrumentalisés et transformés en Cheval de Troie d’un ensemble de procédures initialement conçues pour le secteur privé, issues de la démarche qualité, et que les « pairs » évaluateurs ont pour mission première d’acclimater en douceur au monde de la recherche et de l’enseignement supérieur, sans en avoir discuté auparavant avec les principaux intéressés. Or, pour que les procédures employées puissent être mises en œuvre par des familiers du milieu, des « insiders », comme par des étrangers à celui-ci, cela implique que l’essentiel de la procédure suivie puisse faire l’économie d’une adéquation au milieu local visé par ses outils et son entreprise d’évaluation, sans nuire à son efficacité. Ce qui se paye par une externalité du dispositif et de ses catégories aux milieux et pratiques habituelles et effectives de la communauté visée, laquelle se trouve fortement invitée à y souscrire, souvent contre son gré,  si l’on en juge par les nombreuses réserves que suscitent les méthodes de la nouvelle agence au sein de la communauté scientifique (4). En bref, les universitaires évaluateurs mettent déjà en œuvre un cadre d’évaluation des activités scientifiques qui ne doit pas grand-chose à ce que réclamerait une connaissance interne du milieu examiné. Ils font ainsi le travail de consultants externes, comme ont pu le constater les membres des unités visitées, à la pauvreté des sujets de questionnement des évaluateurs portant plutôt sur des points de gestion ou des aspects périphériques par rapport à ce qui fait la particularité et la réalité du travail scientifique. Ces thèmes ne sont pas pour autant anodins. En effet, une manière de parvenir à imposer cette démarche en surmontant au passage le manque d’envie de la part des évalués de coopérer avec  les évaluateurs et leurs manières de voir et de faire, est précisément de prendre parmi les critères d’évaluation, p.e., l’usage que les évalués font, dans leur travail, d’autres instances tout aussi récentes et mal considérées que peut l’être l’AERES. Il en va ainsi de l’ANR (Agence Nationale de la Recherche) dont les dotations augmentent en même temps que les crédits de base des laboratoires en provenance des organismes de recherche, le Cnrs en premier lieu, diminuent. Si un indicateur du critère de qualité et d’attractivité d’une équipe de recherche est lié au nombre de contrats obtenus en particulier auprès de l’ANR, alors il va de soi que la recherche de tels crédits pour des travaux à trois voire quatre ans maximum, deviendra une nécessité. Ce qui conduira à faire entrer progressivement dans le paysage de la recherche cette instance controversée du fait de la captation des crédits de recherche qu’elle induit et de la politique de pilotage de la recherche orientée vers des thèmes finalisés qu’elle réalise (5). Un résultat qui se fait au détriment de la recherche fondamentale, laquelle obéit à une temporalité plus longue, sans pouvoir toujours arguer de résultats clairement anticipables longtemps à l’avance (6). Il a du reste été rappelé la proposition faite par les Etats Généraux de la Recherche de 2004 en matière de structure d’évaluation. Ceux-ci prônaient la création d’un Haut Conseil de la Science, responsable des opérations d’évaluation des laboratoires et des personnes. Une instance collégiale composée pour partie d’élus et pour partie de membres nommés et faisant le tampon entre le monde de la recherche et le pouvoir.</p>
<p style="text-align: justify;">Pour conclure ces quelques remarques, je sortirai du cadre strict du débat pour proposer une réponse à la question initiale, celle de savoir si les évaluateurs sont des pairs de ceux qu’ils évaluent. Pour cela, il semble tout d’abord nécessaire de distinguer entre, d’une part, le statut professionnel des personnes impliquées, effectivement similaire, ainsi que nous l’avons dit,  et, de l’autre, l’activité d’évaluation conduite sous les auspices d’un modèle déployant des méthodes et procédures non spécifiques au milieu étudié. Par son extériorité même, ce dispositif d’évaluation investit le monde vécu de l’activité scientifique et modifie l’appréhension des pratiques de recherche et des modalités de son jugement. Il greffe sur des aspects effectifs de cette pratique des indicateurs arbitraires. En effet, il isole en les décontextualisant des éléments effectifs de la pratique du reste de celle-ci en leur faisant jouer le rôle de traits pertinents, non pas directement de l’activité de recherche concrète, mais en qualité d’éléments judicieusement choisis pour la constitution de son modèle. Ceci est réalisé en vue d’objectiver une production de recherche exprimée de manière quantitative et appuyée sur des outils quasi-automatisés à force connotation normative, permettant de décerner bons et mauvais points. Le tout sert à mesurer les « qualités » respectives des établissements, des équipes, et des personnes concourant à cette activité, ainsi qu’à faire des comparaisons entre pays (7). Au final, ce dispositif livre une image de la recherche sous les traits d’une activité banalisée qui soit compatible avec une description managériale et comptable de ses « outputs ». Elle peut être intégralement réduite à l’emploi d’un certain nombre de critères, d’indicateurs et d’une batterie de chiffres. Cette méthode a le défaut de sa qualité : sa (trop grande) universalité d’emploi. En d’autres termes, sa transversalité implique de pouvoir la référer à un niveau supérieur de synthèse, qui est, a minima, celui de l’Etat gestionnaire et de ses différents moyens et secteurs d’action.</p>
<p style="text-align: justify;">En effet, les mêmes « réformes » se retrouvent à l’œuvre dans d’autres organismes de recherche que le Cnrs (l’Inserm, par exemple) et dans d’autres secteurs de la fonction publique (outre l’éducation, la santé, notamment), et avec les mêmes objectifs : donner aux instances dirigeantes les moyens de contrôler et piloter l’activité de leurs établissements à l’aide notamment d’un système d’information alimentant des tableaux de bord. Par conséquent, leur extrême simplicité peut être vue, par leurs concepteurs et promoteurs, comme une force en leur donnant des outils pour mener une politique volontaire, réactive et, comme on le dit maintenant, « proactive ». Dans chacun de ces cas la collégialité, telle qu’elle se matérialise dans l’existence d’instances de concertation, fait les frais de la « réforme » (8).</p>
<p style="text-align: justify;">A cet égard, et dans le cadre précis de leur activité d’évaluation effectuée selon des normes empruntées à la démarche qualité issue du secteur privé, et gardant de celui-ci son orientation essentiellement budgétaire et quantitative des activités humaines appréhendées sous l’angle de la rentabilité et de la performance, les évaluateurs universitaires n’agissent pas en qualité de « pairs ». Il en est ainsi si l’on considère que leur mode d’action, leur processus de décision ne sont pas ceux traditionnellement en vigueur dans le milieu qui est le leur et où, comme indiqué précédemment, ils pourraient très bien être remplacés dans cette tâche par des évaluateurs professionnels étrangers au milieu en question.  Il y a là la source d’une ambigüité qui appelle un dépassement, d’une manière ou d’une autre.  En particulier, si dans le cadre strict de ces pratiques ces collègues ne sont pas des pairs – les membres de l’AERES ne sont pas élus, mais nommés ou cooptés, ils disposent d’un pouvoir unilatéral sur ceux qu’ils évaluent, leurs référents diffèrent profondément dans leur contenu et leur mode d’application de ceux des commissions fondées sur la collégialité, un principe central du mode de fonctionnement de cette communauté –, il se peut qu’ils représentent l’avant-garde en quelque sorte du visage futur de la communauté de l’enseignement supérieur et de la recherche que la mise en place de ces nouveaux dispositifs contribuera à façonner. Ce peut être le cas si l’adhésion à cette nouvelle approche se diffuse sans entrave. Qu’est-ce que la recherche et la société ont à gagner à une telle concentration des pouvoirs dans les mains d’une poignée d’individus ? Mystère.</p>
<p style="text-align: justify;"><strong>Notes</strong></p>
<p style="text-align: justify;">(1) Cette agence possède un site particulièrement bien fourni en informations sur sa composition et ses missions. Cf. <a href="http://www.aeres-evaluation.fr/">http://www.aeres-evaluation.fr/</a></p>
<p style="text-align: justify;">(2) D’autant moins que Clémence Holleville du journal en ligne Médiapart en a présenté une synthèse. Cf. http://www.sauvonsluniversite.com/spip.php?article2265, cependant que l’intervention de Nicolas Dodier, sur laquelle je m’appuie plus particulièrement, est consultable (fichier audio) ici : <a href="http://www.slru.ehess.org/index.php?post/2009/03/28/un-nouveau-regime-d-objectivite">http://www.slru.ehess.org/index.php?post/2009/03/28/un-nouveau-regime-d-objectivite</a></p>
<p style="text-align: justify;">(3) Eux-mêmes sont membres d’unités de recherche qui sont ou seront évaluées par d’autres selon les mêmes principes et méthodes.</p>
<p style="text-align: justify;">(4) On pourra se reporter notamment au texte de Sylvain Piron sur la différence entre évaluation gestionnaire et scientifique : <a href="http://evaluation.hypotheses.org/374">http://evaluation.hypotheses.org/374</a></p>
<p style="text-align: justify;">(5) La part des programmes blancs étant jugée insuffisante.</p>
<p style="text-align: justify;">(6) Un autre problème, grave pour l’avenir de la recherche et de l’enseignement supérieur, est l’emploi des jeunes chercheurs, condamnés par la réduction des postes statutaires à travailler sur des contrats précaires de faible durée tels que ceux que propose l’ANR.</p>
<p style="text-align: justify;">(7) Sur ce dernier point, les outils statistiques utilisés inconsidérément réservent de mauvaises surprises en rendant équivalent ce qui ne l’est pas. Cf. à cet égard le texte de Jean François Méla [<a href="http://jfmela.free.fr/jfmblog/?p=125#more-125">http://jfmela.free.fr/jfmblog/?p=125#more-125</a>] sur les comparaisons entre les systèmes de recherche britanniques et français, où les données chiffrées négligent le fait que ce qu’elles mesurent n’est pas homogène, les différences structurelles et de pratiques d’un pays à l’autre n’étant pas prises en compte.</p>
<p style="text-align: justify;">(8) A ma connaissance, par exemple, la batterie d’indicateurs retenus pour évaluer la « bonne gouvernance » des équipes de recherche, notamment, ne comporte pas d’éléments permettant d’appréhender si les règles de fonctionnement des unités sont bien respectées (existence d’un règlement intérieur, de structures de concertation internes : conseil de laboratoire, assemblées générales, etc.) si la répartition des dotations budgétaires sont décidées collégialement ou pas, si les directeurs-trices sont imposé(e)s de l’extérieur ou sont issu(e)s des rangs des membres de l’équipe, si les directions n’excèdent pas le nombre limite de mandats autorisés pour permettre un renouvellement des personnes et des idées, etc.</p>
]]></content:encoded>
			<wfw:commentRss>http://indiscipline.fr/fr/les-evaluateurs-de-l%e2%80%99aeres-sont-ils-des-%c2%ab-pairs-%c2%bb/feed/</wfw:commentRss>
		<slash:comments>1</slash:comments>
		</item>
		<item>
		<title>L’évaluation de la recherche et des universitaires : quelques réponses à la désinformation gouvernementale et aux idées de sens commun</title>
		<link>http://indiscipline.fr/fr/evaluation-de-la-recherche-et-des-universitaires-quelques-reponses-a-la-desinformation-gouvernementale-et-aux-idees-de-sens-commun/</link>
		<comments>http://indiscipline.fr/fr/evaluation-de-la-recherche-et-des-universitaires-quelques-reponses-a-la-desinformation-gouvernementale-et-aux-idees-de-sens-commun/#comments</comments>
		<pubDate>Tue, 03 Feb 2009 11:08:30 +0000</pubDate>
		<dc:creator>Igor Babou</dc:creator>
				<category><![CDATA[Critiques]]></category>
		<category><![CDATA[évaluation]]></category>
		<category><![CDATA[recherche]]></category>
		<category><![CDATA[université]]></category>

		<guid isPermaLink="false">http://indiscipline.fr/?p=76</guid>
		<description><![CDATA[S’appuyant sur les mensonges propagés par les tutelles gouvernementales, une vague de critique de la sinécure universitaire enfle de blogs en forums : les universitaires et les chercheurs &#8211; quel scandale Mme Michu ! – ne seraient pas évalués ! On nous cache des choses, et que fait-on de nos impôts, je vous l’demande ? [...]]]></description>
			<content:encoded><![CDATA[<p>S’appuyant sur les mensonges propagés par les tutelles gouvernementales, une vague de critique de la sinécure universitaire enfle de blogs en forums : les universitaires et les chercheurs &#8211; quel scandale Mme Michu ! – ne seraient pas évalués ! On nous cache des choses, et que fait-on de nos impôts, je vous l’demande ?</p>
<p>Contre cette désinformation, et contre les préjugés et autres idées fausses qui circulent en ce moment, voici une mise au point rappelant quelques données de base sur l’évaluation de la recherche et de l’enseignement supérieur. Car il est faux, archi-faux, de dire que la recherche ne serait pas évaluée : elle l’est en permanence.</p>
<p>Voilà, schématiquement, à quoi ressemble le parcours typique d’un universitaire :</p>
<p><img class="alignright size-medium wp-image-375" style="margin: 5px;" title="escalier-livres" src="http://indiscipline.fr/wp-content/uploads/2009/02/escalier-livres-280x300.jpg" alt="escalier-livres" width="252" height="270" />D’abord, il y a la formation initiale : de la licence au Master 2. A chaque étape, il s’agit d’une formation à la recherche par la recherche. Du moins, en ce qui concerne les formations que je dirige, et qui sont orientées vers les professions de la recherche. Ensuite, vous êtes admis en thèse, sur la base d’un projet, généralement définit dans votre Master 2. C’est une commission qui valide cette inscription : elle ne se fait pas sur la seule fantaisie du doctorant et de son directeur de thèse. Ensuite, vous menez des travaux de recherche durant 3 à 6 ans, voire plus parfois en SHS. Chaque année vous devez fournir un dossier pour demander, à une commission et à votre directeur de thèse, une réinscription. Enfin, vous arrivez à la fin de ce premier parcours, et si vous vous estimez capable de soutenir votre thèse, vous en demandez l’autorisation à votre directeur de thèse. Celui ci vous dit oui ou non, mais s’il vous dit oui, il doit avant tout le signaler au directeur de l’École Doctorale qui contrôle la légalité formelle de la procédure, qui doit être publique.</p>
<p>Je passe les détails, mais avant la constitution d’un jury, on envoie votre document à deux rapporteurs, qui sont spécialistes du domaine que vous traitez, et qui évaluent votre dossier (publications, formation, participation à la vie de la communauté, responsabilités) et votre thèse. Ces deux rapporteurs écrivent un rapport argumenté qui autorise, ou pas, la soutenance et qui sert d’argumentation préalable pour le doctorant et son directeur, ainsi que pour le président du jury.</p>
<p><span id="more-76"></span></p>
<p><img class="alignleft size-medium wp-image-377" style="margin: 5px;" title="soutenance" src="http://indiscipline.fr/wp-content/uploads/2009/02/soutenance-299x224.jpg" alt="soutenance" width="299" height="224" />Le jour de la thèse arrive, et on a constitué un jury de spécialistes reconnus du domaine, entre 4 et 6 personnes en général, devant qui vous devez plancher un temps variable selon les disciplines, en exposant vos résultats. Cette soutenance est publique : il est interdit, légalement, à de rares exceptions près (thèse portant sur des sujets militaires ou brevets industriels privés) de faire une soutenance non publique. Cela permet au citoyen lambda (et surtout à des universitaires qui ne seraient pas dans le jury) d’accéder à l’exposer de la thèse et éventuellement de dénoncer des pompages. Bref, vous soutenez et une discussion s’en suit, de plusieurs heures. On critique vos arguments, votre méthode, vos références théoriques, etc. On vous pousse publiquement dans vos retranchement : c’est un rituel fantastique d’accession non pas à un &laquo;&nbsp;poste&nbsp;&raquo;, mais à la possibilité d’argumenter rationnellement avec des pairs au nom de la vérité sur un domaine circonscrit du réel. Ensuite, vous quittez la table, et le jury se retire pour délibérer, parfois de manière contradictoire : certains sont content de la prestation et du texte, d’autres en désaccord, etc. Le jury vote, et si tout se passe bien, il vous délivre un titre de Docteur de l’université, avec un certain nombre de modulations (en gros, des mentions) et un document écrit qui synthétise votre soutenance et qui vous suit dans votre dossier.</p>
<p>Cela n’était que la première étape de l’évaluation. Vient ensuite la promulgation de postes par le ministère, au bulletin officiel (chacun peut y accéder, c’est public). Là, il s’agit d’un concours national. Du moins, c’était le cas avant la réforme&#8230; Plusieurs candidats se présentent devant une commission (il faut en parler au passé, la réforme a tout changé) composée de spécialistes de diverses disciplines (s’il s’agit d’un petit établissement) ou de spécialistes de votre discipline (s’il y en a assez dans l’établissement où vous postulez). Ces gens étaient pour partie élus, et pour partie nommés, et siégeaient durant plusieurs années ce qui leur permettait de voir passer différents dossiers et de garder une mémoire des candidatures. Bref, vous passez un oral devant ces spécialistes, après qu’ils aient évalué votre dossier (thèse, rapport de thèse, publications, etc.). L’oral permet de vérifier qu’en plus de vos compétences, vous avez la capacité à comprendre la logique (pédagogique et de recherche) de l’établissement dans lequel vous souhaitez travailler. Il y avait alors un classement des dossiers et des candidats en fonction de l’évaluation réalisée par cette commission. Ensuite seulement, quand vous aviez été élu, vous étiez nommé par le ministère sur un poste de maître de conférences. Et vous démariez alors le salaire mirifique de&#8230; 2 068,85 €</p>
<p>Je mets au défi quiconque de me trouver, dans le privé ou ailleurs, un système d’évaluation aussi difficile et un parcours aussi régulièrement évalué que celui que je viens de présenter.</p>
<p>Ce système d’évaluation et de recrutement fonctionnait avec quelques ratés : les commissions de spécialités étaient souvent critiquées, mais le diagnostic de leur fonctionnement, à mon sens, n’a jamais fait consensus dans la communauté. J’ai siégé dans plusieurs de ces commissions de recrutement durant des années, sans constater de gros problèmes. J’ai peut-être eu de la chance, mais je pense surtout qu’un système aussi exigeant en termes d’évaluation des chercheurs était une garantie, même si aucun système n’est parfait. Le nouveau ne tardera pas, j’en suis certain, à montrer des failles pires que le précédent : il a en effet été créé pour réduire le contrôle par les pairs et donner plus de pouvoir au directeur de l’établissement, ce qui est une régression.</p>
<p>Ensuite, car ce n’est pas fini, vous entrez dans la &laquo;&nbsp;carrière&nbsp;&raquo; : maître de conférences, donc. L’évaluation est, là encore, présente en permanence. A travers les publications, bien entendu. Quand tout marche bien, chaque &laquo;&nbsp;papier&nbsp;&raquo; est lu par deux experts, souvent internationaux, dans une procédure dite &laquo;&nbsp;en double aveugle&nbsp;&raquo; : vous fournissez un texte sans votre nom à des gens que vous ne connaissez pas, mais qui ont été sélectionnés par la revue parce qu’ils sont spécialistes de votre sujet. Ils évaluent alors votre travail, et vous êtes autorisé ou non à publier. J’ai réalisé des expertises de ce type, et je m’y soumets régulièrement : c’est passionnant. Là encore, comme tout système humain, ça fonctionne plus ou moins bien, mais même des machines peuvent dysfonctionner. Alors, imaginez, quand il s’agit d’évaluer la recherche ! Les vrais colloques (j’en ai co-dirigé un) mettent en place le même type d’évaluation, tant pour vous autoriser à vous exprimer publiquement, qu’après coup pour publier les actes.</p>
<p>Dans d’autres cas, l’évaluation repose plus sur de la cooptation par des collègues qui vous demandent un texte pour une revue, parce qu’ils savent que vous bossez sur tel thème, et que vous êtes bon, et ce n’est pas infamant comme mode d’évaluation. De toute manière, dans les deux cas (double aveugle et cooptation), il y a généralement des allers-retours entre la revue et vous avec des demandes de correction : l’évaluation est donc continue, et touche y compris votre mode d’écriture, dans ce qu’il y a parfois de plus &laquo;&nbsp;intime&nbsp;&raquo;. Là encore, quand c’est bien géré, c’est passionnant.</p>
<p>Autre processus d’évaluation : les projets de recherche. C’est plus compliqué à décrire, car il y a une grande diversité de situations. Mais disons qu’avant d’être financé par l’État, une proposition de recherche, généralement émanant d’une équipe (laboratoire reconnu ou regroupement de chercheurs et/ou de laboratoire reconnus, présence ou non de doctorants, etc.), des spécialistes du domaine examinent les propositions et font des recommandations, suite à quoi si votre projet tient la route il peut y avoir une série d’allers-retours avec les experts qui demandent des précisions, etc. Là encore, l’évaluation est constante et l’argent public n’est en aucun cas mobilisé n’importe comment.</p>
<p>Enfin, il y a l’enseignement. Là, il faut distinguer deux situations : les premiers cycles (Licence) et le reste (M1, M2, doctorat). En L, il y a souvent un programme, définit par discipline, mais qui est spécifique de l’université : local, donc. On sait à peu près ce qu’il faut enseigner, et c’est là qu’on envoie au casse pipe les plus jeunes, face aux amphis bondés, les mandarins se réservant généralement les cycles les plus faciles (M1 et M2). Je connais mal ces cycles, même si je ne suis pas un mandarin, aussi je passe directement à la suite : M1, M2. Si vous êtes maître de conférences, ça signifie que vous êtes l’un des seuls spécialistes d’un micro-domaine et qu’on vous a recruté pour enseigner ce micro-domaine. Qui donc peut vous évaluer ? Par définition, personne, et ce n’est pas un problème, car l’université, ce n’est plus le lycée : on forme autrement, avec d’autres contraintes et d’autres objectifs, un autre type de personnes que les lycées. On n’a donc pas à respecter un programme tout fait et pondu par un ministère. On enseigne le savoir vivant d’une recherche récente. Sinon, ça n’a plus aucun sens, et si on veut tout évaluer, on va tuer le caractère vivant de ces savoirs issus de la recherche. C’est bien le sens de ces réformes : tuer la créativité en se basant sur un modèle bureaucratique et autoritaire de la pensée. Bref, je passe. Peut-on évaluer la pédagogie, vieux fantasme et vieille récrimination des étudiants ? Je ne sais pas. Je sais vaguement ce qu’est la didactique (articulation d’un contenu disciplinaire avec un public et des objectifs), mais la pédagogie ? Quand on est le seul spécialiste d’un domaine ? Je ne vois pas&#8230;</p>
<p>Enfin, pour conclure, il y a un autre niveau d’évaluation des enseignements, qui est lui aussi continuel, c’est celui des relations avec le ministère qui évalue nos propositions d’enseignement tous les 4 ans, et les remets en réalité sur le tapis tous les 2 ans (au &laquo;&nbsp;mi parcours&nbsp;&raquo;). Le ministère est tellement incompétent en matière de gestion de ces procédures, et tellement versatile dans ses stratégies, qu’un étudiant entrant dans un cycle n’était jamais sur de le terminer. La nullité des fonctionnaires du ministère en matière d’évaluation (eux, d’ailleurs, ne sont jamais évalués&#8230;) est bien connue, et c’est une folie furieuse de voir le rythme frénétique avec lequel on nous demande de fournir, chaque année en fait, de nouvelles maquettes de cours pour les évaluer. Évaluations tout à fait sommaire, puisque nous n’avons pratiquement jamais le moindre retour argumenté&#8230; . Les réformes se succèdent donc, sans cohérence ni logique autre que celle de l’ego maniaque des ministres désireux d’y attacher leurs noms, et rendent le travail et la réflexion sur le long terme, ainsi que le recueil d’expérience et la réflexivité, à peu près impossible. Dans ces conditions, je vois mal comment on pourrait mettre en place un système d’évaluation des enseignements efficace.</p>
<p>Voilà, j’ai été un peu long, mais j’espère que ça répond correctement aux interrogations en matière d’évaluation des chercheurs et de contrôle, par la société, de notre travail. Je précise que je n’ai présenté que la pointe de l’iceberg de l’évaluation : il m’aurait fallu écrire un livre entier pour décrire l’ensemble des processus d’évaluation et tenir un discours moins descriptif et moins superficiel sur ce sujet. Maintenant, ce serait bien que tous ceux qui critiquent la recherche acceptent de décrire comment ils sont évalués dans leur métier. On verrait alors que, contrairement à ce que prétend le sens commun, il y a peu de métiers aussi contrôlés que celui d’enseignant chercheur, et cela ferait apparaître en pleine lumière la grossièreté des mensonges gouvernementaux à ce sujet.</p>
]]></content:encoded>
			<wfw:commentRss>http://indiscipline.fr/fr/evaluation-de-la-recherche-et-des-universitaires-quelques-reponses-a-la-desinformation-gouvernementale-et-aux-idees-de-sens-commun/feed/</wfw:commentRss>
		<slash:comments>0</slash:comments>
		</item>
	</channel>
</rss>
