AGORAPUBLIX

SOS marchés publics pour les Pouvoirs Adjudicateurs et Entités Adjudicatrices => Passation du marché => Discussion démarrée par: jcc le Janvier 25, 2024, 08:01:39 AM

Titre: préférence de notation
Posté par: jcc le Janvier 25, 2024, 08:01:39 AM
Bonjour,

Questionnement sur la notation des offres :

Une méthode de notation est-elle à privilégier entre les 2 méthodes qui suit ou est-ce indifférent.

Perso j'ai toujours du mal avec les méthodes de notation...
Ce qui me rassure c'est que les services se pose aussi des question et voici la dernière en date.

_certaines  notation  s'arrêtent à une note finale sur 100; en général NF = %NT+%NP+%NE

_d'autres ajoutent un nouveau calcul pour ramener la note sur 20 :

""L'offre ayant obtenu le plus de point obtient la note maximale de 20.

Pour les autres offres, *la note finale (NF) *est attribuée selon la formule suivante :

*NF = (NIF de l'offre à noter * 20) / NIF de l'offre ayant le plus de point*

La note obtenue est arrondie au centième de point près.""



Ce qui fait que le mieux disant aura la note de 20...

Quelle est la plus-value de noter sur 20 au lieu de noter sur 100? Ce paragraphe est-il obligatoire ?
Titre: Re : préférence de notation
Posté par: speedy le Janvier 25, 2024, 09:17:57 AM
Citation de: jcc le Janvier 25, 2024, 08:01:39 AM
_certaines  notation  s'arrêtent à une note finale sur 100; en général NF = %NT+%NP+%NE
c'est la règlementation  avec les couples critère/pondération, la notation sur 20 ou 100 est un détail  surtout si on ne dit pas la précision par exemple  par pas de 1 ou de 0,01 .....
donc jusque là ce n'est pas une méthode car la méthode c'est de dire comment on obtient plus ou moins de points pour chaque critère à partir du prix et/ou du mémoire technique


Citation de: jcc le Janvier 25, 2024, 08:01:39 AM

_d'autres ajoutent un nouveau calcul pour ramener la note sur 20 :
""L'offre ayant obtenu le plus de point obtient la note maximale de 20.
Pour les autres offres, *la note finale (NF) *est attribuée selon la formule suivante :
*NF = (NIF de l'offre à noter * 20) / NIF de l'offre ayant le plus de point*
La note obtenue est arrondie au centième de point près.""
Ce qui fait que le mieux disant aura la note de 20...
Quelle est la plus-value de noter sur 20 au lieu de noter sur 100? Ce paragraphe est-il obligatoire ?
c'est un débat sur l'échelle de notation, faut il donner la note maxi au meilleur sur chaque critère ? si oui systématiquement ou uniquement si la formule de notation du prix donne la note maxi au prix mini.....
c'est un débat philosophique.
il y a des formules/méthodes de notation à proscrire dont celles censurées par le juge mais il n'y a pas de formule miracle qui recueillerait l'accord de tous  ....

Perso je préfère annoncer les formules/méthode de notation pour éviter la suspicion d'avoir choisi en fonction du gagnant  car oui on peut manipuler puisque le gagnant ne sera pas le même suivant les méthode/formule employées  ....
Titre: Re : préférence de notation
Posté par: Vivaelparaguay le Janvier 25, 2024, 09:25:25 AM
il faut toujours faire aussi simple que possible.

Sur les critères objectifs, chiffés (une valeur de performance) je pense qu'il faut toujours donner la note maxi à celui qui fait la proposition la plus performante. Sinon on utilise pas toute l'amplitude du barème. Si on donne 18/20 à celui qui propose la meilleure performance, sans savoir dire pourquoi il n'a pas obtenu 20, alors on aura pas noté sur 20 mais sur 18, et donc pas respecté les conditions de mise en concurrence.

pour des critères qui laissent une part d'appréciation, je conseille aux services de donner la note maxi à l'auteur de la meilleure proposition, ou, d'être capable d'expliquer ce qui manquait à la meilleure offre pour obtenir cette note maximum.

Effectivement, comme Speedy, noter sur 5, sur 100 ou sur 12546585, peu importe, comme le dit Speedy, une note sur 100 avec un pas de 1 ou une note sur 1 avec un pas de 0,01 c'est blanc bonnet bonne blanc :D
Titre: Re : Re : préférence de notation
Posté par: Mathieu le Janvier 25, 2024, 09:46:08 AM
Citation de: Vivaelparaguay le Janvier 25, 2024, 09:25:25 AM
il faut toujours faire aussi simple que possible.

+1000

Citation de: Vivaelparaguay le Janvier 25, 2024, 09:25:25 AM
Si on donne 18/20 à celui qui propose la meilleure performance, sans savoir dire pourquoi il n'a pas obtenu 20, alors on aura pas noté sur 20 mais sur 18, et donc pas respecté les conditions de mise en concurrence.

Pas tout à fait d'accord, pour moi c'est "le pas" qui compte. sinon on peut faire un critère noté sur 70, donner 70 à la meilleure offre, donner 69,5 à la suivante ; là il y a un vrai aplatissement du critère.

Perso je note sur 10, par pas de 1. Si une offre est très bonne mais avec tout de même un (petit) reproche à lui faire, je mets 9/10, pas 10/10, quelque soit l'état des autres offres. Pas de note maxi automatique sauf sur les critères chiffrés (prix/délais). Sur un critère VT je trouve ça trop contre-intuitif de mettre une note parfaite à une offre imparfaite.

Sur un critère noté sur 70 ça donnerait donc un pas de 7 points, ce qui donne un pas à la hauteur de la pondération annoncée

je considère que l'essentiel est de savoir expliquer l'écart de note et son ampleur (un grave manquement peut bien mériter plusieurs points de moins)
Titre: Re : Re : Re : préférence de notation
Posté par: Vivaelparaguay le Janvier 25, 2024, 10:05:25 AM
Citation de: Mathieu le Janvier 25, 2024, 09:46:08 AM
Citation de: Vivaelparaguay le Janvier 25, 2024, 09:25:25 AM
il faut toujours faire aussi simple que possible.

+1000

Citation de: Vivaelparaguay le Janvier 25, 2024, 09:25:25 AM
Si on donne 18/20 à celui qui propose la meilleure performance, sans savoir dire pourquoi il n'a pas obtenu 20, alors on aura pas noté sur 20 mais sur 18, et donc pas respecté les conditions de mise en concurrence.


je considère que l'essentiel est de savoir expliquer l'écart de note et son ampleur (un grave manquement peut bien mériter plusieurs points de moins)

Entièrement d'accord. Et que l'écart de note soit représentatif de l'écart de performance/pertinence de la réponse.

Je dois parfois faire refaire des analyse par les techniciens qui vont par exemple mettre 20/20 pour une performance de dingue, et 19 pour une perf beaucoup moins bonne, dans le but d'attribuer au moins disant.

Et il faut se méfier des échelles non linéaires, comme celle des decibels.
Titre: Re : préférence de notation
Posté par: hpchavaz le Janvier 25, 2024, 10:25:08 AM
Citation de: jcc le Janvier 25, 2024, 08:01:39 AM
Quelle est la plus-value de noter sur 20 au lieu de noter sur 100? Ce paragraphe est-il obligatoire ?

La méthode que vous décrivez est parfois  appelée méthode des ratios. elle consiste à redresser la note finale sur le critère de l'offre ayant le plus de points au maximum de points.

I. Commençons par le plus simple : Le "paragraphe" n'est pas obligatoire.


Petite digression

Je le répète "La méthode de notation doit permettre de déterminer l'offre économiquement la plus avantageuse."

Cependant, il faut bien prendre garde que cela signifie, non pas comme certains s'en contentent parfois,  que l'offre économiquement la plus avantageuse est déterminée par la méthode, mais bel est bien que cette méthode doit avoir par elle-même un sens économique.
C'est à ce titre que, tout à fait logiquement, ont notamment été censurées :
i les départages par tirage au sort alors que dans la quasi-intégralité des cas, il existe sans doute un avantage, quand bien même serait-il très minimal, minime pour une offre
- les notations du critère prix n'attribuant pas la meilleure note aux offres présentant le prix le plus bas, pour exemple de notation censurée celle qui attribue la meilleure note à l'offre la plus proche de l'estimation ou de la moyenne.
- les notations attribuant systématiquement la note maximale à la meilleure offre et la note 0 à la plus mauvaise offre, quel que soit l'écart entre les deux offres sur le critère.


II. Motivation de la méthode des ratios

a) Il a été dit, écrit que pour chaque critère (essentiellement sur le critère prix, mais le raisonnement vaut pour l'ensemble) que la meilleure note doit être attribuée à la meilleure offre (sur le critère)
Cela a pu être mal compris en interprétant "meilleure note" de façon absolue (le maximum) alors qu'il faut le comprendre de faon relative. Cela semble alors une tautologie, mais l'exemple de la notation "par rapport à l'estimation"montre que ce n'était ne l'était aps.

b Plus sérieusement,
La méthode de notation la plus courante ("Prix le plus bas"/"Montant de l'offre") attribue la note maximale au prix le plus bas qui est bien l'offre la meilleure sur ce critère . On peut alors être tenter par la méthode des ratios qui permet de s'assurer qu'il en est e même sur tous les critères.


III. Critique

Si la méthode des ratios a au moins l'avantage d'assurer une certaine forme de cohérence, elle est néanmoins critiquable.

a) Détails d'application
- En présence de sous-critères , faut-il appliquer le redressement globalement sur le critère ou sur les sous critères (puis, éventuellement, sur le critère) ?
Le raisonnement par la cohérence n'est pas évident.
Généralement, le redressement  ne se fait que sur uniquement la note pour le critère pris dans son ensemble.
Pour un critère comme la qualité, cela peut se comprendre, mais en présence d'un troisième critère, généralement, comme le délai, comme procède-t-on ?

- Si l'on met en place une note éliminatoire, ce ne peut être sur une note redressée puisque celle-ci est affectée par la note de l'offre la meilleure sur le critère

b) Quand sur un critère donné les offre sont toutes basses ; le redressement est alors d'une telle ampleur que l'on peut se demander s'il ne "vicie" pas la pondération


Enfin et surtout :

Plus fondamentalement, quel est le sens économique du redressement ?


[Ajout du 2024-02-15]
voir 23 octobre 2023 - Tribunal administratif  de CAEN- 2302484 (https://www.dalloz.fr/documentation/Document?id=TA_CAEN_2023-10-23_2302484#_) points 10 et 11.