Revised indicators Indicateurs révisés Indicadores revisados - PEFA
Revised indicators Indicateurs révisés Indicadores revisados - PEFA
Revised indicators Indicateurs révisés Indicadores revisados - PEFA
You also want an ePaper? Increase the reach of your titles
YUMPU automatically turns print PDFs into web optimized ePapers that Google loves.
No.1<br />
NEWSFLASH. www.pefa.org<br />
<strong>Revised</strong> <strong>indicators</strong><br />
<strong>Indicateurs</strong> <strong>révisés</strong><br />
<strong>Indicadores</strong> <strong>revisados</strong><br />
PFM PERFORMANCE MEASUREMENT FRAMEWORK<br />
REVISION OF THREE INDICATORS<br />
1. Background and process<br />
The <strong>PEFA</strong> program has made adjustments to <strong>indicators</strong> where experience over the five years<br />
since the PFM Performance Measurement Framework was launched has shown that ratings do<br />
not always correctly reflect the level of system performance. In June 2010, the <strong>PEFA</strong> Steering<br />
Committee sought comments from any interested party on proposed revisions to:<br />
<br />
<br />
<br />
PI-2 Composition of expenditure out-turn compared to original approved budget;<br />
PI-3 Aggregate revenue out-turn compared to original approved budget;<br />
PI-19 Transparency, competition and complaints mechanisms in procurement;<br />
Comments were received from the <strong>PEFA</strong> partners, other donor organizations, partner<br />
governments, consultants and individuals. Some of the twenty specific comments made more<br />
than one point, but none rejected the proposals (and several comments were really discussions<br />
emphasizing a particular aspect).<br />
The proposed revisions were tested against data from earlier assessments during the design<br />
phase. This was straightforward for PIs 2 and 3, but more difficult for PI-19 (as the new rating<br />
criteria specify evidence that was not required in earlier assessments): however, the revised<br />
indicator produces results that are compatible with those obtained from the OECD DAC<br />
„Methodology for Assessing Procurement Systems‟ tool, as had been intended.<br />
The <strong>PEFA</strong> Steering Committee has approved final versions of three revised <strong>indicators</strong> for use.<br />
The Steering Committee wishes to bring these revised <strong>indicators</strong> into use as soon as is<br />
practicable, which may mean that some assessments currently underway are able to use them.
However, all Concept Notes/Terms of Reference for proposed assessments issued after 28<br />
February 2011 should refer to use of the revised <strong>indicators</strong>.<br />
2. The revised <strong>indicators</strong><br />
PI-2. Composition of expenditure out-turn compared to original approved budget<br />
Reasons for revision<br />
In situations where all changes against the original budget are negative (for example, when<br />
there is a major cut, arising from a significant revenue shortfall) or positive (perhaps because of<br />
windfall revenues collected mid-year), the current methodology results in an „A‟ rating, even<br />
when the changes are unevenly spread. In addition, the accounting treatment of contingencies<br />
can have major implications for the rating, depending on the size of the contingency and<br />
whether it is transferred (vired) to spending entities or spent/accounted for directly under the<br />
contingency head: again – assuming no other variance – PI-2 will give an „A‟ rating to a<br />
government that has a large contingency but accounts for its use directly under the contingency<br />
head, while a government which vires the contingency to spending entities will be rated lower (in<br />
other words, the scoring criterion penalizes what is generally accepted as good practice).<br />
Basis of the change<br />
To remedy these problems, the current basis for calculating PI-2 has been changed to reflect<br />
the good budgetary practice of according equal marginal value to all budget lines, and a second<br />
dimension added to focus on contingencies. Dimension (i) will improve the rating of any<br />
variance from the original budget appropriations by using relative deviations from an across -theboard<br />
adjustment to the budget, to reflect the aggregate actual expenditure. However, to avoid<br />
„double counting‟ the impact of contingencies, they are excluded from this calculation of<br />
variances. A new dimension (ii) has been calibrated to avoid penalizing „good practice‟ by<br />
allocating an „A‟ to a government that records little or no actual expenditure against the<br />
contingency vote (because either the contingency has not been used or it has been vired to<br />
those spending departments where actual expenditure is incurred and recorded).<br />
PI-3. Aggregate revenue out-turn compared to original approved budget<br />
Reason for revision<br />
The original PI-3 rates the percentage shortfall between the forecast and the actual revenue<br />
achieved, but did not consider under-budgeting of revenue. Pessimistic revenue forecasts often<br />
result in excess revenue being used for spending that has not been subjected to the scrutiny of<br />
the budget process, while optimistic forecasts can lead to unjustifiably large expenditure<br />
allocations and to larger than planned fiscal deficits if spending is not reduced should revenue<br />
be under-realized.<br />
Basis of the change<br />
Hence the criteria used to score the indicator have been modified to incorporate both positive<br />
and negative deviations, although as the consequences of the latter are more severe, especially<br />
in the short term, more weight is given to an under-realization of revenue.<br />
PI-19. Transparency, competition and complaints mechanisms in procurement<br />
Reason for revision<br />
Although several PIs impact on or are influenced by procurement, PI-19 – the only indicator<br />
devoted to the operation of the public procurement system – has been seen as inadequate<br />
given the significance of the volume of public spending that takes place through this system.<br />
Two of the three dimensions also proved difficult to rate consistently.
Basis of the change<br />
PI-19 has been made more comprehensive in examining the strength, operation and openness<br />
of a national procurement system, by adding an additional dimension and completely<br />
reformulating the other three to reflect and provide linkages to the OECD -DAC „Methodology for<br />
Assessing Procurement Systems‟ (MAPS) tool. The revised PI-19 draws on information<br />
collected as part of a MAPS exercise, or, if none has been recently completed, guides <strong>PEFA</strong><br />
Assessors to appropriate sources of information and evidence by referring to the MAPS<br />
documentation.<br />
3. Support for Implementation<br />
The Secretariat has put in place a number of measures to assist users in implementing these<br />
changes:<br />
Assessors’ aids: Tools such as calculation spreadsheets and guidance on interpretation<br />
and sources of evidence have been updated and posted on the website.<br />
Training materials: <strong>PEFA</strong> presentations at all upcoming training (and dissemination) events<br />
will highlight the indicator revisions. Training materials relating to the revised <strong>indicators</strong> will<br />
be updated to reflect the changes.<br />
Translation: all the materials relating to the revised <strong>indicators</strong> will be translated into French<br />
& Spanish as a matter of urgency: and, in due course, into Russian, Portuguese & Arabic.<br />
4. Comparability with previous assessments<br />
As an increasing proportion of the assessments now being undertaken are in fact „Repeats‟,<br />
(conducted with the specific intention of assessing changes in the performance of the PFM<br />
system since an earlier assessment), the Steering Committee has agreed that, where:<br />
<br />
<br />
the same numeric data is the primary basis for rating both the original and revised version of<br />
the indicator (as for PI-2 Dim (i), PI-3 and for PI-19 dim (iii)), the Assessment Team should<br />
be required to recalculate the earlier score using the amended criteria, but to do this solely<br />
for the purpose of identifying the direction of change over time;<br />
the evidence required to rate an indicator or dimension is not quantitative (which is the case<br />
for some aspects of PI-19), a „recalculation‟ approach is unlikely to be feasible (as the –<br />
subsequent – Assessors may be unable to access or recreate the data that had been<br />
applicable at the time of the previous assessment but would now be necessary to satisfy the<br />
revised criteria), hence it may be necessary to conclude that the ratings are not directly<br />
comparable but require Assessors to describe the situation in their narrative.<br />
NB: The database of assessment scores maintained by the Secretariat will identify<br />
instances where ratings using these revised <strong>indicators</strong> are not comparable with<br />
those from an earlier assessment.<br />
The full text to replace the existing wording in the <strong>PEFA</strong> Performance Measurement Framework<br />
as well as additional guidance for Assessors (including a revised calculation spreadsheet) can<br />
be found at http://www.<strong>PEFA</strong>.org<br />
<strong>PEFA</strong> Secretariat<br />
28 January 2011
CADRE D’ÉVALUATION DE LA PERFORMANCE<br />
RÉVISION DE TROIS INDICATEURS<br />
1. Contexte et démarche suivie<br />
L‟expérience des cinq années écoulées depuis le lancement du Cadre d‟évaluation de la<br />
performance (PFM) montre que les notes attribuées au titre de certains indicateurs ne reflètent<br />
pas toujours correctement le niveau de performance du système. Le Programme d‟examen des<br />
dépenses publiques et d‟évaluation de la responsabilité financière (<strong>PEFA</strong>) a donc modifié les<br />
indicateurs concernés. En juin 2010, le Comité directeur du <strong>PEFA</strong> a invité toute partie<br />
intéressée à faire part de ses commentaires sur les modifications proposées pour les<br />
indicateurs suivants :<br />
<br />
<br />
<br />
PI-2 Composition effective des dépenses par rapport au budget initialement approuvé<br />
PI-3 Recettes réelle totales par rapport au budget initialement approuvé<br />
PI-19 Passation des marchés publics : transparence, concurrence et mécanismes de dépôt<br />
de plaintes<br />
Les partenaires <strong>PEFA</strong>, d‟autres organismes bailleurs, des consultants et des particuliers ont<br />
formulé une vingtaine d‟observations spécifiques, couvrant parfois plusieurs points, mais aucun<br />
n‟a rejeté les modifications proposées (plusieurs commentaires étaient en fait une analyse<br />
d‟éléments spécifiques).<br />
Durant la phase d‟élaboration, les modifications proposées ont été tes tées sur la base des<br />
données d‟évaluations précédentes. La tâche s‟est révélée simple pour les indicateurs PI-2 et<br />
PI-3, mais plus difficile pour l‟indicateur PI-19 (les nouveaux critères de notation étant fondés<br />
sur des données qui n‟étaient pas exigées pour les évaluations antérieures) : on constate<br />
toutefois que les résultats obtenus au moyen du nouvel indicateur permettent, comme prévu,<br />
d‟établir des comparaisons avec les résultats obtenus au moyen de la Méthodologie<br />
d‟évaluation des systèmes nationaux de passation des marchés publics du CAD de l‟OCDE («<br />
MAPS »).<br />
Le Comité directeur du <strong>PEFA</strong> approuve la version finale des trois indicateurs modifiés et<br />
souhaite que ceux-ci entrent en application le plus tôt possible, autrement dit, ils pourraient être<br />
utilisés dans le cadre de certaines des évaluations en cours. En tout état de cause, ces<br />
nouveaux indicateurs s‟appliqueront à toutes les notes de synthèse et lettres de mission<br />
relatives à des projets d‟ évaluations rédigées après le 28 février 2011.<br />
2. Les indicateurs modifiés<br />
PI-2.<br />
Composition des dépenses réelles par rapport au budget initialement approuvé<br />
Justification de la modification<br />
Lorsque tous les écarts constatés par rapport aux montants inscrits au budget initial sont<br />
négatifs (par exemple, lorsque les dépenses sont fortement réduites, en raison d‟un manque à<br />
percevoir important) ou positifs (éventuellement suite à des recettes exceptionnelles en milieu<br />
d‟année), l‟application de la méthodologie actuelle donne lieu à l‟attribution de la not e « A »,
même lorsque ces écarts sont inégalement répartis. Par ailleurs, le traitement comptable des<br />
réserves de précaution peut influer lourdement sur la notation, en fonction du montant mis en<br />
réserve et selon que ce montant est transféré (viré) aux entités dépensières ou qu‟il est<br />
directement consommé/imputé au chapitre spécifique des réserves : là encore – en l‟absence<br />
de tout autre écart – une administration qui constitue une réserve importante mais l‟impute<br />
directement au chapitre des réserves se verra attribuer une note « A » au titre de l‟indicateur PI-<br />
2, alors que celle qui vire le montant mis en réserve aux entités dépensières sera plus<br />
faiblement notée (autrement dit, le critère de la note pénalise les administrations qui se<br />
conforment à la pratique généralement recommandée).<br />
Nature de la modification<br />
Afin de remédier à ces problèmes, la base de calcul actuelle pour l‟indicateur PI-2 a été<br />
modifiée pour prendre en compte la bonne pratique budgétaire consistant à accorder la même<br />
valeur marginale à tous les postes budgétaires, et une deuxième composante a été ajoutée<br />
pour traiter des réserves. En cas de différence entre les dépenses effectives et les crédits<br />
initialement ouverts, la composante (i) améliorera la note attribuée en utilisant les écarts relatifs<br />
par rapport à l‟ajustement global du budget pour tenir compte du montant total des crédits<br />
effectivement consommés. Afin d‟éviter tout « double comptage » des réserves, celles -ci ne<br />
sont pas prises en compte dans ce calcul. La nouvelle composante (ii) est conçue de manière à<br />
ce que les administrations qui suivent de « bonnes pratiques » ne soient pas pénalisées. Elle<br />
prévoit en effet l‟attribution d‟une note „A‟ aux administrations dont les crédits votés au chapitre<br />
des réserves ont été peu ou pas dépensés (soit parce que la réserve n‟a pas été utilisée, soit<br />
parce qu‟elle a été virée aux services dépensiers au budget desquels les dépenses réelles sont<br />
imputées et inscrites).<br />
PI-3. Recettes réelles totales par rapport au budget initialement approuvé<br />
Justification de la modification<br />
L‟indicateur PI-3 initial permettait d‟attribuer une note de performance sur la base de la sousréalisation,<br />
en pourcentage, des recettes par rapport aux prévisions, mais pas de prendre en<br />
compte la sous-budgétisation des recettes. Des prévisions de recettes pessimistes se<br />
traduisent souvent par l‟affectation de recettes excédentaires à des dépenses qui n‟ont pas été<br />
soumises au rigoureux examen du processus budgétaire, et des prévisions de recettes<br />
optimistes peuvent conduire à des autorisations de dépense d‟un montant injustifié et à des<br />
déficits budgétaires plus importants que prévu si la sous-réalisation des recettes ne<br />
s‟accompagne pas d‟une réduction des dépenses.<br />
Nature de la modification<br />
Les critères utilisés pour attribuer une note au titre de cet indicateur ont donc été modifiés pour<br />
tenir compte des écarts tant positifs que négatifs, même si un poids plus important est accordé<br />
à la sous-réalisation des recettes, qui est plus lourde de conséquences, surtout à court terme.<br />
PI-19. Passation des marchés publics : transparence, concurrence et mécanismes de<br />
dépôt de plaintes<br />
Justification de la modification<br />
Bien que plusieurs indicateurs de performance influent sur le système de passation des<br />
marchés publics ou soient influencés par lui, l‟indicateur PI-19 est le seul qui soit entièrement<br />
consacré à ce système, et il a été jugé insuffisant compte tenu du montant des dépenses<br />
relatives aux marchés publics. Deux de ses trois composantes sont aussi apparu difficiles à<br />
noter de manière cohérente.
Nature de la modification<br />
L‟indicateur PI-19 a été modifié pour permettre un examen plus exhaustif de la solidité, du<br />
fonctionnement et du degré d‟ouverture du système national de passation des marchés. Il<br />
compte désormais une composante de plus, et les trois composantes existantes ont été<br />
entièrement reformulées d‟une manière qui reflète la Méthodologie d‟évaluation des systèmes<br />
nationaux de passation des marchés publics (« MAPS ») du CAD de l‟OCDE et perm ette de s‟y<br />
référer. Le nouvel indicateur PI-19 se fonde sur les informations recueillies dans le cadre d‟un<br />
exercice MAPS ou, si aucun exercice de ce type n‟a été effectué récemment, oriente les<br />
évaluateurs <strong>PEFA</strong> vers les sources d‟information et les justifications appropriées en se référant<br />
à la documentation MAPS.<br />
3. Aide à la mise en œuvre<br />
Le Secrétariat a pris diverses mesures pour aider les utilisateurs à appliquer ces modifications :<br />
Outils destinés aux évaluateurs : Les outils, tels que tableurs et conseils pour faciliter<br />
l‟interprétation et la recherche de justifications, sont mis à jour et publiés en ligne.<br />
Supports de formation : Des présentations <strong>PEFA</strong> destinées à faire connaître les<br />
modifications apportées aux indicateurs seront systématiquement organisées dans le cadre<br />
des sessions de formation (et de diffusion) à venir. Les supports de formation sur les<br />
nouveaux indicateurs seront mis à jour sur la base des modifications apportées.<br />
Traduction : Tous les documents se rapportant aux indicateurs modifiés seront traduits<br />
dans un premier temps en français et en espagnol et ultérieurement en arabe, en portugais<br />
et en russe.<br />
4. Comparabilité avec les évaluations précédentes<br />
Les évaluations entreprises actuellement sont, pour une part croissante, des évaluations<br />
répétées, c‟est-à-dire conduites spécifiquement pour juger de l‟évolution de la performance du<br />
système de gestion des finances publiques depuis la réalisation d‟une évaluation précédente.<br />
Le Comité directeur convient donc que :<br />
<br />
<br />
lorsque les mêmes données numériques servent de base à l‟attribution d‟une note au titre<br />
d‟un indicateur dans sa version initiale et dans sa version modifiée (comme pour la<br />
composante (i) de l‟indicateur PI-2, l‟indicateur PI-3 et la composante (iii) de l‟indicateur PI-<br />
19), l‟équipe chargée de l‟évaluation doit être invitée à recalculer le score antérieur sur la<br />
base des critères modifiés, mais ce uniquement afin de déterminer le sens de l’évolution<br />
du système au fil du temps ;<br />
lorsque les données requises pour attribuer une note au titre d‟un indicateur ou d‟un de ses<br />
éléments ne sont pas chiffrées (comme c‟est le cas pour certains aspects de l‟indicateur PI -<br />
19), il est peu probable que l‟on puisse recalculer le score antérieur (les nouveaux<br />
évaluateurs ne sont peut-être pas en mesure de consulter ou de reconstituer les données<br />
qui s‟appliquaient à l‟évaluation initiale et qui sont maintenant exigées pour satisfaire aux<br />
nouveaux critères) ; dans ce cas, les données ne sont pas directement comparables, il faut<br />
l‟admettre, et les évaluateurs doivent donc décrire cette situation dans le rapport.<br />
NB : La base de données des scores d’évaluation entretenue par le Secrétariat identifiera<br />
les cas dans lesquels les notes attribuées au moyen des indicateurs modifiés ne<br />
sont pas comparables avec les scores d’une évaluation antérieure.
Pour consulter le texte intégral de la nouvelle définition dans le Cadre d‟évaluation d e la<br />
performance (<strong>PEFA</strong>), ainsi que des lignes directrices supplémentaires pour les évaluateurs (y<br />
compris une feuille de calcul révisée) cliquer sur le lien suivant : http://www.<strong>PEFA</strong>.org<br />
Secrétariat <strong>PEFA</strong><br />
28 janvier 2011<br />
MARCO DE MEDICIÓN DEL DESEMPEÑO EN MATERIA DE GFP<br />
REVISIÓN DE TRES INDICADORES<br />
1. Antecedentes y proceso<br />
El programa del <strong>PEFA</strong> ha introducido ajustes a los indicadores respecto de los cuales la<br />
experiencia recogida en los cinco años transcurridos desde la puesta en práctica del marco de<br />
medición del desempeño en materia de gestión de las finanzas públicas (GFP) ha demostrado<br />
que las calificaciones no siempre reflejan correctamente el nivel de desempeño del sistema. En<br />
junio de 2010, el Comité Directivo del <strong>PEFA</strong> solicitó comentarios a todas las partes interesadas<br />
acerca de las revisiones propuestas a los siguientes indicadores:<br />
<br />
<br />
<br />
ID-2 Composición del gasto efectivo en comparación con el presupuesto original aprobado;<br />
ID-3 Ingresos efectivos agregados en comparación con el presupuesto original aprobado;<br />
ID-19 Transparencia, competencia y mecanismos para la tramitación de reclamaciones en<br />
materia de adquisiciones.<br />
Se recibieron comentarios de los asociados del <strong>PEFA</strong>, otras organizaciones donantes,<br />
gobiernos asociados, consultores y personas físicas. En algunos de los 20 comentarios<br />
específicos si bien se planteó más de una cuestión, en ninguno de ellos se rechazaron las<br />
propuestas (y varios comentarios en realidad eran análisis en los que se hacía hincapié un<br />
aspecto en particular).<br />
Las revisiones propuestas se pusieron a prueba frente a datos derivados de evaluaciones<br />
anteriores durante la etapa de diseño. Esto resultó simple en el caso del ID -2 y el ID-3, aunque<br />
fue más difícil para el ID-19 (ya que en los nuevos criterios de calificación se especifican<br />
pruebas que no se requerían en evaluaciones anteriores); sin embargo, el indicador revisado<br />
produce resultados que son compatibles con los obtenidos aplicando la Metodología del CAD<br />
de la OCDE para la evaluación de los sistemas de adquisiciones, tal como se pretendía.<br />
El Comité Directivo del <strong>PEFA</strong> ha aprobado las versiones finales de tres indicadores <strong>revisados</strong><br />
para su uso. El Comité Directivo quiere implementar el uso de estos indicadores <strong>revisados</strong> a la<br />
brevedad posible, lo que tal vez signifique que puedan utilizarse en algunas evaluaciones<br />
actualmente en marcha. Sin embargo, en la totalidad de las notas conceptuales y términos de<br />
referencia de las evaluaciones propuestas emitidos después del 28 de febrero de 2011 debe<br />
plantearse el uso de los indicadores <strong>revisados</strong>.
2. Los indicadores <strong>revisados</strong><br />
ID-2. Composición del gasto efectivo en comparación con el presupuesto original<br />
aprobado<br />
Motivos de la revisión<br />
En situaciones en que todos los cambios en comparación con el presupuesto original arrojen un<br />
resultado negativo (por ejemplo, cuando se observa una reducción importante, derivada de un<br />
déficit considerable de ingresos) o positivo (tal vez debido a ingresos extraordinarios cobrados<br />
a mitad de año), la actual metodología redunda en una calificación “A”, aun cuando los cambios<br />
se distribuyan de manera dispareja. Además, el tratamiento contable de las contingencias<br />
puede tener grandes repercusiones para la calificación, según el tamaño de la partida para<br />
contingencias y si ella se transfiere a las entidades que efectúan los gastos o se gasta o se<br />
rinde cuentas de ella directamente bajo el rubro para contingencias; cabe reiterar que, en el<br />
supuesto de que no se registre ninguna otra varianza, conforme al ID-2 se asignará una<br />
calificación “A” al Gobierno que tenga una gran partida para contingencias pero que rinda<br />
cuentas de su uso directamente bajo el rubro para contingencias, en tanto que el Gobierno que<br />
transfiera la partida para contingencias a las entidades que efectúan los gastos merecerá una<br />
calificación más baja (en otras palabras, el criterio de calificación penaliza lo que en general se<br />
considera una buena práctica).<br />
Fundamento del cambio<br />
Para solucionar estos problemas, la actual base de cálculo del ID-2 se ha modificado para<br />
reflejar la buena práctica presupuestaria de acordar un valor marginal igual a todas las partidas<br />
del presupuesto, y se ha agregado un segundo aspecto para centrarse en las contingencias.<br />
La dimensión i) mejorará la calificación de toda varianza respecto de las asignaciones<br />
presupuestarias originales usando desviaciones relativas respecto de un ajuste general del<br />
presupuesto, a fin de reflejar el gasto efectivo agregado. Sin embargo, a fin de evitar el “doble<br />
recuento” del impacto de las contingencias, ellas se excluirán de este cálculo de las varianzas.<br />
Se ha calibrado una nueva dimensión ii) a fin de evitar la penalización de las “buenas<br />
prácticas” asignando la calificación “A” al Gobierno que registra gastos efectivos escasos o<br />
nulos con cargo a la partida para contingencias (porque la partida para contingencias no se ha<br />
usado o bien se ha transferido a los departamentos que efectúan los gastos y en los que se<br />
incurren y registran los gastos efectivos).<br />
ID-3. Ingresos efectivos agregados en comparación con el presupuesto original<br />
aprobado<br />
Fundamento de la revisión<br />
El ID-3 original califica la diferencia porcentual entre los ingresos previstos y los efectivamente<br />
recaudados, pero en él no se consideró la subestimación de los ingresos presupuestados. Los<br />
pronósticos pesimistas de ingresos suelen redundar en que los fondos provenientes de un flujo<br />
de ingresos mayor de lo previsto se usen para gastos que no se han sometido al examen del<br />
proceso presupuestario, en tanto que los pronósticos optimistas pueden dar lugar a<br />
asignaciones de gasto injustificadamente grandes y a déficits fiscales más grandes de lo<br />
planeado si el gasto no se reduce cuando los ingresos son inferiores a los previstos.<br />
Fundamento del cambio<br />
Por lo tanto, los criterios utilizados para la calificación del indicador se han modificado a fin de<br />
incorporar las desviaciones tanto positivas como negativas, aunque como las consecuencias de<br />
estas últimas son más graves, especialmente a corto plazo, se atribuye más importancia a la<br />
recaudación de ingresos inferiores a los previstos.
ID-19. Transparencia, competencia y mecanismos para la tramitación de reclamaciones<br />
en materia de adquisiciones<br />
Fundamento de la revisión<br />
Si bien varios ID ejercen un impacto en las adquisiciones o se ven influidos por ellas, el ID-19,<br />
el único indicador que se refiere al funcionamiento del sistema de adquisiciones públicas, se ha<br />
considerado inadecuado habida cuenta de la importancia del volumen de gasto público que<br />
tiene lugar a través de este sistema. Dos de los tres aspectos también demostraron ser difíciles<br />
de calificar con uniformidad.<br />
Fundamento del cambio<br />
El ID-19 ha resultado más integral para examinar la solidez, el funcionamiento y la apertura del<br />
sistema nacional de adquisiciones, al agregarse un aspecto adicional y reformularse totalmente<br />
los otros tres a fin de reflejar la Metodología del CAD de la OCDE para la evaluación de los<br />
sistemas de adquisiciones (MEA) y proporcionar vínculos con ella. El ID -19 se basa en<br />
información recogida como parte de la aplicación de la MEA o, si en los últimos tiempos no ha<br />
tenido lugar ninguna aplicación de esa metodología, sirve para orientar a los evaluadores del<br />
<strong>PEFA</strong> hacia fuentes de información y pruebas apropiadas al hacer referencia a la<br />
documentación de la MEA.<br />
3. Apoyo a la ejecución<br />
La Secretaría ha puesto en práctica varias medidas para ayudar a los usuarios a introducir<br />
estos cambios:<br />
Ayudas para los evaluadores: se han actualizado y publicado en el sitio web instrumentos<br />
como planillas de cálculo y orientaciones sobre interpretaciones y fuentes de pruebas.<br />
Materiales didácticos: en presentaciones del <strong>PEFA</strong> en todos los eventos de capacitación<br />
(y divulgación) venideros se pondrán de relieve las revisiones de los indicadores. Se<br />
actualizarán los materiales didácticos relativos a los indicadores <strong>revisados</strong> a fin de que se<br />
reflejen los cambios.<br />
Traducción: todos los materiales relativos a los indicadores <strong>revisados</strong> se traducirán al<br />
francés y español con carácter urgente y, a su debido tiempo, al ruso, portugués y árabe.<br />
4. Comparación con evaluaciones anteriores<br />
Como una proporción cada vez mayor de las evaluaciones que se están realizando<br />
actualmente son en verdad evaluaciones “reiteradas” (realizadas con la intención específica de<br />
evaluar los cambios en el desempeño del sistema de GFP desde la evaluación anterior), el<br />
Comité Directivo ha acordado que, cuando:<br />
<br />
<br />
los mismos datos numéricos sean la base fundamental para la calificación de las versiones<br />
original y revisada del indicador (como en el caso del ID-2 dimensión i), ID-3 e ID-19<br />
aspecto dimensión iii), debe exigirse que el equipo de evaluación vuelva a calcular la<br />
calificación anterior utilizando los criterios enmendados, aunque tan sólo con la finalidad<br />
de identificar la dirección del cambio en el tiempo;<br />
las pruebas necesarias para la calificación de un indicador o dimensión no sean<br />
cuantitativas (lo que sucede con algunos aspectos del ID-19), es poco probable que sea<br />
factible un planteamiento de “recálculo” (puesto que los evaluadores posteriores tal vez no<br />
puedan acceder a los datos que resultaban aplicables al momento de la evaluación anterior
pero que ahora serían necesarios ni recrearlos para cumplir con los criterios <strong>revisados</strong>), por<br />
lo tanto tal vez sea necesario llegar a la conclusión de que las calificaciones no son<br />
directamente comparables, y exigir que los evaluadores describan la situación en la parte<br />
narrativa de la evaluación.<br />
NB: En la base de datos de calificaciones de las evaluaciones que mantiene la<br />
Secretaría se identificarán los casos en que las calificaciones asignadas utilizando<br />
estos indicadores <strong>revisados</strong> no sean comparables con las de evaluaciones<br />
anteriores.<br />
El texto completo que ha de reemplazar a la redacción actual del marco de medición del<br />
desempeño del <strong>PEFA</strong> así como orientaciones adicionales para los evaluadores (incluyendo una<br />
hoja de cálculo revisada) puede consultarse en http://www.<strong>PEFA</strong>.org<br />
Secretaría del <strong>PEFA</strong><br />
28 de enero de 2011