Download tema 2 auditoría de los programas sociales en el campo de la

TEMA 2
AUDITORÍA DE LOS PROGRAMAS
SOCIALES
EN EL CAMPO DE LA EDUCACIÓN
CUESTIONARIO
Mayo de 2007
VII CONGRESO EUROSAI
Cracovia, Polonia, 2-5 de junio 2008
Introducción
Durante la reunión de 2006, el Comité Directivo de EUROSAI decidió que la
auditoría de los programas sociales debería ser uno de dos temas principales
durante el VII CONGRESO de EUROSAI que tendrá lugar en Cracovia, entre 2-5 de
junio de 2008. El Comité Directivo de EUROSAI decidió que los debates
desarrollados en el marco del dicho tema deberían centrarse en dos campos
particulares, a saber: la educación1 (Tema II) y la inserción laboral de las personas
discapacitadas (Tema III).
Por lo que se refiere al Tema II, los sistemas de educación adecuados son
importantes para solucionar los problemas sociales a largo plazo, ayudando a
conseguir unos niveles más altos de la educación de la sociedad, así como el
empleo completo. A nivel nacional la realización de los programas relacionados con
la educación suele contar con recursos significativos, pero aun así se trata de
recursos que por regla general son insuficientes. Por ello las garantías de que este
dinero se aproveche de una manera económica, eficiente y eficaz son de igual
importancia como la confirmación de la legalidad del gasto. Todas las EFS tienen en
este campo un papel importante que desempeñar.
El grupo de trabajo para el Tema II considera que los miembros de EUROSAI
sacarían provecho de un intercambio de experiencias y posibles enfoques de la
auditoría de gestión (value for money) de los programas de educación existentes en
sus respectivos países. Nuestro objetivo consiste en identificar ejemplos de buenas
prácticas en auditoría, así como determinar cómo las EFS podrían ayudarse
recíprocamente en este área, incluyendo la comparación internacional
(benchmarking) y la compartición de los indicadores de economía, eficiencia y
eficacia para las auditorías.
En el curso de las presentaciones y debates mantenidos durante el CONGRESO
intentaremos encontrar respuestas a las siguientes preguntas:
1. Cuál es el alcance de las auditorías desarrolladas por las EFS en el campo
de la educación?
2. De qué manera las EFS eligen los temas para las auditorías relacionadas
con la educación?
3. Cuáles son los métodos empleados por las EFS en las auditorías
relacionadas con la educación?
4. Cómo las EFS informan sobre sus conclusiones a los dirigentes y a los
beneficiarios de los programas de educación para maximizar el impacto de
las auditorías que desarrollan?
La encuesta que se incluye a continuación consta de una serie de preguntas
agrupadas en cuatro bloques (relacionados con las preguntas que se citan arriba)
1
Los programas sociales en educación deben interpretarse de una manera amplia, como todas aquellas
actividades que son emprendidas por los países miembros para cumplir con sus obligaciones, definidas en la ley,
de proporcionar educación a sus ciudadanos. En algunos países la característica y el alcance de tales actividades,
el calendario de la implementación de las mismas, así como las fuentes de la financiación pueden detallarse no
sólo en los actos legales, sino también en documentos de otro tipo que suelen llevar la denominación de una
estrategia, plan, programa, etc.
1
VII CONGRESO EUROSAI
Cracovia, Polonia, 2-5 de junio 2008
que deben ser contestadas por cada uno de los miembros de EUROSAI. La Parte 1
de la encuesta requiere información detallada sobre las respectivas auditorías
relacionadas con la educación que han sido realizadas por le entidad fiscalizadora
superior en el curso de los últimos tres años (2004-2006). Las Partes 2-4 tienen que
ver con las prácticas y procedimientos aplicados en las auditorías del sector de
educación en el país de la EFS en cuestión.
El análisis de los datos procedentes de las encuestas, rellenadas y devueltas, se
aprovechará, como material básico, para preparar el Informe final, presentaciones y
otros materiales para el VII CONGRESO de EUROSAI (Tema II).
Tomas las preguntas relacionadas
Grzegorz_Buczynski@nik.gov.pl
con
la
encuesta
deben
dirigirse
a:
Cuestionario
Parte 1.
Cuál es el alcance de las auditorías desarrolladas por las EFS
en el campo de la educación?
El objetivo de esta parte de la Encuesta consiste en proporcionar información
general sobre:
•
el sistema actual de la educación pública, así como el nivel del gasto público
en las actividades principales desarrolladas por los Departamentos / órganos
implicados;
•
el alcance en que las EFS desarrollan las auditorías en el campo de la
educación.
Se ruega que dentro de esta Parte:
.1.
Presenten un resumen de las bases legales para el sistema de educación
de su país, así como para los programas / actividades relacionadas con la
educación. Se ruega, también, que a medida de lo posible proporcionen
información sobre los niveles del gasto público relacionado con los
programas / actividades de educación particulares.
.2.
Presenten información sobre la cifra total del gasto público destinado
para el conjunto de todos los niveles de educación en el año 2006
(importe global) y la participación de este gasto en el Producto Interior
Bruto (PIB) (porcentaje).
.3.
Presenten información resumida en forma de un cuadro (véase el modelo:
el cuadro 1 del Anexo 1)2 acerca de las auditorías más importantes en el
2
El Anexo contiene información sobre dos auditorías ejemplo en el campo de la educación.
2
VII CONGRESO EUROSAI
Cracovia, Polonia, 2-5 de junio 2008
área de la educación que fueron realizadas por su EFS en el período de
los últimos tres años (2004-2006):
1 Título del informe post-auditoría y fecha de publicación des informe final (mes
y año).
2 Tipo de la auditoria (regularidad, certificación, economía, eficiencia y eficacia,
otros).
3 Objetivos y alcance de la auditoría.
4 Tipo y numero de entidades controladas (por ejemplo, parvularios, escuelas
estatales y/o privadas, nivel de educación – primario, segundario, superior,
vocacional, agencias estatales responsables de la educación)
5 Princicpales indicadores de economia, eficiencia y eficacia utilizados3 (véase
anexo 2 – indicadores ejemplo).
6 Principales conclusiones y recomendaciones (véase anexo 3 –irregularidades
ejemplo/puntos flacos).
7 Resultados concretos obtenidos en consecuencia de la auditoría.
8 Enlaces para los informes, indicando el idioma en el que están accesibles.
.4.
Indiquen las auditorías en el área de la educación previstas para el futuro
(años 2007-2009):
........................................................................................................................................
3
Indicadores de medida del alcance y de la escala de los resultados logrados en la educación así como de los
gastos relacionados con la educación de fuentes públicas en el contexto de economía, eficiencia y eficacia.
3
VII CONGRESO EUROSAI
Cracovia, Polonia, 2-5 de junio 2008
Parte 2.
De qué manera las EFS eligen los temas para las auditorías
relacionadas con la educación?
El objetivo de esta parte de la Encuesta consiste en identificar cómo:
• las EFS adquieren el conocimiento de los problemas más importantes
relacionados con la educación en su país,
• las EFS toman en consideración varias posibles perspectivas de dichos
problemas (la perspectiva del ciudadano, de la región, del país, etc.),
• las EFS identifican las actividades del Gobierno en materia de educación
cargadas de mayor riesgo y qué tipos de riesgo tienen que tenerse en cuenta
por ser los más importantes.
2.1 Cuáles son las premisas más frecuentes para elegir los temas de la
auditoría (enumeren las respuestas que aparecen a continuación, de 1 –la
menor frecuencia, a 10– la mayor frecuencia)?
 Seguimiento por parte de la EFS.
 Irregularidades detectadas en la auditoría financiera desarrollada por la EFS.
 Encargo formal del Parlamento.
 Sugerencia del Parlamento.
 Sugerencia de un diputado particular al Parlamento.
 Sugerencia del Gobierno.
 Cartas de los ciudadanos.
 Alto interés de parte de los medios de comunicación.
 Peticiones de parte de organizaciones (terceras partes, órganos de auditoría).
 Otros (precisen, por favor ...).
2.2. Cuáles son las fuentes de información (excepto información procedente de
las entidades controladas) que aprovechan a la hora de planificar las
auditorías?
 Información estadística.
 Datos de la prensa especializada.
 Información de los medios de comunicación de carácter general.
 Materiales de las conferencias sectoriales
 Resultados publicados de las encuestas.
4
VII CONGRESO EUROSAI
Cracovia, Polonia, 2-5 de junio 2008
 Encuestas / consultas de las terceras partes implicadas.
 Otras fuentes (precisen, por favor ……..).
2.3. Cuáles son los criterios que se utilizan con más frecuencia a la hora de
evaluar los asuntos relacionados con la educación (enumeren por favor, de 1 a
4, en el orden de la importancia)?
 Economía
 Eficiencia.
 Eficacia.
 Conformidad / legalidad.
 Otros (precisen, por favor …...).
2.4. Indiquen por favor cuáles son los factores de riesgo más importantes
desde el punto de vista de la elección del tema de la auditoría.
 Volumen de los recursos destinados para un programa.
 Objetivos poco claros o conflictivos en el marco de un programa.
 Procedimientos de implementación poco claros o complicados.
 Presión política o administrativa de los beneficiarios u otras partes implicadas.
 Recursos humanos insuficientes o incompetentes.
 Falta de los indicadores de realización y medidas para la evaluación del
programa.
 Interés significativo de parte de los medios de comunicación.
 Riesgo de fraude.
 Impacto del programa perceptible únicamente a largo plazo.
 Otros (precisen, por favor ...).
5
VII CONGRESO EUROSAI
Cracovia, Polonia, 2-5 de junio 2008
Parte 3.
Cuáles son los métodos empleados por las EFS en las auditorías
relacionadas con la educación?
El objetivo de esta parte de la Encuesta consiste en identificar cuáles son los
métodos de control que resultan más útiles en las auditorías realizadas en el área de
la educación.
3.1 Existen diferencias sustanciales de metodología entre las auditorías
realizadas en el área de la educación y otras áreas?
 No.
 Sí.
En caso que sí, citen ejemplos concretos de tales diferencias.
3.2 Cuáles son los métodos que emplea su EFS al realizar las auditorías en el
área de educación?
 Grupos de enfoque4
 Encuestas.
 Entrevistas.
 Revisión de documentos.
 Análisis de datos secundarios.
 Dictámenes de expertos externos.
 Panel de expertos5.
 Revisión de los resultados de las auditorías internas.
 Benchmarking.
 Otros (precisen, por favor ...).
3.3. Cómo su EFS obtiene información de los beneficiarios de los programas
relacionados con la educación?
4
Un grupo de enfoque se compone de individuos seleccionados a este propósito, quienes tienen una experiencia
u otra característica en común. Se trata de un método aprovechado, por lo general, para proporcionar una opinión
cualitativa sobre las razones que están detrás de los datos estadísticos. (La estadística puede decir “cuál” es la
situación actual, mientras que un grupo de enfoque puede explicar “por qué” es así.).
5
Un panel de expertos es un grupo de representantes de los organismos implicados quienes tienen conocimientos
o interés en un tema particular sometido a la evaluación. Los miembros del panel no necesariamente tienen que
ser “expertos” y el grupo puede incluir, por ejemplo, a catedráticos y representantes de asociaciones de
consumidores, el sector privado u organizaciones de la tercera parte. El objetivo del panel consiste en asegurar
“la comprobación de la realidad” en distintas etapas del trabajo (por ejemplo, al planificar la auditoría y hacia el
final de la misma, en el momento cuando la EFS está elaborando las recomendaciones).
6
VII CONGRESO EUROSAI
Cracovia, Polonia, 2-5 de junio 2008
 Encuestas de la opinión pública.
 Debates de los grupos de enfoque.
 Debates en los foros de internet.
 Invitaciones abiertas a contactar con la EFS.
 Otros (precisen, por favor ...).
3.4.1. Aprovecha su EFS indicadores básicos de realizaciones en las auditorías
en el área de la educación?
 No.
 Sí, la EFS elabora indicadores para responder a las necesidades de las
respectivas auditorías.
 Sí, la evaluación se efectúa a partir de los indicadores definidos en los actos
legales u otros documentos que determinan la política en materia de
educación (estrategias, planes, programas, etc.).
 Sí, la evaluación se efectúa a partir de los indicadores definidos por otras
instituciones (precisen, por favor, de qué instituciones se trata ...).
3.4.2. En caso de responder “sí” a la pregunta 3.4.1. se ruega que expliquen si
se trata de unos indicadores definidos separadamente para cada uno de los
tres criterios de la auditoría („los tres Es”, a saber: la economía, la eficiencia,
la eficacia).
 Sí, definimos unos indicadores particulares para cada uno de los tres criterios
de la auditoría.
 Sí, pero elaboramos indicadores únicamente para uno o dos criterios
(precisen, por favor ...).
 No, no nos referimos de manera particular a los tres Es a la hora de elaborar
los indicadores adecuados.
3.5. Cuál es su valoración general de la cercanía de las relaciones de trabajo de
su EFS con las entidades sujetas a la auditoría?
 Es una relación muy cercana (les implicamos en la preparación de nuestra
auditoría e intentamos convencerles de nuestras soluciones durante toda la
auditoría).
 Es una relación cercana (no les implicamos en la preparación de nuestra
auditoría, pero siempre que sea posible tenemos en cuenta sus opiniones en
el curso de la auditoría y durante la preparación del informe).
 Es una relación lejana (nuestro contacto principal tiene lugar cuando les
presentamos el borrador del informe una vez terminado nuestro trabajo).
Por favor, pueden añadir cualquier comentario sobre el tema en cuestión.
7
VII CONGRESO EUROSAI
Cracovia, Polonia, 2-5 de junio 2008
3.6. Colabora su EFS con otros órganos de inspección / control (incluyendo
departamentos de auditoría interna) en la evaluación de las cuestiones
relacionadas con la educación?
 Sí, desarrollamos auditorías conjuntas (por favor, precisen de qué órganos se
trata y cómo se materializa la colaboración).
 Sí, analizamos los datos e informes preparados por otros órganos de
inspección / control, como parte del proceso de recogida del material de la
auditoría.
 No, nos fiamos únicamente en las investigaciones y análisis propias de la
EFS.
3.7. Aprovecha con regularidad su EFS las comparaciones internacionales
(benchmarking) como fuente de pruebas y buenas prácticas?
 No, nunca.
En caso que no, ¿por qué?
 Sí, de vez en cuando.
 Sí, con regularidad.
En caso que sí, ¿cuáles son, en su opinión, los principales provechos de
dichas comparaciones internacionales?
8
VII CONGRESO EUROSAI
Cracovia, Polonia, 2-5 de junio 2008
Parte 4.
Cómo las EFS informan sobre sus comprobaciones a los dirigentes
y a los beneficiarios de los programas de educación para
maximizar el impacto de las auditorías que desarrollan?
Mediante esta parte de la Encuesta intentamos averiguar cómo las EFS facilitan sus
comprobaciones y recomendaciones a los órganos apropiados del sector público, así
como al público mismo, para maximizar el impacto y el valor añadido de su trabajo.
Además, en esta parte de la Encuesta queremos recoger la información acerca de la
evaluación que hacen las propias EFS de la eficacia / impacto de sus auditorías.
4.1 Cómo su EFS suele informar sobre sus comprobaciones y
recomendaciones incluidas en los informes de auditoría relacionados con la
educación?
 Publicación en formato papel.
 Publicación en internet.
 Publicación de un resumen del informe.
 Ruedas de prensa con los medios de comunicación.
 Notas de prensa.
 Entrevistas para los medios de comunicación.
 Presentación durante una conferencia dedicada al tema en cuestión.
 Otros (precisen, por favor ...).
4.2 Cuáles son los órganos que habitualmente reciben los informes finales de
las auditorías?
 Jefe del Estado.
 Parlamento.
 Gobierno.
 Órganos de las autoridades autónomas.
 Entidades controladas.
 Organizaciones interesadas.
 Medios de comunicación.
 Otros (precisen, por favor ...).
4.3 Cómo las propias EFS evalúan el impacto de su trabajo?
 Revisión de las publicaciones en los medios de comunicación (volumen).
 Revisión de los medios de comunicación (características).
9
VII CONGRESO EUROSAI
Cracovia, Polonia, 2-5 de junio 2008
 Revisión de los cambios consiguientes de la normativa / políticas relacionadas
con las recomendaciones de la auditoría.
 Valor de los recursos públicos ahorrados en consecuencia del trabajo de la
EFS.
 Seguimiento de la implementación de las recomendaciones de la auditoría.
4.4 Qué es lo que hace su EFS para que sus informes de auditoría sean
„amistosas para el lector”?
 Ilustraciones fotográficas.
 Uso de ventanillas de texto (text boxes).
 Uso de gráficos.
 Reducción de la longitud de los informes.
 Uso de un registro comprensible.
 Breves resúmenes de las coclusiones más importantes / recomendaciones (a
modo de una síntesis).
 Uso de casos típicos en función de ejemplos.
 Otros (precisen, por favor ...).
4.5 De qué manera garantiza su EFS el valor añadido de sus auditorías en la
educación?
 Difundiendo buenas prácticas mediante casos típicos en función de ejemplos.
 Proporcionando nuevos datos acerca del área sometida a la auditoría.
 Recomendando modificaciones de las regulaciones legales existentes.
 Otros (precisen, por favor ...).
Se ruega se sirvan de este espacio para hacer otros comentarios relacionados
con cualquiera de los aspectos de las auditorías en el campo de la educación
realizadas por su EFS en los años 2004-2006, o previstas para los años 20072009.
10
Anexo 1: Auditorías mas importantes relacionadas con la educación realizadas por la entidad fiscalizadora superior
durante los tres últimos años (2004-2006) – dos ejemplos de auditoria relacionados con la educación.
Título de la auditoría y fecha de la publicación
Tipo
de la
auditoría
Alcance
de la auditoría
y los objetivos
de la misma
1
2
Tipo y número
de las
entidades
controladas
(selección
de la muestra)
3
Indicadores
de economía,
eficiencia y eficacia
utilizados durante la
auditoría
Conclusiones principales de
la auditoría
Recomendaciones
principales
de la auditoría
Impacto de la
auditoría
4
5
6
7
60,2% de los niños elegibles (en
la edad de 3-6 años) asistía a
los centros de educación
preescolar (la media de la UE:
80%).
Cada municipio
debe tener al menos
un centro de
educación
preescolar público.
Elaboración de un
programa plurianual
de la educación
preescolar.
En cuanto a las edades de 3-5
años, la proporción de los niños
que asistían a los centros
preescolares estaba por debajo
del 50%.
La autoridades
municipales deben
hacer un uso más
efectivo de sus
competencias de
supervisión
(supervisión
financiera y
administrativa).
Enlaces
para los informes
de la auditoría
(indicar el idioma
en el que están
redactados)
8
Ejemplo 1. Alcance y tipos de la educación preescolar (julio de 2004)
Regularid
ad,
economía
,
eficiencia
y eficacia
Evaluación de cómo
los municipios
cumplen con su
obligación de
proporcionar
educación
preescolar.
En cuanto al
alcance, la auditoría
incluía la evaluación
de la situación,
estructura, alcance y
financiación de la
educación
preescolar a nivel de
municipio, así como
la supervisión de la
misma por parte de
las autoridades
municipales.
40 municipios,
incluyendo 24
municipios
rurales
Número de los niños
en las edades entre 3
y 6 años que asisten
a los centros de
educación preescolar,
comparado con el
número total de los
niños en la edad
preescolar (el valor
del indicador para el
nivel nacional, zonas
rurales y municipios).
En el 20% de los municipios
encuestados no se
proporcionaba educación
preescolar.
Irregularidades en subvenciones
otorgadas a los centros de
educación preescolar privados
(en 54% de municipios).
La supervisión insuficiente de la
educación preescolar (en 80%
de municipios).
Asegurar
subvenciones para
centros de
educación
preescolar privados.
Introducción de
diversas fórmulas de
organización de los
centros de
educación
preescolar públicos.
www.nik.gov.pl
(en polaco)
VII CONGRESO EUROSAI
Cracovia, Polonia, 2-5 de junio 2008
Título de la auditoría y fecha de la publicación
Tipo
de la
auditoría
Alcance
de la auditoría
y los objetivos
de la misma
1
2
Ejemplo 2. Condiciones
Auditoría
de la
regularid
ad y
auditoria
de
economía
,
eficiencia
y eficacia
Tipo y número
de las
entidades
controladas
(selección
de la muestra)
3
Indicadores
de economía,
eficiencia y eficacia
utilizados durante la
auditoría
Conclusiones principales de
la auditoría
Recomendaciones
principales
de la auditoría
Impacto de la
auditoría
4
5
6
7
Enlaces
para los informes
de la auditoría
(indicar el idioma
en el que están
redactados)
8
de enseñanza de los idiomas extranjeros en las escuelas públicas (noviembre 2005)
Evaluación de la
organización de la
enseñanza, de las
cualificaciones de
los profesores, de
las salas y de sus
soportes didácticos
67 escuelas
públicas
(primarias,
segundarias y
de formación
profesional en
todas los
voivodatos de
Polonia)
Número de niños en
la clase.
Número de lecciones
del idioma extranjero
por semana
Estándar
de
equipamiento de las
salas de idiomas
extranjeros
En las escuelas primarias la
enseñanza de los idiomas
extranjeros empieza demasiado
tarde.
El número de las lecciones de
los idiomas extranjeros por
semana es débil.
Demasiados alumnos en la
clase (en 54% de las escuelas).
Cualificaciones lingüísticas y
pedagógicas de los profesores
de idiomas extranjeros
insuficientes (49% de las
escuelas)
Elección inadecuada de los
programas de enseñanza (en
13% de las escuelas ) y de los
manuales (22% de las escuelas)
Comienzo de la
enseñanza de los
idiomas extranjeros
en la escuela
primaria – primer
idioma a partir de la
a
1 clase, el segundo
idioma – en la clase
siguiente.
Asegurar las
cualificaciones
adecuadas de los
profesores de
idiomas extranjeros.
Equipamiento de las
salas de idiomas
extranjeros en los
soportes didácticos
adecuados.
Introducción de la
enseñanza
obligatoria de un
idioma extranjero a
a
partir de la 1 clase
de la escuela
primaria en 60% de
las escuelas (en las
demás en el curso
de 2 años)
Introducción de la
enseñanza
obligatoria del
segundo idioma
extranjero a partir de
a
la 4 clase de la
escuela primaria.
Revisión de los
programas de
enseñanza de los
idiomas extranjeros
y de los manuales
utilizados.
Actualización de los
programas de
enseñanza para los
profesores de
idiomas extranjeros.
12
www.nik.gov.pl
(en polaco)
VII CONGRESO EUROSAI
Cracovia, Polonia, 2-5 de junio 2008
13
Anexo 2: Posibles indicadores de realización –ejemplos.
 Popularización de la educación preescolar (número de los niños que participan
en la educación preescolar en relación al número total de los niños en la edad
preescolar).
 Porcentaje de los niños que participan en distintas formas de la educación
preescolar en zonas rurales y urbanas (a tiempo completo o a tiempo parcial).
 Coeficiente de escolarización (relación entre el número de personas que cursan
un nivel determinado de estudios y el número total de personas cuya edad
corresponde a este nivel de estudios).
 Número de profesores desglosado por categorías profesionales.
 Gasto público por tipos y niveles de educación (escuelas públicas, autonómicas y
privadas).
 Porcentaje de estudiantes y
relacionadas con la educación.
alumnos
que reciben ayudas
financieras
 Indicador porcentual de aprovechamiento de los recursos financieros destinados
a las ayudas financieras para estudiantes y alumnos.
 Volumen de fondos destinados a las respectivas formas de ayuda financiera para
estudiantes y alumnos.
Anexo 3: Ejemplos de irregularidades / riesgos.
 Incorrecciones de la programación y planificación.
 Regulaciones legales inadecuadas.
 Uso ineficiente de los recursos públicos.
 Corrupción.
 Falta del personal debidamente cualificado.
 Deficiencias en cuanto a la infraestructura o equipamiento especializado.
 Falta de supervisión o supervisión insuficiente por parte de los órganos públicos
nacionales y autónomos.