Sonderbericht Nr. 15/98 über die Bewertung der Strukturfonds-Interventionen in den Zeiträumen 1989-1993 und 1994-1999, zusammen mit den Antworten der Kommission (Vorgelegt gemäß Artikel 188c Absatz 4 Unterabsatz 2 des EG-Vertrags)

Sonderbericht Nr. 15/98 über die Bewertung der Strukturfonds-Interventionen in den Zeiträumen 1989-1993 und 1994-1999, zusammen mit den Antworten der Kommission (Vorgelegt gemäß Artikel 188c Absatz 4 Unterabsatz 2 des EG-Vertrags) Amtsblatt Nr. C 347 vom 16/11/1998 S. 0001 - 0047 SONDERBERICHT Nr. 15/98 über die Bewertung der Strukturfonds-Interventionen in den Zeiträumen 1989-1993 und 1994-1999, zusammen mit den Antworten der Kommission (Vorgelegt gemäß Artikel 188c Absatz 4 Unterabsatz 2 des EG-Vertrags) (98/C 347/01) 1. EINLEITUNG 1.1. Bei der Reform der Strukturfonds (SF) von 1988 wurden die Kommission und die Mitgliedstaaten zur Bewertung der europäischen strukturpolitischen Maßnahmen verpflichtet.

Mit den 1993 im Rahmen der Überarbeitung der Strukturfondsreform geänderten Rechtsvorschriften (1994-1999) sowie mit den Standardklauseln der neuen gemeinschaftlichen Förderkonzepte (GFK) und der einzigen Programmplanungsdokumente (PPD) wurde diese Verpflichtung zur Bewertung noch verstärkt. 1.2. Bei der Bewertung, die für eine reibungslose Verwaltung der SF unerläßlich ist, handelt es sich gemäß den wichtigsten Verordnungsbestimmungen (1) um eine Beurteilung der Wirksamkeit unter drei Gesichtspunkten: a) Gesamtauswirkung der Strukturmaßnahmen auf die in Artikel 130a des Vertrages genannten Ziele; b) Gesamtauswirkung der in den GFK vorgesehenen Aktionen; c) spezifische Auswirkung der einzelnen operationellen Maßnahmen (Programme und andere Interventionsformen).

1.3. Die Bewertung umfaßt hauptsächlich drei Phasen: a) Bei der Vorausbeurteilung (2) werden einerseits die zu lösenden sozioökonomischen Probleme und die zu erreichenden Ziele korrekt ermittelt, andererseits wird die für diese Aufgabe angesichts der vorhandenen Mittel anzuwendende Strategie festgelegt. b) Bei der Zwischenbewertung kann während der Durchführung eines Programms geprüft werden, ob die Ziele noch angemessen sind und der richtige Weg zur Erreichung der angestrebten Ergebnisse eingeschlagen wurde. c) Bei der nach Beendigung des Programms durchgeführten Ex-post-Bewertung wird analysiert, ob die erzielten Ergebnisse und Wirkungen als positiv zu betrachten sind.

Dabei ist zu beachten, daß die langfristigen Auswirkungen einer Strukturmaßnahme erst mehrere Jahre nach ihrem Abschluß erfaßt werden können. 1.4. In den Rechtsvorschriften in der geänderten Fassung von 1993 wird unterstrichen, daß die Bewertung sowohl den Mitgliedstaaten als auch der Kommission obliegt und in den Rahmen der Partnerschaft fällt (3). In diesem Zusammenhang ergriff die Kommission bei der Gestaltung und allgemeinen Koordinierung der Bewertung die Initiative. Außerdem legt sie nach Artikel 16 der Verordnung (EWG) Nr. 2052/88 alle drei Jahre einen Bewertungsbericht vor, in dem die bei der Verwirklichung des wirtschaftlichen und sozialen Zusammenhalts erzielten Fortschritte und die entsprechenden Beiträge insbesondere der Fonds und der nationalen Kofinanzierung festgehalten sind.

2. PRÜFUNGSUMFANG 2.1. Allgemeines Ziel der Untersuchung des Hofes (4) war die Prüfung der im Bereich der Bewertung der Strukturmaßnahmen der Gemeinschaft auf der Ebene der Bewertungssysteme und -verfahren und auf methodischer Ebene erzielten Fortschritte. Die Prüfung bezog sich auf die Einzelheiten der sowohl seitens der Kommission als auch im Rahmen der Partnerschaft durchgeführten Bewertung der Strukturmaßnahmen. Außerdem wurden die rechtmäßige und ordnungsgemäße Verwendung der aus dem Haushaltsplan der Europäischen Gemeinschaften für die Bewertung bereitgestellten Mittel sowie die Qualität der Mittelbewirtschaftung untersucht.

2.2. Ferner wurden die Techniken zur Bewertung der sozioökonomischen Auswirkungen der Strukturmaßnahmen beurteilt. Obwohl die Programme, die zu neuen wissenschaftlichen Ergebnissen führten, bei dieser Untersuchung nicht direkt bewertet werden sollten, werden doch einige dieser von Fachleuten festgestellten Ergebnisse angeführt, um das Verhältnis zwischen den eingesetzten wirtschaftspolitischen Instrumenten und den erzielten Ergebnissen besser auszuleuchten. 2.3. Spezifische Untersuchungen bezogen sich auf die Ex-post-Bewertungen der unter die Ziele 1 und 2 fallenden GFK und operationellen Programme (OP) des Programmplanungszeitraums 1989-1993 und auf die Zwischenbewertungen der GFK, PPD und OP des Programmplanungszeitraums 1994-1999.

Es wurden sämtliche Ex-post-Bewertungen der unter Ziel 1 fallenden GFK des Zeitraums 1989-1993 sowie rund 20 % der unter Ziel 2 fallenden Ex-post-Bewertungsberichte der GFK 1989-1993 und 15 % der Zwischenbewertungsberichte der GFK 1994-1999 berücksichtigt, die nach ihrer geographischen Verteilung und der Art der Interventionen (GFK, PPD, OP) ausgewählt wurden. Im übrigen wurden 15 der 25 hauptsächlich makroökonomische Aspekte behandelnden Bewertungsberichte analysiert. Die Untersuchung fand in der Kommission und in acht Mitgliedstaaten (Belgien, Frankreich, Griechenland, Irland, Italien, Niederlande, Portugal und Spanien) statt, wo die Bewerter und die Verantwortlichen in den zuständigen nationalen Behörden konsultiert wurden.

3. WICHTIGSTE BEMERKUNGEN 3.1. Die Entwicklung und breitere Anwendung der Bewertung vollzogen sich auf Betreiben der Kommission hauptsächlich im Programmplanungszeitraum 1994-1999, und zwar insbesondere im Rahmen des EFRE. Seit diesem Programmplanungszeitraum 1994-1999 wird die Bewertung systematisch in den beiden ersten Phasen (Ex-ante-Phase und Zwischenphase) durchgeführt und wird auch am Ende des Zeitraums (in der Ex-post-Phase) zur Anwendung kommen (siehe Ziffern 4.2-4.8). 3.2. Die Kommission kennt zwar die Höhe ihrer direkten Ausgaben für die Bewertung, ist jedoch nicht immer umfassend über die Ausgaben für die im Rahmen der Partnerschaft stattfindende Bewertung informiert (siehe Ziffern 4.9-4.11).

3.3. Die Kommission hat einen wichtigen Beitrag zur Verbreitung der Bewertungskultur geleistet, obwohl sie in ihrem Programm "Methoden zur Bewertung der strukturpolitischen Aktionen" (MEANS) nicht genau genug festgelegt hat, welche Bewertungsindikatoren und -methoden anzuwenden sind. Angesichts der Komplexität der mit der Bewertung verbundenen methodischen Aspekte gibt es keine einheitliche Methodik, die sich in jeder spezifischen Situation anwenden ließe. Die Kommission sollte jedoch in der Lage sein, einen methodischen Rahmen vorzugeben, der bei der Durchführung von an spezifische Situationen angepaßten Bewertungen eine angemessene Orientierungshilfe bildet (siehe Ziffern 4.12-4.13).

3.4. Die Qualität der Indikatoren steht in engem Zusammenhang mit der Zuverlässigkeit der bei der Begleitung der Interventionen ermittelten Angaben und der vorhandenen statistischen Datenbanken. Letztere fallen unter die Zuständigkeit der Mitgliedstaaten und sind oft unzulänglich; die Mitgliedstaaten sollten für qualitative Verbesserungen sorgen (siehe Ziffern 4.14-4.21). 3.5. Viele Bewertungen werden mit Verspätung abgeschlossen, so daß sich die Anpassungen der Programme entsprechend verzögern können. Im übrigen könnten die Bewertungsergebnisse zur Leistungsfähigkeit oder Wirksamkeit der Interventionsformen bei den Entscheidungen über die Änderung der Programmplanung bessere Berücksichtigung finden (siehe Ziffern 4.22-4.27).

3.6. Was die Objektivität der Bewertungen angeht, wird die Stimmigkeit und Zuverlässigkeit der Indikatoren oder der ihnen zugrunde liegenden Systeme von der Kommission nicht an Ort und Stelle kontrolliert (siehe Ziffern 4.29-4.30). 3.7. Die Verfahren zur Vergabe von Berateraufträgen im Bereich der Bewertung weisen auf Kommissionsebene noch erhebliche Schwachstellen auf. Die Auswahl der Berater wird nicht immer klar begründet. Die Lastenhefte sind im Hinblick auf die methodische Vorgehensweise, die Indikatoren und die Zielvorgaben sehr allgemein gehalten. Dadurch ergeben sich Verzögerungen und Störungen bei der Erstellung der Bewertungsberichte, eine uneinheitliche Analysequalität und bisweilen vage Empfehlungen (siehe Ziffern 4.31-4.36).

3.8. Die Anwendung der für die Ex-post-Bewertungen der Ziele 1 und 2 1989-1993 vorgesehenen Methoden wurde durch lückenhafte Statistiken, fehlende quantifizierte Ziele und Vorhersageindikatoren und eine ineffiziente Begleitung der Auswirkungen beeinträchtigt und erfolgte nicht immer mit der nötigen Strenge. Diese Bewertungen zeigten jedoch dennoch sowohl im Hinblick auf Durchführung, Ergebnisse und Auswirkungen der GFK, OP und Maßnahmen als auch im Hinblick auf die Programmplanung, Organisation, Begleitung, Koordinierung, Partnerschaft und Zusätzlichkeit eine ergänzende und verstärkende Wirkung der Strukturmaßnahmen der Gemeinschaft (siehe Ziffern 4.15-4.19, 5.1, 5.4 und 5.10-5.16).

3.9. Bei den partnerschaftlich im Rahmen der Begleitausschüsse vorgenommenen Zwischenbewertungen der SF-Interventionen des Zeitraums 1994-1999 wird den verschiedenen Bewertungszielen unterschiedliche Priorität gegeben. Die Untersuchung des materiellen und finanziellen Durchführungsstands nimmt jedoch bei allen Zwischenbewertungen einen wichtigen Platz ein. Die Bewertung der Auswirkungen wird insbesondere durch Probleme mit den Indikatoren und bei der modellmäßigen Erfassung der Auswirkungen beeinträchtigt. Der Nutzen dieser Bewertungen im Entscheidungsprozeß, bei der Verwaltung der Vorhaben, bei der Änderung der Programmplanung und bei der Vorbereitung zukünftiger Interventionen ist immer noch recht beschränkt (siehe Ziffern 4.16-4.21, 6.5, 6.7 und 6.14-6.26).

3.10. Speziell im Hinblick auf Ziel 2 (Z2) wurden bei der Bewertung insbesondere folgende Schwachstellen festgestellt: a) Mißverhältnis zwischen dem Durchführungsstand der Programme und der Gemeinschaftsfinanzierung, da weiterhin erhebliche Mittel von einem Programm auf das nächste übertragen werden (in der Größenordnung von durchschnittlich 12 % beim Übergang vom Zeitraum 1994-1996 auf den Zeitraum 1997-1999) (siehe Ziffer 6.27). b) Die Aufeinanderfolge der kurzen Programmplanungszeiträume ermöglicht keine optimale Nutzung der Bewertungsergebnisse (siehe Ziffer 4.23). c) Bei der Ermittlung der Auswirkungen der Strukturinterventionen, insbesondere im Hinblick auf die Beschäftigung, werden indirekte Effekte noch nicht ausreichend gemessen (siehe Ziffern 5.12-5.15).

3.11. Die makroökonomischen Bewertungen führten insbesondere im Hinblick auf die Auswirkungen der Strukturmaßnahmen zu positiven Ergebnissen (Erhöhung des BIP, Auswirkungen auf Angebot und Nachfrage, Verbesserung der Beschäftigungslage und der Konvergenz, Wirksamkeit der GFK-Instrumente), obwohl die Programmplanungs-, Durchführungs- und Begleitsysteme Mängel aufwiesen (siehe Ziffern 7.1-7.14). 3.12. Die Bewertungen von Unterprogrammen oder Maßnahmen sind weiterhin unzulänglich. Im übrigen treten dabei wegen der Streuung und mangelnden Kohärenz vieler Maßnahmen und Unterprogramme technische Schwierigkeiten auf (siehe Ziffer 7.17).

4. ALLGEMEINE PROBLEME Einleitung 4.1. Ziel der Bewertung ist die Ermittlung der sozioökonomischen Auswirkungen der durchgeführten Aktionen, d. h. die Untersuchung der erzielten Ergebnisse, ihr Vergleich mit den eingesetzten Mitteln und die Analyse der Kosten. Außerdem müssen all diese Punkte mit den entsprechenden Vorhersagen verglichen werden. Für diese Bewertungsaufgabe bedarf es einer guten statistischen Basis, quantifizierter Ziele, die auf der Grundlage eines Systems von Indikatoren erstellt wurden, und der Entwicklung eines methodischen und analytischen Rahmens. Gleichzeitig muß der Bewertung eine Analyse des Verhältnisses zwischen den eingesetzten Mitteln, den Endergebnissen und den Zwischenergebnissen zugrunde liegen.

Der Hof hat auf all diesen Ebenen Mängel aufgedeckt, die den Nutzen der im Rahmen der Strukturfonds durchgeführten Bewertungen bisher beschränkt haben. Dabei konnten durchaus echte Fortschritte festgestellt werden, die zur Stärkung des Bewertungsverfahrens beitrugen. 4.2. Seit der Reform von 1988 fällt die Bewertung ausdrücklich in den Rahmen der Partnerschaft (Artikel 26 der Verordnung (EWG) Nr. 4253/88 - mit genaueren Ausführungen in der geänderten Verordnung vom 20. Juli 1993). Im ersten Programmplanungszeitraum (bis 1995) wurden die Bewertungen jedoch in erster Linie auf Initiative der Kommission durchgeführt (5).

Diese Bewertungen - insbesondere die Ex-post-Bewertungen - wurden durch unpräzise Entwicklungsstrategien und eine unbefriedigende Begleitung erschwert; im übrigen wurden sie im allgemeinen von den Begleitausschüssen nicht wirklich berücksichtigt oder ausführlich besprochen. 4.3. Die Kommission sorgte zunächst vor allem für die Einrichtung ihres eigenen Bewertungssystems für sämtliche unter die fünf vorrangigen Ziele der Reform fallenden GFK (6). Zu den Kommissionsinitiativen im Zusammenhang mit der Entwicklung der Bewertung und der Bewertungsmethoden gehören insbesondere die Einrichtung der Fachgruppe "Bewertung der Regionalpolitik" im Jahre 1992 und auf methodischer Ebene die Einleitung des Programms "Methoden zur Bewertung der strukturpolitischen Aktionen" (MEANS) im Jahre 1994.

4.4. Für den Programmplanungszeitraum 1994-1999 entwickelte die Kommission im Bereich der Bewertung neue Tatkraft, so daß nun in den beiden ersten Phasen (vor der Durchführung und während der Durchführung) und später in der Ex-post-Phase systematisch Bewertungen stattfinden. 4.5. Die Zwischenbewertung ist zwar in den Strukturfondsverordnungen nicht ausdrücklich vorgesehen, wurde jedoch ab 1995-1996 bei allen GFK, PPD und OP des Programmplanungszeitraums 1994-1999 durchgeführt. Sie fällt ganz konkret in den Rahmen der Partnerschaft und kann daher von den Begleitausschüssen zu einem Instrument der integrierten Verwaltung gemacht werden.

Damit trägt sie zur weiten Verbreitung der Bewertungskultur bei. Die Kommission hat für die Durchführung der Zwischenbewertung in den Mitgliedstaaten schrittweise ein Verfahren entwickelt (7). 4.6. Dabei machte sie jedoch keine genauen Angaben zu den konkreten Verfahrensmodalitäten (genaue Beschreibung des Lastenhefts, Kriterien für die Auswahl des Bewerters, Struktur des Bewertungsberichts, Erfassung der Angaben, geforderte Qualitätsnormen, Zeitplan usw.). 4.7. Parallel organisierte die Kommission mehrere Veranstaltungen (8), die durch zahlreiche Veröffentlichungen ergänzt wurden. Diese Veranstaltungen, auf denen die Bewertungsfachleute mit den mittelbewirtschaftenden Stellen der Strukturfonds zusammentrafen, trugen dazu bei, die Bewertungskultur zu entwickeln und die mittelbewirtschaftenden Stellen für dieses Thema zu sensibilisieren.

Die Bewertung wurde im wesentlichen als erfahrungsbedingter Lernprozeß dargestellt. 4.8. Die Kommission legte im Mai 1998 im Zusammenhang mit dem Vorentwurf des Gesamthaushaltsplans der Europäischen Gemeinschaften für das Haushaltsjahr 1999 das Arbeitspapier "Bewertungsbilanz 1996/1997" vor. Darin beschreibt sie die 1996-1997 durchgeführten Bewertungstätigkeiten, listet die durchgeführten und laufenden Bewertungen auf und faßt die Ergebnisse der 1996-1997 durchgeführten Bewertungen zusammen. 4.9. Die Ausgaben für die Bewertung können entweder direkt von der Kommission übernommen oder in Partnerschaft mit den Mitgliedstaaten kofinanziert werden.

Aus den Tabellen 1 und 2 gehen die für die Bewertung der beiden Programmplanungszeiträume 1989-1993 und 1994-1999 direkt von der GD XVI getätigten Ausgaben hervor. 4.10. Für den Zeitraum 1989-1993 beliefen sich die Ausgaben für die Bewertung auf ungefähr 10 Mio ECU (siehe Tabelle 1). Rund zwei Drittel dieser Ausgaben entfielen auf zwei Bereiche, für die die Kommission unmittelbar verantwortlich ist und in denen sie die Initiative ergreift: Auf die Gemeinschaftsinitiativen gemäß Artikel 11 der Verordnung (EWG) Nr. 4253/88 entfielen 3,1 Mio ECU, auf die Querschnitt- und thematischen Bewertungen (z.

B. KMU, Telekommunikation, Umwelt oder Humanressourcen) 3,2 Mio ECU. Für die Bewertung der Ziele 1 und 2 der Strukturfonds wurden jedoch nur relativ geringe Beträge bereitgestellt, da die Partnerschaft im Bereich der Bewertung in diesem Zeitraum noch nicht sehr weit entwickelt war. Der für die Bewertung des Zeitraums 1994-1999 bereitgestellte Betrag belief sich im April 1998 auf 25,2 Mio ECU (siehe Tabelle 2). Diese Erhöhung gegenüber dem vorangehenden Zeitraum ist auf die im Rahmen der Partnerschaft vorgenommene Entwicklung der Zwischenbewertung und der entsprechenden Methoden zurückzuführen.

4.11. Über die in diesem Zusammenhang von der Kommission und den Mitgliedstaaten getätigten Ausgaben, die sich seit 1996 erheblich erhöht haben, ist die Kommission nicht immer umfassend informiert, insbesondere wenn die Bewertungen unter die Maßnahme "technische Hilfe" der operationellen Programme fallen, die auch andere Ausgaben beinhalten kann. Speziell für die Zwecke der Bewertung könnte bereits in der Anfangsphase der Programmplanung ein bestimmter Betrag vorgesehen werden, wodurch die Bewertungskosten transparenter würden. Bezugsrahmen 4.12. Im Entwicklungsprozeß der Bewertung spielt das Programm MEANS (1995-1998), für das insgesamt 2,8 Mio ECU bereitgestellt wurden, eine besondere Rolle (9).

Ziel des angewandten Verfahrens ist es, durch Bestandsaufnahme der von den Mitgliedstaaten verwendeten Methoden und durch Ermittlung stichhaltiger Beispiele einheitliche und kohärente Methoden zu entwickeln. Bei diesem im wesentlichen zu Eigeninitiative anregenden empirischen Ansatz hat die Kommission nicht die Möglichkeit, die konkreten Modalitäten für die Durchführung der Bewertungsmethoden oder die Auswahl der Indikatoren, insbesondere der Indikatoren zur Messung der sozioökonomischen Auswirkungen im Bereich der Regionalentwicklung, festzulegen. Angesichts der Komplexität der mit der Bewertung verbundenen methodischen Aspekte gibt es keine einheitliche Methodik, die sich in jeder spezifischen Situation anwenden ließe.

Die Kommission sollte jedoch in der Lage sein, einen methodischen Rahmen vorzugeben, der bei der Durchführung von an spezifische Situationen angepaßten Bewertungen eine angemessene Orientierungshilfe bildet. 4.13. Mit Hilfe der Ergebnisse des Programms MEANS wurde bisher insbesondere durch Einführung eines gemeinsamen Sprachgebrauchs der Grundstock für eine neue Bewertungsmethode gelegt; außerdem ermöglichten sie die partnerschaftliche Vorbereitung der Zwischenbewertung. Die Tabellen 3 und 4 zeigen den allgemein anerkannten Bewertungsansatz. Das Programm MEANS hat jedoch auf die Fragen zu den praktischen oder operationellen Aspekten der Bewertung noch keine gründlichen Antworten geliefert.

So bleiben zwei grundlegende Fragen immer noch unbeantwortet: Welches System von Indikatoren ist für ein globales Urteil über ein Strukturprogramm der Gemeinschaft am angemessensten? Welcher Bewertungsansatz ist am besten geeignet, die sozioökonomischen Auswirkungen eines bestimmten Strukturprogramms im Rahmen der regionalen Entwicklung zu messen? Die Kommission ist noch nicht in der Lage, genaue Anweisungen zu erteilen, welche konkreten Techniken in einer bestimmten Bewertungssituation anzuwenden sind. Dieser Mangel beeinträchtigt insbesondere die Durchführung der Zwischenbewertungen der Interventionsformen des Programmplanungszeitraums 1994-1999.

Statistische Datenbanken und Angaben zu den verfolgten Zielen 4.14. Bei den Bewertungen, seien es nun Vorausbeurteilungen, Zwischenbewertungen oder Ex-post-Bewertungen, ergibt sich oft die Schwierigkeit, daß die Ziele - selbst die einzelner Maßnahmen - zu allgemein formuliert sind. 4.15. Aufgrund des Entwicklungsstands der vorhandenen statistischen Datenbanken werden Begleitung und Bewertung der von den Strukturfonds mitfinanzierten Programme und Maßnahmen gebremst. Es sind insbesondere folgende Schwachstellen festzustellen: Mangel an auf die jeweiligen Gebiete beschränkten statistischen Angaben, Fehlen statistischer Angaben zu bestimmten Aspekten und fehlende Übereinstimmung zwischen dem statistisch abgedeckten Zeitraum und dem für Begleit- und Bewertungszwecke erforderlichen Zeitraum.

Indikatoren 4.16. Zuverlässige und angemessene Indikatorsysteme sind für das Programmplanungsverfahren unerläßlich. Für die Zwecke der Bewertung müssen die Strukturprogramme Angaben über den finanziellen und materiellen Durchführungsstand sowie über die Ergebnisse oder die Leistungsfähigkeit der Aktionen beinhalten. Diese Indikatoren müssen den mittelbewirtschaftenden Stellen Auskunft über die unmittelbaren oder nachhaltigen Auswirkungen der durchgeführten Aktionen geben und außerdem die Messung der gegenüber den Gesamtzielen der Programme, z. B. regionales Wachstum oder Verringerung der Arbeitslosigkeit, erzielten Fortschritte ermöglichen.

4.17. Die Zuverlässigkeit der finanziellen Indikatoren steht in engem Zusammenhang mit der Zuverlässigkeit der bei der Kommission eingereichten Ausgabenbescheinigungen, die die entsprechende Gemeinschaftszahlung auslösen. Die materiellen Indikatoren werden oft als Zusatzinformationen angegeben und sind nur begrenzt zuverlässig. In den vorhandenen Datenbanken läßt sich die materielle Entwicklung der Maßnahmen nicht immer erfassen, und die mittelbewirtschaftenden Stellen werden von den Endbegünstigten nicht immer regelmäßig über den materiellen Durchführungsstand informiert. In der Zwischenbewertung des OP Lissabon und Vale do Tejo in Portugal sind materielle Indikatoren angegeben, die streng proportional den Ausgaben entsprechen, ohne daß irgendwelche Abweichungen aufgrund von Durchführungsverzögerungen oder anderen Problemen erwähnt werden.

Die Mitgliedstaaten müßten ihre Begleitverfahren und die den Indikatoren zugrunde liegenden Datenbanken verbessern. 4.18. Die Messung der Ergebnisse und Auswirkungen auf der Ebene der Unterprogramme und Maßnahmen bzw. der Auswirkungen auf Programmebene wird dadurch erschwert, daß weder die Kausalzusammenhänge zwischen den verschiedenen Zielebenen und zwischen den Zielen und den Maßnahmen bzw. Vorhaben noch die horizontalen Ergänzungs- und Synergieeffekte zwischen den Maßnahmen und zwischen den Zielen klar ermittelt sind. Daher ist es schwierig, die spezifische Auswirkung einer Maßnahme auf die Regionalentwicklung oder die Auswirkung einer Investition auf die Nachfrage - und erst recht das Angebot - konkret zu bestimmen.

In diesem Zusammenhang ist die Ermittlung von Indikatoren, die bei der Bewertung der Ergebnisse und der Auswirkungen als angemessene Hilfsmittel dienen können, im Hinblick auf die GFK 1994-1999 noch nicht abgeschlossen (siehe Ziffer 6.23). 4.19. Die Vorausbeurteilung der GFK ist eine wesentliche Grundlage für die späteren Bewertungen. Dabei müssen alle Ergebnis- und Wirkungsindikatoren bestimmt und quantifiziert werden, um die voraussichtlichen Auswirkungen des Programms beurteilen zu können und den Vergleich mit den tatsächlichen Auswirkungen zu ermöglichen. In diesem Zusammenhang war die zielbezogene Verwaltung nicht immer einheitlich und zufriedenstellend, was sich auf die für die Bewertung erforderlichen Indikatoren auswirkte.

So enthält das italienische GFK 1994-1999 nur wenige Indikatoren, eine Tatsache, die spätere Bewertungen erschweren könnte. Das von der Kommission ohne größere Änderungen genehmigte portugiesische GFK 1994-1999 sieht dagegen zu viele Indikatoren (in der Größenordnung von 300) vor, was seine Bewertung ebenfalls komplizieren dürfte. Diese bei der Festlegung der Indikatoren zwischen den GFK zu verzeichnenden Unterschiede verdeutlichen die mangelnde Kohärenz bei der Programmplanung. Die zahlreichen allgemeinen und schlecht quantifizierbaren Ziele geben manchmal bei der Zwischenbewertung Anlaß dazu, das von der Kommission bei der Vorausbeurteilung genehmigte Indikatorsystem zu überprüfen, da die Indikatoren nicht genau genug festgelegt waren und sich nicht gut anwenden ließen.

4.20. Für die Strukturinterventionen und die sozioökonomischen Verhältnisse, auf die sie einwirken, gibt es viele unterschiedliche Indikatoren, die oft an dezentraler Stelle festgelegt werden. Die Kommission hat keine Verzeichnisse der Indikatoren erstellt, die sie im Bereich der Regionalentwicklung oder im Rahmen der verschiedenen Arten von Aktionen für unerläßlich und repräsentativ hält, obwohl einigen nationalen oder regionalen Stellen durchaus Teilverzeichnisse übermittelt wurden, die auch bereits Gegenstand von Gesprächen waren. 4.21. Die Ergebnis- und Wirkungsindikatoren sollten im Rahmen der Begleitung stärker quantifiziert werden, wobei auf die Zuverlässigkeit der Zahlenangaben zu achten ist.

Diese Zuverlässigkeit ist nicht immer gegeben, so daß in einigen Fällen geschaffene Arbeitsplätze doppelt gezählt werden oder sich die Brutto- nicht von den Nettobeschäftigungseffekten unterscheiden lassen. Dies wurde beim Vergleich des Zwischenbewertungsberichts des OP Brandenburg mit den Sozialversicherungsstatistiken festgestellt. Berücksichtigung der Bewertung 4.22. Der Beitrag der Bewertung zur wirksamen Verwendung der Gemeinschaftsmittel hängt zu einem großen Teil von ihrer inhaltlichen Qualität ab sowie davon, wann die Ergebnisse eingehen und wann die Änderung der Strategie beschlossen wird.

Eine Reihe von Zwischenbewertungen der GFK, PPD und OP des Programmplanungszeitraums 1994-1999 wurde jedoch erst recht spät abgeschlossen, so daß sich eventuelle Anpassungen verzögern. 4.23. Bei der Programmplanung für Ziel 2 wird es durch die aufeinanderfolgenden Programmplanungzeiträume, die kürzer sind als bei Ziel 1, sehr schwierig, zum Zeitpunkt der Programmplanungsentscheidungen über die Ergebnisse der Bewertungen zu verfügen, anhand deren Lehren aus der Vergangenheit gezogen und spätere Interventionen angepaßt werden können. Der Programmplanungs- und der Bewertungszyklus für Ziel 2 sind phasenverschoben.

So erhielt die Kommission die endgültige Fassung des zusammenfassenden Ex-post-Bewertungsberichts für Ziel 2 für den Programmplanungszeitraum 1989-1993 im Sommer 1997. Zu diesem Zeitpunkt war die Vorausbeurteilung für die Programmplanung 1997-1999 im Gange und die Ex-post-Bewertung für den Zeitraum 1994-1996 noch nicht eingeleitet. 4.24. Die in den Bewertungsberichten angeführten Ergebnisse der Strukturprogramme ändern oft nichts an der Höhe der für diese oder die folgenden Programme bereitgestellten Haushaltsmittel. Die Bewertungen wurden bei der Entscheidungsfindung im ersten Programmplanungszeitraum nur sehr selten berücksichtigt, und Änderungen der Programmplanung waren überwiegend durch den Grad der Mittelausschöpfung begründet.

So wurden auch die nützlichen Empfehlungen, die der Hauptberater bei der Ex-post-Bewertung der unter Ziel 1 fallenden GFK 1989-1993 aussprach, nicht beachtet (siehe Ziffer 5.7). 4.25. Die in Zwischenbewertungen oder Durchführungsberichten aufgeführten mehr qualitativen Aspekte Leistungsfähigkeit oder Wirksamkeit der Programme hatten keinen ausreichenden Einfluß auf die operationelle Verwaltung der Strukturfonds und auf die Übertragung größerer Verantwortung auf die an der Entwicklung der Programme beteiligten Partner. 4.26. Die Ergebnisse der Zwischenbewertung der PPD, GFK und OP des Ziels 2 (1994-1996) zeigen ebenso wie die Ergebnisse der Begleitung ein Mißverhältnis zwischen der geplanten Finanzierung und der Durchführung der Programme.

Dadurch wird die Inanspruchnahme der Mittel zum Hauptanliegen, was darauf hinauslaufen kann, daß die Rolle der Bewertung bei der Analyse des betrachteten Gebiets - insbesondere hinsichtlich des logischen Zusammenhangs zwischen den Zielen, den zugewiesenen Mitteln und der Auswirkung der Strukturinterventionen - unterschätzt wird. 4.27. Die Schlußfolgerungen und Empfehlungen der Bewertungen verstehen sich für die mittelbewirtschaftenden Stellen der Interventionsformen oft von selbst, können jedoch für andere Partner von Nutzen sein. Dies gilt sowohl für die Ex-post-Bewertungen (siehe Ziffer 5.8) als auch für die partnerschaftlich vorgenommenen Zwischenbewertungen.

Objektivität der Bewertungen 4.28. Das Fehlen eines genauen Bezugsrahmens beeinträchtigt in den spezifischen Bewertungssituationen die Anwendung angemessener und objektiver Techniken, die eine leichte Kontrollierbarkeit der Ergebnisse und die Unabhängigkeit des Bewerters gewährleisten. Es kommt vor, daß die empfohlene Methode nicht objektiv begründet ist, daß der Bewerter seinen Ansatz zu bereitwillig den angetroffenen Schwierigkeiten anpaßt oder daß er die Wahl der Indikatoren von den verfügbaren Informationen abhängig macht. 4.29. Auch die Unabhängigkeit von den mittelbewirtschaftenden Stellen scheint, insbesondere hinsichtlich der Informationsbeschaffung (siehe Ziffer 6.11), nicht immer gewährleistet zu sein.

In den Bewertungsberichten wird die Informationsquelle, auf die sich die Feststellungen gründen, jedoch nicht immer angegeben. Diese Schwachstelle kann die Zuverlässigkeit und Stichhaltigkeit der in den Bewertungsberichten vorgelegten Angaben zweifelhaft erscheinen lassen. 4.30. Die Objektivität müßte durch ein Kontrollsystem gewährleistet werden, das die Qualität der Indikatoren (Durchführungs-, Ergebnis- und Wirkungsindikatoren), die Zuverlässigkeit der Basisinformationen und den Grad der Anwendung der Methoden überwacht. Die Kommission analysiert die im Rahmen der Bewertung vorgelegten Angaben und Ergebnisse, überprüft jedoch nicht an Ort und Stelle, ob die in den Mitgliedstaaten eingerichteten Bewertungssysteme ordnungsgemäß funktionieren.

Von der Kommission vergebene Bewertungsaufträge 4.31. Bei der Prüfung der Vergabeverfahren für von der Kommission in Auftrag gegebene Bewertungen wurde eine Reihe von Schwachstellen festgestellt: unzulängliche Auswahlverfahren, zu vage gehaltene Lastenhefte, Verzögerungen und dürftige Qualität der Berichte. 4.32. Die Beurteilungs- oder Analyseelemente, auf deren Grundlage die Kommission den Berater auswählt, sind in den Protokollen der Sitzungen zu Ausschreibungsverfahren nicht immer genau angeführt. Bei seiner Prüfung konnte der Hof keine Gewähr erlangen, daß die besten Sachverständigen des jeweils angemessensten Fachgebiets ausgewählt wurden.

4.33. Für die Ex-post-Bewertungen der Ziel-1-GFK 1989-1993 und des Ziels 2 fiel die Wahl entweder auf einen Hauptberater, der durch andere nationale Berater unterstützt wurde, oder auf Beraterkoordinatoren, die die Aufträge zur Erstellung der Studien in der Folge an andere Berater weitergaben. In dieser Beraterkette behält die Kommission nicht unbedingt die Kontrolle über die Durchführungsmodalitäten der Bewertung, was jedoch zur Gewährleistung der Kohärenz, Einheitlichkeit und Qualität der Ergebnisse erforderlich ist. 4.34. Das Lastenheft enthält manchmal keine genaue Beschreibung der durchzuführenden Aufgaben und der zu erzielenden Ergebnisse.

Die Vertragsbestimmungen sind sehr allgemein gehalten. Die Durchführungsmodalitäten der Bewertung werden häufig bis zu einer späteren Vereinbarung mit der Kommission, in der der methodische Rahmen festgelegt werden soll, offengelassen. 4.35. Bei der Vorlage der Berichte sind gegenüber dem vorgesehenen Zeitplan oft Verzögerungen festzustellen. So mußte der Bewertungsbericht zum GFK 1989-1993 für Ziel 1 den Vertragsbestimmungen zufolge zum 28. Februar 1995 vorgelegt werden, wurde jedoch erst im November 1995 fertiggestellt. Für den Fall einer Nichteinhaltung der vertraglich festgelegten Fristen hatte die Kommission keinerlei Sanktion vorgesehen.

Dagegen leistete sie am 11. Juli 1995 gemäß Artikel 4 des Vertrags die Abschlußzahlung in Höhe von 40 %. 4.36. Da genaue und eindeutige Vertragsbedingungen über den zu verfolgenden methodischen Ansatz und die erwarteten Ergebnisse fehlen, können die Kommissionsstellen unterschiedlich auf die Berichte reagieren. So werden einige Berichte angenommen, obwohl sie lediglich einfache Beschreibungen oder vage Analysen des Nutzens der durchgeführten Maßnahmen enthalten, auf allgemeinen Behauptungen befragter Personen beruhen oder aber am Ende zu allgemeine Empfehlungen aussprechen. Im Fall der Ex-post-Bewertung des GFK 1989-1993 für Irland empfiehlt eine Dienststelle, den mit dem Berater abgeschlossenen Vertrag wegen der schlechten Qualität des Berichts aufzulösen, während der Bericht von einer anderen Dienststelle genehmigt wurde.

Bei der Ex-post-Bewertung des GFK 1989-1993 für Portugal sind sich die zuständigen Dienststellen darin einig, daß in dem Bericht statt einer Bewertung lediglich die bereits von dem Mitgliedstaat vorgelegten Elemente der materiellen Durchführung wiederholt werden. Ebenso wird unterstrichen, daß der Ex-post-Bewertungsbericht zum GFK 1989-1993 für Spanien zu deskriptiv ist und nicht genügend Analysen enthält. Die Ex-post-Bewertung des GFK 1989-1993 für Nordirland wird als unvollständig betrachtet. Beim Ex-post-Bewertungsbericht zum GFK 1989-1993 für Italien werden Gliederung und Aufbau bemängelt.

Der Bewertungsbericht zum GFK 1989-1993 für Griechenland enthält zwar Schlußfolgerungen zu den einzelnen Kapiteln, doch fehlt eine allgemeine Schlußfolgerung. 5. EX-POST-BEWERTUNGEN DER UNTER DIE ZIELE 1 UND 2 FALLENDEN GFK (1989-1993) Einleitung 5.1. Die Bewerter stoßen oft auf folgende Schwierigkeiten: a) Die ursprüngliche Programmplanung ging vor allem bei den Ziel-1-Regionen oft in aller Eile, ohne Vorausbeurteilung der Programme und insbesondere der entsprechenden wirtschaftlichen Grundlagen vonstatten. b) Es fehlen quantifizierte Ziele und Ergebnisindikatoren. c) Die statistischen Angaben über die sozioökonomische Lage vor bzw. nach der Strukturfonds-Intervention im Rahmen von Ziel 2, insbesondere die Angaben über Wirtschaftsstruktur, Investitionen und Bruttoregionalprodukt, sind lückenhaft.

Die statistischen Instrumente decken nicht immer den ausgewählten Analysebereich ab (Gemeinde, Bezirk, Arbeitsmarktregion). d) Einige Aktionen werden nicht beendet. e) Die Entwicklung der sozioökonomischen Lage läßt sich zum Teil auch auf exogene Faktoren zurückführen. f) Wenn die Bewilligung der Hilfen sich nicht ausreichend am regionalen oder lokalen Bedarf ausrichtet, sind die Vorhaben und die damit verfolgten Ziele heterogen. g) Die spezifischen Auswirkungen der Maßnahmen und des Programms sind aufgrund der Fülle von Aktionen, die in einer Region oder einem Gebiet stattfinden, schwer zu ermitteln. h) Indirekte Auswirkungen des Programms (insbesondere auf die Beschäftigung) lassen sich schwer messen, da bei der Einleitung der Programme kein entsprechendes Meßinstrument eingerichtet wurde und seit ihrer Beendigung keine vertiefte Untersuchung zu diesem Thema stattgefunden hat.

Ex-post-Bewertung der Ziel-1-GFK (1989-1993) 5.2. Die Ex-post-Bewertung der Z1-GFK wurde von einem zentralen Berater koordiniert und setzt sich zusammen aus Ex-post-Bewertungen der betreffenden GFK, die von Januar 1994 bis Juni 1995 von nationalen Beratern durchgeführt wurden. Der für die Koordinierung zuständige Berater entwickelte den methodischen Ansatz, der sowohl makroökonomische Analysemethoden als auch Methoden zur Analyse von Maßnahmen und Vorhaben umfaßt. Dieser Ansatz zielt darauf ab, die interne Logik und Strategie der GFK, OP und Maßnahmen zu analysieren, eine erste Bilanz der materiellen Ergebnisse und der Auswirkungen zu erstellen und schließlich die Durchführungsverfahren zu untersuchen.

Er ist in Anhang I zusammengefaßt. 5.3. Obwohl die vorgeschlagene Methodik insgesamt kohärent ist, weist sie doch eine Reihe von Schwachstellen auf. So ist vorgesehen, daß sich die Analyse der internen Logik und Strategie der GFK, OP und Maßnahmen auf eine einheitliche Struktur von Zielen stützt, die mit einer Standardtätigkeitsbezeichnung verbunden ist. Dieser Ansatz dürfte zwar den Vergleich zwischen den Mitgliedstaaten ermöglichen, führt jedoch nicht unbedingt zur Aufstellung einer Rangordnung der Ziele auf der Grundlage der von den Mitgliedstaaten gesetzten Prioritäten und der Kriterien Rangfolge, Komplementarität, Austauschbarkeit und Synergieeffekte.

Daher lassen sich bei diesem Ansatz nicht alle Unstimmigkeiten in der jedem GFK und OP eigenen Strategie aufdecken. Im übrigen ermöglichen die im Methodenpapier aufgeführten materiellen Indikatoren und Wirkungsindikatoren oft keine Beantwortung der einschlägigen Fragen zu den vorgesehenen und nicht vorgesehenen Auswirkungen. 5.4. Der Hof konnte im übrigen folgende Schwachstellen aufdecken: a) Zur Feststellung der Entwicklung der sozioökonomischen Umgebung der GFK und OP wurde nicht immer die Ausgangslage, die durch die Gemeinschaftsintervention verändert werden sollte (1988-1989), mit der Lage nach Beendigung der Intervention (1993-1994) verglichen.

Manchmal sind die Angaben, insbesondere die Angaben zu den regionalen Unterschieden, veraltet. b) Die in den methodischen Vorgaben vorgesehene Rangordnung der Ziele wurde oft nicht ausreichend analysiert. Entweder war diese Rangordnung gar nicht vorgegeben oder sie beschränkte sich lediglich auf die für eine spezifische Prüfung ausgewählten OP und Maßnahmen, oder aber die Strukturierungskriterien wurden nicht systematisch angewandt. So wurde mit der Rangordnung für Ziele und Instrumente letztendlich doch nicht erreicht, daß sich Probleme hinsichtlich der Kohärenz und der Schlüssigkeit von Prioritäten und ihrer jeweiligen Gewichtung besser ermitteln lassen. c) Die Gründe für die Anpassungen der GFK und OP wurden manchmal nicht vertieft analysiert. d) Die finanzielle Abwicklung und die Durchführungsverfahren sowie der materielle Durchführungsstand werden in den Bewertungsberichten im allgemeinen ausreichend behandelt.

In einigen Fällen wurden aber die Auswirkungen der Programme oder Maßnahmen nicht untersucht (ausgenommen die geschaffenen Arbeitsplätze) oder nicht quantitativ dargestellt. Quantifizierte Auswirkungen werden - wenn überhaupt - über makroökonomische Modelle ermittelt und beziehen sich auf die Erhöhung des BIP, die Schaffung von Arbeitsplätzen und die Wettbewerbsfähigkeit. Dies zeigt die Unzulänglichkeit der im Rahmen der Begleitsysteme von den mittelbewirtschaftenden Stellen vorgelegten Angaben. e) Bottom-up-Analysen ließen im allgemeinen keine Schlußfolgerungen zu den Auswirkungen auf Programmebene zu. f) Der sich aus der Gemeinschaftsaktion ergebende zusätzliche Nutzen wird manchmal nur qualitativ dargestellt (z.

B. Berücksichtigung des mit dem Programm verfolgten Ansatzes, Durchführung eines integrierten Ansatzes oder Auswirkung auf das Organisationsverfahren). Im übrigen wurde er nicht immer systematisch untersucht. g) Die erwarteten langfristigen Auswirkungen wurden nicht oder nur in qualitativer Hinsicht behandelt. 5.5. Zum Z1-GFK für Spanien wurde sowohl von der Kommission als auch von den nationalen Behörden (mit Kofinanzierung durch die Gemeinschaft) jeweils eine Ex-post-Bewertung in Auftrag gegeben. Die beiden Studien wurden unabhängig voneinander getrennt erstellt, obwohl sie gleichzeitig durchgeführt wurden und dieselben Ziele verfolgten.

5.6. Im Hinblick auf Ergebnisse und Auswirkungen heben die Ex-post-Bewertungen das aufgrund der Z1-GFK materiell Erreichte, die in einigen nationalen Bewertungen aufgeführten makroökonomischen Auswirkungen und die Fortschritte im Bereich der Planung hervor, obwohl der programmbezogene Ansatz hier auf einige Hindernisse stieß (10). Außerdem unterstreichen sie den Beitrag der GFK in den Bereichen innovative Organisationsstrukturen, Mittelbewirtschaftung, Begleitung, Informationssysteme, Koordinierung und Partnerschaft, obwohl in jedem dieser Bereiche noch erhebliche Fortschritte erzielt werden müssen.

5.7. Die 1995 vom Hauptberater erstellte Zusammenfassung enthielt einige nützliche Empfehlungen, die von der Kommission nicht in vollem Umfang befolgt werden konnten. Eine dieser Empfehlungen lautete, bei der Ausarbeitung der Programme besser klarzustellen, welche gemeinschaftlichen Strukturinterventionen endogene Wachstumsfaktoren fördern und welche auf eine Wiederherstellung des regionalen Gleichgewichts oder die Wohlfahrtsmaximierung abzielen. Eine andere Empfehlung lautete, zwischen dem Vorrang der Infrastrukturinvestitionen und dem spezifischen regionalen Entwicklungsbedarf oder zwischen dem Kampf gegen die Arbeitslosigkeit und der nötigen Steigerung von Produktivität und Wettbewerbsfähigkeit ein Gleichgewicht herzustellen.

Schließlich wurde empfohlen, die Beschäftigung besser in der Regionalpolitik zu berücksichtigen. 5.8. Bei der von den nationalen Bewertern durchgeführten Ex-post-Bewertung des Ziel-1-GFK 1989-1993 ging es nicht so sehr um eine echte Bewertung der Auswirkungen der Strukturfonds als vielmehr um die Verbesserung der Begleit- und Verwaltungssysteme der Mitgliedstaaten. Ex-post-Bewertungen zu Ziel 2 (1989-1993) 5.9. Die Ex-post-Bewertungen der Z2-Programme für den Zeitraum 1989-1993 wurden in den 60 Förderregionen von einem externen Bewerter koordiniert. Zu jeder Region wurde eine allgemeine Analyse vorgenommen, und zu 22 Regionen wurden vertiefte Studien erstellt.

Hauptziel der Bewertungen war es, die Auswirkungen der Strukturinterventionen auf die in diesen Regionen stattfindende industrielle Umstellung zu analysieren und für die folgende Programmplanung Lehren daraus zu ziehen. Anhang II enthält eine Zusammenfassung des Bewertungskonzepts. 5.10. Obwohl ein gemeinsamer Rahmen vorgesehen wurde, sind die gewählten Ansätze sehr heterogen. Dies gilt insbesondere für die Prioritäten und die Genauigkeit der Analyse, die mal deskriptiv, mal kritisch ist, sowie die verwendeten Methoden und Techniken. 5.11. Die Analyse der Strategien und der Angemessenheit der GFK und OP sowie der Änderungen, die sie gegenüber dem sozioökonomischen Umfeld erfahren haben, führte selten zu einer am regionalen Entwicklungs- oder Umstellungskonzept orientierten Umstrukturierung der Ziele, Unterprogramme und Maßnahmen auf der Grundlage der Kriterien Rangordnung, Komplementarität und Austauschbarkeit.

Viele Strategieanalysen, die von der Struktur der GFK und der OP ausgehen, decken nur Teilaspekte ab und betrachten die Strategie nicht sehr kritisch. Eine gut durchdachte Umstrukturierung sollte es aber ermöglichen, systematischer aufzudecken, wo die Strategie hinsichtlich der Kohärenz, der Gewichtung der Prioritäten, der Synergieeffekte, der Komplementarität und der Auswirkungen auf das jeweilige sozioökonomische Umfeld Schwachstellen aufweist. 5.12. Was die Auswirkungen der Strukturfonds-Interventionen angeht, sind die Bewerter auf der Grundlage einer Stichprobe von Vorhaben und der Untersuchung ihrer Ergebnisse, ihrer verstärkenden Wirkung und ihrer Zusätzlichkeit nicht in der Lage, die Beobachtungen auf der Maßnahmenebene und im Hinblick auf die sozioökonomischen Auswirkungen des Programms zu aggregieren.

5.13. Wenige Bewertungen stützten sich zur Ermittlung der Auswirkungen auf eine echte Kombination des Top-down- und des Bottom-up-Konzepts. Eine solche Kombination wurde insbesondere zur Bewertung der Z2-Interventionen zugunsten der Toskana angewandt. In diesem Fall ermöglichte das Top-down-Konzept auf der Grundlage eines biregionalen ökonometrischen Modells Toskana/restliches Italien die Schätzung der globalen Auswirkungen einer steigenden Nachfrage auf die Produktion in den einzelnen Sektoren, die Verbrauchsniveaus und die Wertschöpfung sowohl in der Toskana als auch im restlichen Italien.

Anhand des Modells läßt sich außerdem abschätzen, welche Faktoren die Wirkung bei den einzelnen Interventionsarten (Infrastruktur, Dienstleistungen für Betriebe, Beihilfen für private Investitionen) vermehren und welche Beschäftigungseffekte sich ergeben (11). Zur Schätzung der direkten Auswirkungen auf die Beschäftigung wurden für die verschiedenen Interventionsarten Standardkoeffizienten angewandt. Bei diesem Top-down-Konzept wurden also die kurzfristigen direkten nachfragebezogenen Effekte betrachtet. Mit Hilfe des Bottom-up-Konzepts, das auf einer Stichprobe von Vorhaben und Maßnahmen beruht, lassen sich besser die langfristigen, stärker strukturierenden und indirekten Auswirkungen aufzeigen, die sich insbesondere auf das Angebot und die externen Einsparungen beziehen, mit denen sich die Produktionskosten verringern lassen.

Obwohl sich diese Auswirkungen nicht so leicht isolieren und quantifizieren lassen und dieses Konzept es nicht ermöglicht, die Auswirkungen auf der Ebene der Maßnahmen und des Programms zu aggregieren (obwohl dies das Ziel der vertieften Bewertung war), bilden die qualitativen Überlegungen zur Wirksamkeit der Maßnahmen und zum Ausmaß der Zusätzlichkeit der Gemeinschaftsinterventionen eine nützliche Ergänzung zum Top-down-Konzept. Die Kombination der beiden Konzepte kann für die Analyse von echtem zusätzlichen Nutzen sein, insbesondere, wenn sie sich auf Modelltechniken oder formale Ansätze stützt.

5.14. Wirkungsbewertungen, die sich auf systematische Untersuchungen stützen (z. B. mehrere Untersuchungen zur Zusätzlichkeit der Maßnahmen oder Anwendung einer spezifischen Methode zur Schätzung der durch die Maßnahmen geschaffenen Nettoarbeitsplätze, bei der eine Versuchsgruppe mit einer Kontrollgruppe verglichen wird), sind ebenfalls rar. Solche Untersuchungen sind jedoch für die Bewertung der Auswirkungen von echtem zusätzlichen Nutzen. Die Wirksamkeit der Maßnahmen und Programme wäre besser bewertet worden, wenn die Bewerter zu einigen Ergebnisindikatoren statistische Untersuchungen durchgeführt hätten, wie dies im übrigen von ihnen manchmal gewünscht worden war.

So findet man nicht immer Angaben über die Zahl von Unternehmen, die in den neuen, mit Unterstützung der Strukturfonds angelegten Industriegebieten angesiedelt wurden, oder über den Technologietransfer von Forschungsinstituten zu Unternehmen. Die im allgemeinen in den Bewertungskonzepten vorgesehenen Gespräche mit mittelbewirtschaftenden Stellen von Maßnahmen und Vorhaben führen nur selten zu genauen Angaben über den Durchführungsstand, die Ergebnisse und die Auswirkungen der Operationen. 5.15. Bei den Ergebnissen zu den geschaffenen Arbeitsplätzen ist nicht sicher, ob es sich um dauerhafte Arbeitsplätze handelt und inwieweit die Schaffung dieser Arbeitsplätze spezifisch auf die Strukturaktionen zurückgeführt werden kann.

Im übrigen enthalten die Bewertungsberichte manchmal widersprüchliche Angaben. 5.16. Im Hinblick auf die Auswirkungen der Z2-Programme läßt sich aufgrund der Ex-post-Bewertungen insbesondere folgendes festhalten: a) Durch die Z2-OP konnte die sozioökonomische Lage zwar nicht oft verbessert werden, doch trugen sie - insbesondere durch Erhaltung von Arbeitsplätzen (12) und Schaffung der Grundlagen für die Umstellung - zumindest dazu bei, eine weitere Verschlechterung dieser Lage zu verhindern. Die meisten Regionen bemühen sich nämlich um Diversifizierung ihrer Wirtschaft und ihrer Wirtschaftsstruktur und möglicherweise auch darum, sich von ihrem Image als reines Industriegebiet zu befreien. b) Trotz des integrierten Ansatzes auf der Grundlage des Programmkonzepts handelt es sich bei den OP manchmal um eine geänderte Fassung bereits angewandter nationaler oder regionaler Strategien.

Damit bilden sie nicht immer ein Programmplanungsinstrument. c) Die gleichzeitige Durchführung von Z2-OP und Gemeinschaftsinitiativen führte zu Verwirrung und zur Überschneidung von Beihilfen. d) Die Strukturfonds-Interventionen wirkten sich positiv auf Programmplanung, Durchführungsmodalitäten, Partnerschaft, Synergieeffekte, Koordinierung und Bewertung aus. Es wird jedoch oft betont, daß die mittelbewirtschaftenden Stellen und Aktionen des EFRE und des ESF nicht genügend zusammenwirken und zwischen ihnen kein ausreichender Austausch stattfindet. e) Was das Zusätzlichkeitsprinzip angeht, ermöglichen die Strukturfonds den Vorstoß in neue Bereiche, die Verwirklichung von Vorhaben, die ohne Gemeinschaftsunterstützung nicht durchgeführt worden wären, die Beschleunigung der Durchführung oder die Verwirklichung ehrgeizigerer Vorhaben.

Auch kann den ursprünglichen Vorhaben eine strukturelle Ausrichtung gegeben werden. Die Zusätzlichkeit kann bei den verschiedenen Maßnahmenarten (Infrastrukturbeihilfen, Dienstleistungen für Unternehmen, Beihilfen für private Investitionen) recht unterschiedlich ausfallen. f) Die Strukturfonds wirken nicht oft als Hebel für den Einsatz privater Mittel; zumindest wird dieser Aspekt in den Bewertungen nicht behandelt. g) In den Bewertungen wird hervorgehoben, daß der Zeitaufwand für vorbereitende Studien und Verhandlungen, Verwaltungsverfahren zur Annahme und Durchführung einiger Vorhaben sowie die Einbindung neuer nationaler Politikkonzepte oft unterschätzt wird.

5.17. Im Hinblick auf die Verwaltung geht aus den Bewertungen insbesondere hervor, daß sich einige Verfahren zur Begleitung der Programme als unzulänglich erwiesen und die während des Programmplanungszeitraums vorgenommenen internen Anpassungen im wesentlichen die Maximierung der Mittelausschöpfung und nicht etwa eine Revision der Regionalentwicklungsschwerpunkte betrafen. 6. ZWISCHENBEWERTUNGEN (1994-1999) Entwicklung und Einbindung der Zwischenbewertungsgrundsätze 6.1. Die Zwischenbewertung, mit der die Begleitung verstärkt werden soll, ist in dem in allen GFK, PPD und sonstigen Interventionsformen enthaltenen Kapitel über die Durchführungsbestimmungen vorgesehen.

Wie dort unterstrichen wird, gehört zu den Zwischenbewertungen eine kritische Analyse der bei der Begleitung erfaßten Angaben, die Erläuterung etwaiger Abweichungen gegenüber den verfolgten Zielen und die Abschätzung der von der Intervention erwarteten Ergebnisse. Die Zwischenbewertungen enthalten außerdem eine Stellungnahme über die Tauglichkeit der laufenden Intervention und die Schlüssigkeit der festgesetzten Ziele. 6.2. Während des Haushaltsjahres 1995 hob die Kommission in Mitteilungen an die Mitgliedstaaten hervor, die Zwischenbewertungen sollten den Begleitausschüssen angemessene Hinweise darauf geben, ob die Programme ordnungsgemäß ablaufen, etwaige Vorschläge für Umstellungen der Programme enthalten und ein unabhängiges objektives Bild vom Durchführungsstand vermitteln.

In diesen Mitteilungen schlug die Kommission außerdem vor, sich in einer ersten Phase auf die Durchführungsbedingungen der Interventionsformen und insbesondere auf die Indikatoren, die Verwaltungsfähigkeiten der verantwortlichen Stellen und die Verfahren zur Auswahl der Vorhaben zu konzentrieren. In einer zweiten Phase sollten im Zwischenbewertungsbericht die Schlüssigkeit der Strategie und die Begründetheit der mit den durchgeführten Interventionen verfolgten Ziele, die Wirksamkeit des Programms (Vergleich der durchgeführten Maßnahmen und der ersten Ergebnisse mit den Zielen), die Effizienz des Programms, die ordnungsgemäße Anwendung der Gemeinschaftspolitiken (Umwelt, öffentliche Aufträge usw.) und die Ergebnisse in den Bereichen Beschäftigung und KMU behandelt werden, um notwendige Änderungen zu empfehlen und die Anpassung der Programmplanung zu bewirken.

6.3. Im übrigen schlug die Kommission vor, eine globale Bewertung durchzuführen und in einer späteren Phase thematische Bewertungen zu einem bestimmten Bereich oder einem bestimmten geographischen Gebiet vorzunehmen. 6.4. Einige Mitgliedstaaten, insbesondere Spanien (13), Frankreich (14), Irland (15) und die Niederlande (16), gaben ebenfalls einen festen Rahmen für die Zwischenbewertung vor. In all diesen Rahmenbestimmungen ist vorgesehen, daß sich die Zwischenbewertung auf folgende Aspekte beziehen sollte: a) Entwicklung des sozioökonomischen Umfelds; b) Analyse der Strategie und der internen und externen Kohärenz; c) Durchführungsbedingungen - unter Einbeziehung der Programmplanung und der Auswahlkriterien, der Verwaltungsorganisation, des Begleitverfahrens und der Finanzierungswege für die Vorhaben; d) Durchführung und erzielte Ergebnisse unter Berücksichtigung der vorgesehenen Ergebnisse; e) erste Auswirkungen sowie Einschätzung der noch zu erwartenden Auswirkungen; f) Kosten - zur Feststellung der Effizienz, d. h. des Verhältnisses zwischen eingesetzten Mitteln und Ergebnissen.

Abschließend sollte die Zwischenbewertung gegebenenfalls zu Vorschlägen für eine Änderung der vorgesehenen Prioritäten oder Aktionen führen. 6.5. Der Grundsatz der Partnerschaft wurde 1988 eingeführt und soll dazu beitragen, die Wirksamkeit der Strukturfonds zu gewährleisten. Er kommt aber im dezentralisierten Verwaltungssystem erst seit 1995 mit der Zwischenbewertung sämtlicher GFK 1994-1999 voll zum Tragen. Anläßlich dieser Zwischenbewertung wurden folgende Aufgaben der Begleitausschüsse festgelegt: Festsetzung der Bewertungsziele und der für die Gewährleistung eines insgesamt kohärenten Verfahrens zu erreichenden Qualitätsnormen, Anpassung des Lastenhefts an die jeweiligen regionalen Besonderheiten (unter Berücksichtigung der Bewertungsziele) und Auswahl der Bewerter anhand von Verzeichnissen der in die engere Wahl kommenden Bewerber, die nach öffentlicher Ausschreibung von den für die Bewertung verantwortlichen Personen (Mitglied des Begleitausschusses und Berichterstatter der Gemeinschaft) erstellt wurden.

Dadurch, daß die Kausalanalyse der Strukturinterventionen partnerschaftlich erfolgte, trug die Zwischenbewertung zu einer echten Verstärkung der Partnerschaft bei. Die Tabellen 5 und 6 geben einen Überblick über die operationelle Durchführung der Zwischenbewertungen sowie über den wichtigen Beitrag, den die Mitgliedstaaten im Rahmen der Partnerschaft bei der Ermittlung der Strukturfondsauswirkungen leisteten. 6.6. Das Konzept der partnerschaftlich durchgeführten Zwischenbewertung hatte auch erheblichen Einfluß auf die institutionellen Strukturen und die nationalen und regionalen Traditionen in den zuständigen Verwaltungen.

So konnte sich die Mehrjahresprogrammplanung, bei der die Bewertung zwecks Erstellung einer kritischen Bilanz der Strukturinterventionen und Vorbereitung der notwendigen Anpassungen unerläßlich ist, besser durchsetzen. Die Partnerschaft im Bereich Bewertung ist im Rahmen von Z1 besonders gut entwickelt. 6.7. Gegenwärtig besteht das Ziel der Zwischenbewertungsarbeiten darin, sämtlichen Partnern, vom Entwickler des Programms über die mittelbewirtschaftende Stelle bis hin zu den politisch Verantwortlichen, globale Antworten zu liefern. Sie führen zur Erstellung sehr umfangreicher Berichte, die Angaben aus dem Programm selbst, aus der Vorausbeurteilung, den jährlichen Durchführungsberichten, den Zwischen- oder den Ex-post-Bewertungen enthalten.

Bei den Prüfungen wiesen einige Gesprächspartner jedoch darauf hin, daß nur ein Teil der Ergebnisse oder Empfehlungen bei der Entscheidungsfindung, der Verwaltung der Vorhaben, der Änderung der Programmplanung oder der Vorbereitung der folgenden Generation von Interventionen von echtem Nutzen ist. Durchführungsverfahren 6.8. 320 der durchgeführten 389 Zwischenbewertungen betreffen die Ziele 1, 2, 5b und 6 (17). In mehreren Mitgliedstaaten hat sich die Durchführung dieser Bewertungen erheblich verzögert. 6.9. Ursprünglich sollte das Zwischenbewertungsverfahren in zwei getrennten Etappen durchgeführt werden.

In der ersten Etappe sollten die Bewertbarkeit der einzelnen Faktoren und die damit zusammenhängenden Probleme ermittelt werden. Die zweite Etappe war die eigentliche Bewertung, die zur Erstellung eines Berichts führte. In der Praxis wurde dieses Schema nur selten angewandt. 6.10. Im allgemeinen bestand die Kommission darauf, daß die Zwischenbewertungen von externen Sachverständigen durchgeführt wurden, um einerseits die auf einem besonderen Know-how beruhende Glaubwürdigkeit und andererseits die Unvoreingenommenheit der Schlußfolgerungen über die Korrektheit der Strategie, die Stimmigkeit der sozioökonomischen Analysen und die objektive Quantifizierung der erwarteten Auswirkungen zu gewährleisten.

Der Bewertungsbedarf im Bereich der Strukturfonds hat in wenigen Jahren ein Netz externer Berater entstehen lassen, die der Kommission und den Mitgliedstaaten bekannt sind. Dadurch entstand in diesem Bereich größeres Fachwissen, das sich jedoch auf einen bestimmten Markt beschränkt. 6.11. Bei den Prüfungen des Hofes an Ort und Stelle wurde festgestellt, daß die externen Berater in der Praxis nicht völlig unabhängig sind. Da die Bewerter nur über wenig Zeit verfügen und faktisch davon abhängig sind, daß ihnen die mittelbewirtschaftenden Stellen der Programme die nötigen Angaben zur Verfügung stellen, ist keine klare Trennung der Tätigkeiten gegeben.

Die im Hinblick auf die Leistungsfähigkeit vorgelegten Ergebnisse beschränken sich zu oft auf eine Wiederholung und Aktualisierung der Angaben aus dem Begleitsystem, die als externer Beitrag ausgegeben werden. 6.12. Im übrigen wurde das übliche Verfahren einer öffentlichen Ausschreibung im Amtsblatt für die Auswahl eines Bewertungsberaters nicht immer angewandt. In den Niederlanden wurde eine beschränkte Zahl Berater, die auf einer Liste potentieller Bewerter standen, zur Abgabe eines Angebots aufgefordert. Die Auswahl wurde anschließend anhand dieser Angebote vorgenommen. 6.13. Obwohl die Kommission regelmäßig an den Sitzungen der Begleitausschüsse teilnimmt und dort die Möglichkeit hat, ihre Kriterien für die Auswahl von Beratern durchzusetzen, ist ihre Beteiligung an diesem Verfahren unterschiedlich.

So ist die Kommission in Belgien, Griechenland und Portugal schon in den Fachgruppen oder im nationalen Ad-hoc-Ausschuß, von denen die Wahl des Beraters vorbereitet und die Durchführung der Bewertung begleitet wird, aktiv an der Auswahl des Bewerters beteiligt. In Frankreich dagegen wird die Kommission erst nach der Auswahl der beiden als am besten beurteilten Angebote offiziell informiert und erhält gleichzeitig vom Präfekten der Region, der als Auftraggeber fungiert, den endgültigen Vorschlag, zu dem sie etwaige Bemerkungen abgeben soll. In den Niederlanden ist die Kommission an den Arbeiten des nationalen Ad-hoc-Ausschusses, der die Vorausbeurteilungen, die Zwischenbewertungen und die Ex-post-Bewertungen für die unter die Ziele 1 und 2 fallenden Regionen steuert, und an den Arbeiten der Begleitausschüsse beteiligt, reagierte jedoch erst spät auf den Entwurf des Zwischenbewertungsberichts zum Z1-PPD Flevoland.

Priorität der einzelnen Bewertungsziele 6.14. Bei der Durchführung der Zwischenbewertungen wird den Bewertungszielen unterschiedliche Priorität gegeben. Nur die Prüfung des materiellen und finanziellen Durchführungsstands der Interventionen wird bei allen Zwischenbewertungen für besonders wichtig gehalten. Die Festsetzung der Prioritäten entspricht oft einem echten regionalen Bedarf, wie zum Beispiel im Fall Korsikas, wo der Schwerpunkt insbesondere auf der Behandlung von Problemen der Verwaltung, Begleitung und Verbindung von Bewertung und Begleitung liegt. Die Verfolgung einiger Bewertungsziele wird im übrigen durch technische Probleme beeinträchtigt, zum Beispiel Probleme bei der Messung der Wirkungsindikatoren.

6.15. Die Zwischenbewertungen legen oft nicht genügend Wert auf die kritische Beurteilung der eingeschlagenen Regionalentwicklungsstrategie, auf die Lebensfähigkeit der von den Strukturfonds finanzierten Vorhaben, auf die Kriterien für die Auswahl der Vorhaben und auf die Auswirkungen im Vergleich zu den spezifischen und allgemeinen Programmzielen. 6.16. Die ergänzende und verstärkende Wirkung der Gemeinschaftsinterventionen, deren Analyse ein Ziel der Ex-post-Bewertungen der Z1- und Z2-GFK des Programmplanungszeitraums 1989-1993 war, wird im Rahmen der Zwischenbewertungen nur in Ausnahmefällen behandelt.

6.17. Im allgemeinen ist in den Bewertungsverträgen vorgesehen, daß die Entwicklung des sozioökonomischen Umfelds, auf das die Gemeinschaftsintervention einwirkt, begleitet und aktualisiert wird. Dieser Aspekt wird in einigen Fällen systematisch (zum Beispiel für die Region Wallonien mit sehr detaillierten Übersichten), in anderen dagegen nur unzulänglich behandelt, was sich unmittelbar auf die Qualität und Aktualisierung der im allgemeinen bei der Zwischenbewertung durchgeführten Analysen von Stärken und Schwächen auswirkt. 6.18. Berücksichtigung und Beibehaltung der internen und externen Kohärenz aller Bestandteile der einzelnen Programme (Ziele des Programms, der Unterprogramme und der Maßnahmen, ergänzende Wirkung und Synergien zwischen den Zielen und zwischen den Maßnahmen) werden nur selten systematisch untersucht.

So entfallen beim OP Brandenburg im Zeitraum 1994-1996 138 % bzw. 242 % der ursprünglichen Mittelansätze auf die finanziellen Verpflichtungen zugunsten der Schwerpunkte 1.1 (produktive Investitionen) und 1.2 (Infrastrukturmaßnahmen), ohne daß der Bewerter dies im Hinblick auf die Regionalentwicklungsstrategie begründete. Die Synergieeffekte werden manchmal analysiert, doch sind diese Analysen oft unvollständig. Dieser Aspekt sollte systematischer behandelt werden, insbesondere die Synergieeffekte zwischen den EFRE- und den ESF-Tätigkeiten. 6.19. Wenn ein ausdrückliches Ziel der Bewertung darin besteht, die Programmprioritäten und die Mittelzuweisung umzustellen, führen die Bewertungsarbeiten ebenfalls nicht immer zu einer globalen und kohärenten Darstellung der vorgeschlagenen Änderungen und zu einer Erläuterung der Gründe.

Auch die Auswirkungen der vorgeschlagenen Erweiterungen oder Kürzungen von Maßnahmen werden nicht immer präzisiert. 6.20. Bei vielen der geprüften Bewertungen konnte der Bewerter nicht alle vertraglich vorgesehenen Ziele erfuellen, insbesondere im Hinblick auf die Bewertung der Auswirkungen. Die Zeitvorgaben und die verfügbaren Mittel standen ebenfalls nicht immer in angemessenem Verhältnis zu den Zielen. Ansätze, Methoden und Techniken 6.21. Da die Bewertungsziele und -ansätze in den Verträgen oft sehr allgemein formuliert sind, bleiben die Ansätze, Methoden und Techniken oft den Bewertern überlassen, die sie manchmal während der Durchführung den angetroffenen Schwierigkeiten anpassen.

So kommt es vor, daß die Bewerter die einzigen Angaben, die ihnen vorliegen, zu Indikatoren machen. 6.22. Die entwickelten Techniken und Methoden waren nicht immer auf die Bewertungsziele abgestimmt. Im übrigen wurde noch kein wirklicher Konsens über die angemessene methodische Vorgehensweise zur Bewertung der Regionalentwicklung erzielt. Die Kommission begnügt sich damit, allgemein formulierte Hinweise auf "die besten Verfahren" zu verteilen, ohne ihre Durchführung wirklich konkret zu koordinieren und zu vereinheitlichen. Diese Ungenauigkeit, die auf der unterschiedlichen Programmplanungs-, Durchführungs- und Bewertungspraxis der Mitgliedstaaten beruht, führt zu Bewertungsberichten von sehr unterschiedlicher Qualität und erschwert die Vergleichbarkeit der Ergebnisse auf europäischer Ebene.

6.23. So erweisen sich die zur Messung der Auswirkungen angewandten Techniken als lückenhaft, was insbesondere mit der Besonderheit und Komplexität der zu bewertenden Auswirkungen zusammenhängt: a) Es wurde nicht immer nach Kräften versucht, noch angemessenere Indikatoren zu finden, so daß sich die vorgesehenen Indikatoren manchmal lediglich dazu eigneten, den materiellen und finanziellen Durchführungsstand festzustellen. b) Die Zusammensetzung der Wirkungsindikatoren wurde nicht immer erläutert. c) Die Bewertung der sozioökonomischen Auswirkungen oder der Regionalentwicklung wird allem Anschein nach durch die wachsende Zahl der Aktionen, Unterprogramme und Maßnahmen (Ziel 1) beeinträchtigt, während zahlreiche Programme zur Förderung der Umstellung und/oder der erneuten Belebung des Wirtschaftsgefüges (OP, Gemeinschaftsinitiativen, nationale Programme) zusammen eingesetzt werden können.

Im übrigen beziehen sich die gemeinschaftlichen und die einzelstaatlichen Aktionen manchmal auf unterschiedliche Bereiche und werden zu unterschiedlichen Zeitpunkten eingeleitet. Schließlich sind die Ziele oft nicht quantifiziert und zu allgemein formuliert (18). In diesem Zusammenhang ist das Verhältnis zwischen den ermittelten sozioökonomischen Problemen und den Zielen der durchgeführten Maßnahmen, Unterprogramme und Vorhaben sowie das Verhältnis zwischen diesen Zielen nicht immer einleuchtend, zumal die den verschiedenen Ebenen eines Programms zugewiesenen materiellen Indikatoren und Wirkungsindikatoren den Erfordernissen der Bewertung des Programms nicht vollständig entsprechen.

Ebenso erweist es sich als schwierig, die Ergebnisse jedes einzelnen Programms zu ermitteln und sie von den Resultaten anderer privaten, regionalen oder nationalen Aktionen zu trennen. d) Die Anwendung von Modellen zur Abschätzung der zu erwartenden Auswirkungen auf der Grundlage der Halbzeitergebnisse und der noch erwarteten Ergebnisse ist weiterhin selten. Die Zwischenbewertung einiger nationaler GFK stützte sich auf ein Input-Output-Modell (Portugal) oder auf ein makroökonometrisches Modell (Irland, Spanien), während der Verwendung regionaler Modelle nur eine Randbedeutung zukommt. Das im Rahmen der Zwischenbewertung verwendete Entwicklungsmodell für die Provinz Hainaut (Belgien) ist daher erwähnenswert.

Die modellmäßige Erfassung der Auswirkungen der Maßnahmen ist ebenfalls nicht sehr weit verbreitet, wobei der Bereich Verkehrsinfrastruktur eine Ausnahme bildet. Erwähnt werden sollte, daß im Rahmen der Vorausbeurteilung und der Zwischenbewertung des Vorhabens Expo 1998 (Portugal) das Input-Output-Modell angewandt wurde, doch sind die Vorhersagen mit Vorsicht zu betrachten. e) Die veranschlagten Beschäftigungseffekte bleiben ebenfalls unsicher. Die Anwendung von Modellen und anderen Analyse- und Erhebungstechniken gibt nicht präzise genug Aufschluß darüber, wie viele Nettoarbeitsplätze geschaffen wurden (unter Berücksichtigung insbesondere der neuen Arbeitsplätze, die außerhalb der jeweiligen Aktion geschaffen worden wären, und der Substitutionseffekte) und wie dauerhaft die Arbeitsplätze sind.

Außerdem erhält man dabei im allgemeinen keine Angaben darüber, wie viele geschaffene Arbeitsplätze nicht der Durchführung des Programms zuzuschreiben sind. 6.24. In einigen Bewertungsverträgen ist im Rahmen des Bottom-up-Konzepts die Durchführung von Erhebungen vorgesehen, die bei den an der lokalen Wirtschaftsentwicklung beteiligten Partnern und den Endbegünstigten, einschließlich der in den Genuß von Gemeinschaftsbeihilfen kommenden Unternehmen, stattfinden sollen, um den Beitrag des Gemeinschaftsprogramms quantitativ oder qualitativ zu beurteilen. Die Ergebnisse der Erhebungen sind manchmal angesichts der Zahl der antwortenden Unternehmen und Partner nicht repräsentativ; außerdem ist ihre Zuverlässigkeit nicht gewährleistet, da nicht immer Kontrollen stattfinden.

6.25. Im Hinblick auf die Ergebnis- und Wirkungsindikatoren ist folgendes festzustellen: a) Es dauert oft lange, bis Angaben und Statistiken verfügbar sind. b) Die vorhandenen Angaben beziehen sich auf geographische Gebiete, die nicht den Zielgebieten entsprechen. c) Die Angaben zu den Unternehmen werden nicht auf der Ebene der Betriebsstätten erfaßt. Dies führt zu einer Verfälschung der lokalen Statistiken, wenn sich in dem Gebiet eine einzige Betriebsstätte befindet, das Unternehmen aber im gesamten Staatsgebiet noch über mehrere weitere Betriebsstätten verfügt. d) Viele Statistikinstitute können die Gesamtangaben nicht detaillierter aufgliedern, um gezielt ein Gebiet, eine Region oder einen Problembereich zu betrachten.

6.26. Wenn der Bewerter, sei es nun zur Behebung eines Mangels oder als Ersatz für die vorgesehenen Indikatoren, Indikatoren vorlegt, die sich besser zur Wirkungsanalyse eignen, erläutert er diese nicht und läßt hinsichtlich ihrer Anwendbarkeit Fragen offen. Außerdem weist er nicht immer auf die zu ihrer konkreten Anwendung noch erforderlichen Untersuchungen hin und legt auch keinen Kostenvoranschlag vor. Es ist ebenfalls hervorzuheben, daß die Indikatoren zu den Programmzielen ohne Angaben über entsprechende Zeitreihen nicht ohne weiteres quantifiziert werden können. Durchführung der Ziel-2-Programme (1994-1996) 6.27.

Die Ergebnisse der Zwischenbewertung und Begleitung der PPD, GFK und OP des Zeitraums 1994-1996 zeigen ein Mißverhältnis zwischen den geplanten Finanzierungen und der tatsächlichen Programmdurchführung. Trotz äußerst zahlreicher Anpassungen der Programme am Ende des Programmplanungszeitraums 1994-1996, die auf eine Ausschöpfung der finanziellen Beteiligungen abzielten, wurden durchschnittlich rund 12 % der Mittel des Programmplanungszeitraums 1994-1996 auf 1997-1999 übertragen. So ergibt sich die Gefahr, daß die Inanspruchnahme der Mittel zum Hauptanliegen wird und die Rolle der Bewertung möglicherweise unterschätzt wird, insbesondere im Hinblick auf die Kohärenz zwischen den Zielen, den bereitgestellten Mitteln und den Auswirkungen der Strukturinterventionen.

7. AUSWIRKUNGEN DER STRUKTURFONDS UND BEWERTUNGSMODELLE Auswirkungen auf der Ebene der GFK und Programme Ergebnisse der Modelle im Hinblick auf die Auswirkungen der Strukturfonds 7.1. Die für die makroökonomische Bewertung im Bereich der Strukturfonds verwendeten Modelle (siehe Anhang III) führen aufgrund ihrer jeweiligen Eigenheiten zur einer differenzierten Beurteilung folgender Auswirkungen der Strukturfonds: a) Verwirklichung der Strukturfonds-Ziele im Hinblick auf das BIP-Wachstum, die tatsächliche Konvergenz des Pro-Kopf-BIP, Beschäftigung und Arbeitslosigkeit; b) Einhaltung der Bedingungen für den Strukturfonds-Einsatz (z.

B. Zusätzlichkeit der Mittel und Dauerhaftigkeit der Entwicklung, insbesondere im Hinblick auf die Eindämmung der Staatsverschuldung und die Kontrolle der Zahlungsbilanz, die Einkommensverteilung und den Umweltschutz); c) Angebots- und Nachfrageeffekte; d) Wirksamkeit der Strukturfonds-Instrumente (z. B. öffentliche Investitionen, Investitionen in Humanressourcen und Beihilfen an private Unternehmen). BIP-Wachstum 7.2. Wie aus Tabelle 7 hervorgeht, zeigen die zur Bewertung der Strukturfonds-Auswirkungen verwendeten wichtigsten Modelle (HERMIN, OGM und DIO) für die Kohäsionsländer ein Wachstum des BIP und folglich eine Konvergenzentwicklung.

Nach diesen Modellen beläuft sich das auf die Strukturmaßnahmen im Rahmen der GFK zurückzuführende kumulative Wirtschaftswachstum der Kohäsionsländer, ausgedrückt als reales Wachstum des BIP, in den Jahren 1994-1999 auf 5,5 % für Portugal, 5,9 % für Griechenland, 2,6 % für Spanien und 3,3 % für Irland. Diese Ergebnisse beruhen auf der Annahme, daß das Zusätzlichkeitsprinzip voll und ganz eingehalten wird; sie können sich folglich im Falle einer Nichteinhaltung ändern (siehe Ziffern 8.11-8.13). Im übrigen sind die Ergebnisse der verschiedenen makroökonomischen Modelle kohärent genug, um die Auswirkungen der GFK 1994-1999 auf das reale Wachstum des jährlichen BIP als plausibel anzusehen.

Dennoch überwiegen kurzfristig weiterhin die Nachfrageeffekte, da sich Auswirkungen auf das Angebot erst viel später ergeben. In dem für die Region Hainaut verwendeten Regionalmodell HELM werden die Auswirkungen des PPD auf das jährliche Wachstum der Gesamtwertschöpfung im Zeitraum 1994-2002 mit 1,7 bis 2,5 % bewertet. Dagegen scheinen die Wachstumseffekte der Strukturfonds im Falle des Mezzogiorno in Italien sehr beschränkt zu sein, bzw. fast bei null zu liegen. Das QUEST-Modell der Kommission enthält Hypothesen für Unternehmen und Verbraucher und gibt Schätzwerte für die Wachstums- und Beschäftigungseffekte an, die niedriger liegen als bei den früheren Modellen.

Die in diesem Modell gezeigten Verbesserungen beim Wachstumspotential und bei der Verringerung der Arbeitslosigkeit werden erst längerfristig sichtbar. 7.3. Die durchschnittliche Beschleunigung des auf die im Rahmen der GFK durchgeführten Strukturmaßnahmen zurückzuführenden jährlichen Wachstums geht aus Tabelle 8 hervor: Die Multiplikatoreffekte eines durch die GFK herbeigeführten einprozentigen BIP-Wachstums führen im Zeitraum 1994-1999 zu einem zusätzlichen jährlichen Wachstum von 0,2 bis 0,3 % für die Nachfrageseite und von höchstens 0,2 % für die Angebotsseite. Wirtschaftlich gesehen tragen die vom Modell HERMIN aufgezeigten, überwiegend die Nachfrageseite betreffenden Effekte, die bei Einstellung der Gemeinschaftsbeihilfen wegfallen würden, nur dann zur Verwirklichung der Ziele des Artikels 130a des Vertrages bei, wenn sie mit dauerhaften, die Produktionskapazitäten der betreffenden Regionen verstärkenden Angebotseffekten einhergehen.

Da sich die Angebotseffekte wesentlich später entwickeln als die Nachfrageffekte, werden die entsprechenden Multiplikatoreffekte möglicherweise unterschätzt. Am Pro-Kopf-BIP gemessene tatsächliche Konvergenz 7.4. Die im Rahmen der Strukturfonds verwendeten Modelle verdeutlichen, daß ein Konvergenzprozeß nicht immer gewährleistet ist und einige GFK-Programme bestenfalls den Abbau von Unterschieden, aber kaum eine Konvergenzentwicklung bewirken. 7.5. Für Irland prognostizieren Bradley (HERMIN 1994) und Honohan (HERMIN 1997) die möglichen Auswirkungen der im Rahmen der GFK 1989-1993 und 1994-1999 gezahlten Beihilfen auf das Pro-Kopf-BIP.

Nach Einschätzung von Bradley wird sich der Beitrag der GFK 1994-1999 im Angleichungsprozeß als geringfügig erweisen, während die GFK nach Ansicht von Honohan in diesem Prozeß eine erhebliche Rolle spielen. Der Vorhersage von Beutel (1997) zufolge wird Irland auch ohne das GFK 1994-1999, durch das sich die jährliche Wachstumsrate lediglich um 0,6 % erhöhe, zum restlichen Europa aufschließen. Ebenso würden sich die jährlichen Wachstumsraten Spaniens, Portugals und Griechenlands im Zeitraum 1994-1999 infolge der Strukturfonds um 0,4 %, 1,1 % und 1 % erhöhen. Dies wirkte sich in jedem Fall positiv auf die am Pro-Kopf-BIP gemessene reale Konvergenzentwicklung aus.

7.6. Die anhand des Modells OGM vorgenommenen Vorhersagesimulationen zur Annäherung des realen Pro-Kopf-BIP an den Unionsdurchschnitt führen zu Schätzungen, nach denen der Nettobeitrag der GFK zur Konvergenz in den Kohäsionsländern gering bleibt, obwohl die 1995 prognostizierten Trends für Irland zu pessimistisch ausfallen (siehe Tabelle 9). 7.7. Im Hinblick auf die Region Hainaut berücksichtigt das Modell HELM bei der Zwischenbewertung die Aspekte der realen Konvergenz. Die voraussichtliche jährliche Wachstumsrate der Region liegt dem Modell zufolge dank der Strukturfonds rund 1,4 bis 1,6 % über dem europäischen Durchschnitt, wodurch der Abstand zu anderen Regionen tatsächlich verringert werden könnte.

7.8. Diese Schätzungen verdeutlichen, daß sich die Strukturfonds-Beteiligungen angesichts der unterschiedlichen regionalen oder sektoriellen Produktionsstrukturen der unter Ziel 1 fallenden Mitgliedstaaten unterschiedlich auswirken. Sie bestätigen auch die Notwendigkeit einer besseren Programmplanung der Strukturfonds, damit die konvergenzorientierten Strukturfonds-Interventionen eine Verbesserung der Produktionskapazität der Wirtschaft ermöglichen. Beschäftigung und Arbeitslosigkeit 7.9. In Tabelle 10 sind die Bewertungsergebnisse zu den Auswirkungen der Strukturfonds auf Beschäftigung und Arbeitslosigkeit zusammengefaßt.

Alle Studien gelangen zu dem Ergebnis, daß die GFK zur Schaffung von Nettoarbeitsplätzen führen. Diese neuen Arbeitsplätze entstehen häufig im Sektor nichthandelbare Dienstleistungen, während sich die Produktivitätseffekte der GFK hauptsächlich auf den industriellen Sektor konzentrieren. Schließlich geht aus einigen Studien hervor, daß industrielle Arbeitsplätze aufgrund einer erhöhten Arbeitsproduktivität abgebaut werden. Wirksamkeit der GFK-Instrumente 7.10. Aus den HERMIN-Bewertungen für Spanien, Irland und Portugal geht hervor, daß die Beihilfen für öffentliche Investitionen, insbesondere im Infrastrukturbereich, zu mehr Wachstum führen als die Beihilfen für Investitionen in Humanressourcen (ausgenommen Spanien) und für private Investitionen.

Dies wird anhand von Tabelle 11 deutlich, in der für die einzelnen Bereiche das BIP-Wachstum aufgeführt ist, das sich durch eine einprozentige Erhöhung des GFK-Anteils am kumulierten BIP des Zeitraums 1994-1999 ergibt. Die HERMIN-Studie für Griechenland gelangt ebenfalls zu der Schlußfolgerung, daß die Infrastrukturinvestitionen ("hard infrastructure") im Rahmen der GFK stärker zum BIP-Wachstum beitragen als Investitionen in Humanressourcen. Die Anwendung des Modells OGM (Pereira 1991) zur Bewertung der Auswirkungen des Austauschs von Beihilfen für private Investitionen oder für Investitionen in Humanressourcen durch zusätzliche Beihilfen für Infrastrukturinvestitionen zeigt eine Verbesserung des durch die Strukturfonds bewirkten BIP-Wachstums und des Konvergenzprozesses.

Verpflichtung zur Zusätzlichkeit und Kofinanzierung 7.11. Anhand der Modelle läßt sich außerdem die Bedeutung der Zusätzlichkeit und der öffentlichen Kofinanzierung bewerten. So gelangt Honohan (HERMIN, 1997) zu der Einschätzung, daß die Auswirkungen des GFK auf die Wachstumsrate der irischen Wirtschaft ohne die Verpflichtung zur öffentlichen Kofinanzierung um 1 % niedriger gewesen wären und auch die Beschäftigung weniger stark angewachsen wäre. Dagegen würden sich Honohan zufolge der Anteil der Staatsverschuldung am BIP und der Zahlungsbilanzüberschuß stärker verringern, wenn keine öffentliche Kofinanzierung vorgeschrieben wäre.

In Portugal führt die Kofinanzierungsverpflichtung nach der HERMIN-Bewertung zu einem zusätzlichen BIP-Wachstum von insgesamt 1,3 %, bewirkt jedoch gleichzeitig eine weniger positive Entwicklung bei der Staatsverschuldung. 7.12. In der HELM-Bewertung für die Region Hainaut wird der Zusätzlichkeit große Bedeutung beigemessen. Das durchschnittliche Wertschöpfungswachstum im Zeitraum 1994-1999 beläuft sich nach dieser Bewertung in den drei Szenarien - Regionalpolitik mit PPD, Fortsetzung der Regionalpolitik ohne Gemeinschaftsbeihilfe, Regionalpolitik abzüglich des PPD - auf 2,5 %, 1,7 % bzw.

0,1 %; außerdem wird davon ausgegangen, daß die Wachstumsrate der Beschäftigung von 0,8 % auf 0,2 % sinken würde. Die Lage der Industrie würde sich ebenfalls erheblich verschlechtern. Die HELM-Bewertung führte durch Zugrundelegung verschiedener Zuschußsätze auch zu der Feststellung, daß der Investitionsbeihilfesatz nicht dem Investitionsanreiz entspricht und daß zahlreiche Investitionen auch bei niedrigeren Beihilfeniveaus durchgeführt worden wären. Dauerhafte Entwicklung 7.13. Aus Tabelle 10 geht hervor, daß die Auswirkungen der Strukturfonds auf die Handelsbilanz, die Leistungsbilanz oder die Staatsverschuldung nicht immer bewertet werden.

Die verschiedenen Studien gelangen im übrigen zu unterschiedlichen Schlußfolgerungen. So bewirkt der auf die GFK zurückzuführende Wirtschaftsaufschwung in einigen Fällen durch die Steuereinnahmen eine Verbesserung der öffentlichen Finanzen, während die GFK nach anderen Modellen Haushaltsdefizite verursachen. Rolle der makroökonomischen Bewertung im Strukturfonds-Entscheidungsprozeß 7.14. Angesichts der kurzfristigen Auswirkungen der Strukturfonds auf die Nachfrage neigen die Zwischenbewertungen dazu, die Schwierigkeiten der Behörden mit der Ausschöpfung der Gemeinschaftsmittel zu überschätzen und die längerfristigen Auswirkungen auf das Angebot zu unterschätzen.

Daher können die Umstellungen oder Umprogrammierungen der OP und GFK in die falsche Richtung gehen. Es besteht nämlich die Gefahr, daß Maßnahmen oder Vorhaben, bei denen die Gemeinschaftsmittel nicht schnell genug in Anspruch genommen werden, insbesondere in komplexen Durchführungsbereichen wie im innovativen Bereich oder bei neuen Technologien, zugunsten von wesentlich weniger produktiven, bereits bestehenden Strukturen gestrichen werden, ohne daß den makroökonomischen Aspekten einer nachhaltigen Entwicklung immer Rechnung getragen wird. 7.15. In diesem Zusammenhang sind ergänzende makroökonomische Bewertungen zu den Aspekten Nachhaltigkeit, Wachstum und Konvergenz vor jeder Entscheidung über die ursprüngliche Programmplanung oder ihre Umstellung unerläßlich.

In zahlreichen Fällen, z. B. in Spanien, Griechenland oder den neuen deutschen Ländern, fanden jedoch im Rahmen der Zwischenbewertung bereits ohne gründliche makroökonomische Analyse Änderungen der Programmplanung statt. Für die Z1-Regionen in Deutschland wurde bei der Zwischenbewertung keine makroökonomische Wirkungsanalyse vorgenommen. Auswirkungen auf der Ebene der Unterprogramme, Maßnahmen und Vorhaben 7.16. Obwohl die Unterprogramme und Maßnahmen die treibende Kraft der Strukturfonds-Planung sind, finden auf dieser Ebene sehr wenige Bewertungen statt. Diese Schwierigkeiten bei der Wirkungsmessung lassen sich u. a. auf die Streuung, die fehlende Festlegung und Kohärenz vieler Unterprogramme und Maßnahmen sowie auf die unzulängliche Quantifizierung ihrer spezifischen Ziele zurückführen.

7.17. Dieser Mangel erschwert die Ermittlung und Messung der Synergie- und Ergänzungseffekte zwischen den Maßnahmen oder zwischen verschiedenen Programmen. Im übrigen ist der Zusammenhang zwischen den allgemeinen Zielen des Programms und den spezifischen Zielen der Unterprogramme oder Maßnahmen sehr oft unklar. So wurde in den Zwischenbewertungsberichten auf zahlreiche Kohärenzprobleme in den Programmen des Z1-GFK 1994-1999 hingewiesen. 7.18. Im übrigen eignen sich nur wenige Techniken zur Messung der Wirkung eines Unterprogramms oder einer spezifischen Maßnahme. Anhand der vorstehend beschriebenen makroökonomischen Modelle läßt sich die Wirksamkeit der wichtigsten GFK-Instrumente - öffentliche Investitionen, private Investitionen und Investitionen in Humanressourcen - nur hinsichtlich ihres jeweiligen Beitrags zum BIP-Wachstum bewerten.

Da sich die Infrastrukturausgaben ergänzend für das Privatkapital auswirken, ergeben sich in diesem Bereich offenbar auch höhere Erträge; die Infrastrukturmaßnahmen beschleunigen anscheinend die Konvergenzentwicklung stärker als andere Investitionsformen (siehe Tabelle 11). 7.19. Die Wahl der Maßnahmen oder Unterprogramme des Programms und ihre Finanzierung ist jedoch im Hinblick auf das bei der Regionalentwicklung erzielte nachhaltige endogene Wachstum nicht ohne Bedeutung. Die von der Kommission oder den Mitgliedstaaten partnerschaftlich auf der Ebene der Unterprogramme oder Maßnahmen durchgeführten Bewertungsarbeiten bilden im übrigen noch keine ausreichende Grundlage für die Untersuchung der sich aus einer spezifischen Maßnahme für andere Gebiete oder Sektoren ergebenden Folgen oder für den Vergleich mit anderen Maßnahmen ähnlicher Zielsetzung.

Außerdem muß bei der Wirkungsanalyse der Maßnahmen oder Unterprogramme auch die ursprüngliche Abwägung zwischen Wachstum und Gleichbehandlung der Regionen, durch die eine Vorentscheidung getroffen wurde, berücksichtigt werden, um die erwarteten und die erzielten Effizienzgewinne zu gewichten. 7.20. Auf der Ebene der Vorhaben wird grundsätzlich zur Genehmigung der Finanzierung eines Vorhabens eine Analyse der Kosten und Vorteile durchgeführt. Diese Analyse ist in Artikel 5 der Verordnung (EWG) Nr. 2083/93 (EFRE) für Großvorhaben mit Gesamtkosten von über 25 Mio ECU bei Infrastrukturvorhaben und über 15 Mio ECU bei produktiven Investitionen vorgeschrieben.

Diese Vorausbeurteilungen der Großvorhaben finden bei der Bearbeitung der Anträge auf Gemeinschaftsbeteiligung statt und sind ausschlaggebend für die Festlegung des Finanzrahmens. Diesbezügliche Ex-post-Bewertungen sind in den Strukturfondsverordnungen jedoch nicht vorgesehen. Die Kommission kann daher nicht verlangen, daß zur Überprüfung, ob die eingesetzten Gemeinschaftsmittel auch tatsächlich die erwarteten sozialen und wirtschaftlichen Vorteile nach sich gezogen haben, Ex-post-Bewertungen durchgeführt werden. Durch diese Schwachstelle im Bewertungsverfahren für Großvorhaben wird das gesamte Bewertungskonzept in diesem Bereich unwirksam, denn eine Vorausbeurteilung ist nur dann sinnvoll, wenn später tatsächlich eine Ex-post-Bewertung stattfindet.

Außerdem ließen sich mit diesen mikroökonomischen und sektorbezogenen Studien auch die potentiellen Auswirkungen der Strukturfonds auf die Produktivität beurteilen, was sie zu einem leistungsfähigen Instrument für die kurz- und mittelfristige Analyse dieser Auswirkungen machen könnte. 7.21. Synergien und Ergänzungswirkungen müssen bei der Bewertung der Vorhaben ebenfalls berücksichtigt werden. Sie werden noch nicht ausreichend bzw. nur oberflächlich bewertet. Um die voraussichtlichen Auswirkungen nicht zu verringern, müssen die Synergie- und Ergänzungseffekte der Vorhaben unbedingt abgestimmt werden.

7.22. Bei der Zwischenbewertung werden oft Probleme der Programmverwaltung behandelt, während die Kriterien, auf deren Grundlage die Vorhaben ausgewählt wurden (z. B. Nachhaltigkeit des Vorhabens oder Beitrag des Vorhabens zur Regionalentwicklung), vernachlässigt werden. Das Programmverwaltungssystem muß jedoch gewährleisten, daß die Projektauswahlkriterien zu optimalen Programmergebnissen führen. Insbesondere sind Vorhaben zu vermeiden, die im Bereich der Entwicklung von sehr geringem zusätzlichen Nutzen sind, selbst wenn sie den Vorteil haben, daß die Mittel sehr rasch verwendet werden können.

Das Auswahlverfahren für die Vorhaben muß zur Gewährleistung seiner Kontrolle und Bewertbarkeit transparenter gestaltet werden. 8. SCHLUSSFOLGERUNG 8.1. Die Bewertung der Strukturinterventionen der Gemeinschaft ist eine sich aus den Beschlüssen des Rates ergebende rechtliche Verpflichtung und findet zur Zeit im Rahmen der Partnerschaft weitreichende Anwendung. Sie ist zu einer Entscheidungshilfe für die Konzeption und Verwaltung der Interventionen geworden und trägt zu einer besseren Kenntnis von Auswirkungen und Nutzen der Interventionen bei. Für den Zeitraum 1994-1999 wurden im Laufe des Jahres 1997 von den Begleitausschüssen (19) mehr als 250 Halbzeitbewertungen fertiggestellt.

8.2. Mit der Revision der Strukturfondsreform erreicht die Bewertung ein Reifestadium, das schon jetzt durch bessere methodische Vorgaben konsolidiert werden sollte. Nachdem die Ergebnisse des MEANS-Programms nicht zufriedenstellend ausfielen, bedarf es noch erheblicher Anstrengungen, um Bewertungsmethoden festzulegen, die sich am besten zur Messung der sozioökonomischen Auswirkungen regionaler Entwicklungsprogramme eignen. 8.3. Besondere Anstrengungen auf allen Ebenen sollten auch den Indikatoren gelten - unter den Gesichtspunkten Schlüssigkeit, Art der Informationserfassung und entstehende Kosten.

Auch die qualitativen Aspekte sollten förmlich festgelegt werden. Ohne erneute Fortschritte in diesen Bereichen droht das Bewertungsverfahren zu stagnieren. 8.4. Das gleiche gilt für die statistischen Datenbanken, deren Mängel die Aussagekraft der Indikatoren fraglich erscheinen lassen und das Begleit- und Bewertungsverfahren erheblich beeinflussen. 8.5. Die Vielzahl der derzeit angewandten mehr oder weniger angemessenen Indikatoren wirkt sich nachteilig auf die Qualität der Bewertung aus und verhindert ihren praktischen Einsatz. Unter Berücksichtigung der sich durch die Regionalisierung der Angaben ergebenden Besonderheiten und der materiellen Möglichkeiten der Datenerfassung sollte eine sorgfältige Auswahl einer kleinen Zahl von Wirkungsindikatoren getroffen werden, die zur Begründung oder Umstellung eines strukturpolitischen Konzepts unerläßlich sind.

Die Zuverlässigkeit dieser Indikatoren müßte kontrolliert werden. Die Vergleichbarkeit der Indikatoren und ihre Aggregation auf europäischer Ebene sind verbesserungsbedürftig. 8.6. Damit die Bewertungen im Entscheidungsprozeß und bei der operationellen Verwaltung der Strukturfonds in vollem Umfang berücksichtigt werden können, ist zu gewährleisten, daß sie transparent und objektiv sind, bedarfsgerechte Ziele verfolgen und zu einem angemessenen Zeitpunkt fertiggestellt werden. 8.7. Zur Gewährleistung objektiver Bewertungsergebnisse muß die Unabhängigkeit der Bewerter gegenüber den mittelbewirtschaftenden Stellen und den zuständigen Behörden gewahrt bleiben.

8.8. Die Verwendung eines gemeinsamen Bezugsrahmens würde die Verständlichkeit und Vergleichbarkeit der Bewertungsberichte und den Erfahrungsaustausch erleichtern. 8.9. Für jede Bewertung sollten besser umsetzbare Ziele festgelegt werden. Der Auftrag und das Lastenheft, die im allgemeinen von der Kommission genehmigt werden, sollten klare Angaben darüber enthalten, welche Methoden jeweils am besten für regionale, sektorielle oder nationale Aspekte oder für spezifische kurz- oder langfristige Effekte geeignet sind. Die Stärken und Schwächen aller anderen Methoden sollten mit den Methoden der Kommission verglichen werden.

Ebenso sollte der Bezugsrahmen für jede Bewertung eine von der Kommission vorgeschlagene Mindestliste von Indikatoren zur Messung der Leistungsfähigkeit der Programmziele enthalten, um eine für Analysezwecke unerläßliche Kohärenz zu gewährleisten. Natürlich können zur Vervollständigung und Verfeinerung dieser Analyse auch andere Indikatoren der sozioökonomischen und strukturellen Lage verwendet werden. 8.10. Angesichts der vielen unterschiedlichen Bewertungskonzepte sollte die Kommission den Bewertern in der Ausschreibungsphase eine wesentlich bessere Erläuterung ihres jeweiligen Ansatzes abverlangen, insbesondere im Hinblick auf die Art der zu messenden Auswirkungen und auf die Dauer dieser Auswirkungen.

Dadurch wäre sie in der Lage, zu beurteilen, inwieweit die eingesetzten Methoden alle Aspekte einbeziehen. Außerdem sollte die Bewertung eine detaillierte Analyse der Zusammenhänge zwischen Programmzielen und Schwerpunkten und Durchführungsmaßnahmen enthalten und unbedingt eine Rangfolge für Ziele, Ergebnisse und Durchführung der Programme, Schwerpunkte und Maßnahmen vorgeben. 8.11. In diesem Zusammenhang sollten die Bewertungen und insbesondere die Zwischenbewertungen eine besser auf die Empfänger abgestimmte Gliederung enthalten, durch die ihre Wirksamkeit erhöht und den spezifischen Erwartungen besser entsprochen werden könnte.

Ebenso sollte eine bessere Kostenkontrolle angestrebt werden, denn der Kommission sind die Kosten der im Rahmen der Partnerschaft durchgeführten Bewertungen nicht immer bekannt. 8.12. Die Kommission sollte auch angeben, auf welchen Aspekten der Regionalpolitik das Hauptaugenmerk der Bewertung liegen sollte: Zusätzlichkeit, Konvergenz, Partnerschaft, Konzentration, Beschäftigung, endogene Wirtschaftsentwicklung und soziale Wohlfahrt. Das Pro-Kopf-BIP darf nicht der einzige Maßstab zur Bewertung der Wirksamkeit der Strukturinterventionen sein. 8.13. Die Einschätzung der Effekte und Auswirkungen und der verstärkenden Wirkung der Gemeinschaftsaktion sollte sich auf nationale und regionale Entwicklungsmodelle und auf maßnahmenbezogene Wirkungsmodelle stützen.

8.14. Die makroökonomischen Ergebnisse der Strukturmaßnahmen sollten unter Berücksichtigung der Unzulänglichkeiten der angewandten Modelle, der Nebenwirkungen der Maßnahmen und ihrer Gesamtauswirkungen auf die soziale Wohlfahrt verfeinert werden. 8.15. In makroökonomischen Modellen wird eine grundlegende Unterscheidung zwischen den kurzfristigeren Nachfrageeffekten und den strukturellen Anpassungen des Angebots getroffen. Bei der Planung der Strukturfonds-Interventionen sollte stärkeres Gewicht auf eine Verbesserung der Produktionskapazität der Wirtschaft gelegt werden, um die Dauerhaftigkeit der Auswirkungen zu gewährleisten und eine zu große Abhängigkeit von der Nachfrage - durch die sich die Gemeinschaftshilfe langfristig als unerläßlich erweisen würde - zu vermeiden.

8.16. Da sich die Angebotseffekte erst längerfristig einstellen, werden bei der Zwischenbewertung im allgemeinen eher die Nachfrageeffekte betrachtet. Die Kommission sollte sich bemühen, Instrumente zu entwickeln, mit denen sich die Auswirkungen auf die Wirtschaftsstruktur begleiten und bewerten lassen. 8.17. Die makroökonomischen Modelle lassen auch erkennen, daß sich eine auf Wirtschaftswachstum ausgerichtete Politik nicht immer mit einer dauerhaften Entwicklung vereinbaren läßt. Das Verhältnis zwischen den Wachstums- und den Dauerhaftseffekten sollte noch genauer analysiert und bei der Planung der Strukturfonds-Interventionen systematisch berücksichtigt werden.

8.18. Die Auswirkungen der Verpflichtung zur Zusätzlichkeit und zur öffentlichen Kofinanzierung sind nicht leicht abzugrenzen und werden nicht immer untersucht. Dieser Aspekt müßte systematischer und gründlicher analysiert werden. 8.19. Die Bewertung als solche soll nicht an die Stelle des politischen Entscheidungsprozesses treten, bei dem weitergehende Erwägungen einbezogen werden; als Hilfsmittel für eine wirtschaftliche und wirksame Verwaltung der Strukturinterventionen der Gemeinschaft, bei der den sozioökonomischen Ergebnissen Rechnung getragen wird, ist sie jedoch unerläßlich. Dieser Bericht wurde vom Rechnungshof in seiner Sitzung vom 23.

September 1998 in Luxemburg angenommen. Für den Rechnungshof Bernhard FRIEDMANN Präsident >PLATZ FÜR EINE TABELLE> >PLATZ FÜR EINE TABELLE> >PLATZ FÜR EINE TABELLE> >PLATZ FÜR EINE TABELLE> >PLATZ FÜR EINE TABELLE> >PLATZ FÜR EINE TABELLE> >PLATZ FÜR EINE TABELLE> >PLATZ FÜR EINE TABELLE> >PLATZ FÜR EINE TABELLE> >PLATZ FÜR EINE TABELLE> >PLATZ FÜR EINE TABELLE> (1) Dies sind insbesondere a) Artikel 6 der Rahmenverordnung (Verordnung (EWG) Nr. 2052/88, geändert durch die Verordnung (EWG) Nr. 2081/93) über Aufgaben und Effizienz der Strukturfonds und über die Koordinierung ihrer Interventionen untereinander; b) Artikel 26 der Koordinierungsverordnung für die Strukturfonds (Verordnung (EWG) Nr.

4253/88, geändert durch die Verordnung (EWG) Nr. 2082/93). (2) Die Vorausbeurteilung wird manchmal auch als "Ex-ante-Bewertung" bezeichnet. In diesem Bericht verwendet der Hof den Verordnungsterminus "Vorausbeurteilung". (3) Die Gemeinschaftsaktion stellt eine Ergänzung oder einen Beitrag zu den entsprechenden nationalen Aktionen dar. Sie kommt zustande durch eine als "Partnerschaft" bezeichnete enge Konzertierung zwischen der Kommission, dem Mitgliedstaat, den regionalen und lokalen Behörden, den sonstigen zuständigen Behörden, den Wirtschafts- und Sozialpartnern und den sonstigen zuständigen Einrichtungen.

Die Partnerschaft gestaltet sich unter voller Wahrung der jeweiligen institutionellen, rechtlichen und finanziellen Befugnisse der Partner. (4) In seinen Jahresberichten insbesondere zu den Haushaltsjahren 1990 (Kapitel 7), 1993 (Kapitel 6, 7, 8 und 9) und 1994 (Kapitel 4) hat der Hof im Hinblick auf den Programmplanungszeitraum 1989-1993 bereits auf zahlreiche Mängel im Bereich der Bewertung hingewiesen. (5) Es handelt sich um folgende Bewertungen: a) Programmplanungszeitraum 1989-1993: - Vorausbeurteilungen der Z1- und Z5b-GFK (1990-1991), - Ex-post-Bewertungen der Z1-GFK (1994-1995), - Ex-post-Bewertungen der Z2-GFK (1996-1997), - thematische Bewertungen (KMU, Telekommunikation); b) Programmplanungszeitraum 1994-1999: - Vorausbeurteilungen der regionalen Entwicklungspläne für Ziel 1, - Vorausbeurteilungen der unter Z5b fallenden Programme, - Vorausbeurteilungen der unter Z2 fallenden PPD (1994-1996), - Vorausbeurteilungen der unter Z2 fallenden PPD (1997-1999), - kritische Analysen der unter Z1 fallenden PPD und GFK (1995).

Außerdem gab die Kommission für die einzelnen Mitgliedstaaten Bewertungen der Auswirkungen der europäischen Strukturpolitik auf den wirtschaftlichen und sozialen Zusammenhalt der Union in Auftrag. (6) Vermerk der GD XXII vom 14. März 1991. (7) a) 1994 erarbeitete sie die ersten Auftragsbedingungen für die Zwischenbewertung der unter Ziel 1 fallenden GFK und Interventionsformen. Darin wird bestätigt, daß die Zwischenbewertung den Begleitausschüssen bei der Entscheidungsfindung hilft und partnerschaftlich vorgenommen wird. Außerdem sind die Durchführungsmodalitäten festgelegt, insbesondere das Profil des Bewertungsteams und seine Aufgaben. b) 1995 verteilte sie allgemeine Leitlinien für die Begleitung und die Zwischenbewertungen im Bereich der Strukturfonds der Gemeinschaft.

Darin sind die Analyseelemente (globale und spezifische Ziele, Indikatoren) sowie das Verhältnis zwischen Begleitung und Zwischenbewertung definiert. c) 1995 übermittelte sie den Mitgliedstaaten Schreiben, in denen sie an die Verpflichtung zur Zwischenbewertung erinnerte und erneut die gewünschten Durchführungsmodalitäten darlegte. (8) Unter anderem waren dies folgende Veranstaltungen: a) Konferenz über die Bewertung der europäischen Regionalpolitik (Brüssel, 16. November 1995), auf der hauptsächlich die Ergebnisse der Ex-post-Bewertungen für Z1 1989-1993 und der Vorausbeurteilungen 1994-1999 behandelt wurden; b) europäische Konferenz über die Bewertungsmethoden für die Strukturfonds-Interventionen (Berlin, 2. und 3.

Dezember 1996), auf der im wesentlichen die Probleme der Bewertung der Auswirkungen auf mikroökonomischer, makroökonomischer und thematischer Ebene erörtert wurden; c) Konferenz in Sevilla von März 1998, die den partnerschaftlichen Erfahrungsaustausch im Bereich Bewertung fördern sollte. (9) Dieses Programm wird gemeinsam von der Kommission und einem externen Berater verwaltet, für dessen Beteiligung jährlich 932 000 ECU aus der Haushaltslinie B2-1 8 2 0 bereitgestellt werden. (10) Der programmbezogene Ansatz wurde durch folgende Faktoren beeinträchtigt: i) kurze Planungsfristen, die insbesondere keine Vorausbeurteilung ermöglichten; ii) Fehlen konkreter Ziele sowie quantifizierter Durchführungs-, Ergebnis- und Wirkungsindikatoren; iii) administrative Zwänge, die insbesondere dann auftraten, wenn die Unterprogramme eines Programms von verschiedenen Stellen verwaltet wurden oder wenn sich sektorielle und regionale Konzepte überschnitten; iv) Schwachstellen in den Gemeinschaftsvorschriften, die insbesondere dazu führten, daß Vorhaben, die für die Z1-OP abgelehnt wurden, im Rahmen von Gemeinschaftsinitiativen genehmigt wurden; v) projektbezogener Ansatz des Kohäsionsfonds, der einer einheitlichen Anwendung des programmbezogenen Ansatzes ebenfalls nicht förderlich ist.

(11) Dabei handelt es sich jedoch nicht um die Schaffung von Arbeitsplätzen, da dem ökonometrischen Modell die Hypothese der Vollbeschäftigung zugrunde liegt und die Unternehmen bei schwacher Konjunktur Produktionsüberkapazitäten haben. (12) Im achten Jahresbericht über die Strukturfonds wird ein beträchtlicher Leverage-Effekt festgestellt, der sich auf Bruttoergebnisse wie die Schaffung von Arbeitsplätzen oder die Gründung von Unternehmen bezieht. (13) "Evaluación intermedia de programas operativos regionales del objetivo nº 2 (fase 1994-1996). Orientaciones sobre contenidos comunes a recoger en los pliegos de condiciones técnicas", 23.

Mai 1996. (14) DATAR, Calendrier réglementaire et administratif. (15) "General criteria to underpin Terms of Reference for Mid-Term Evaluation of Operational Programmes/Community Initiatives". (16) "Evaluatiekader voor de programma's van de Europese Structuurfondsen, Terp Advies-CBEA Pieter van Run", Dezember 1997. (17) 36 dieser 320 Zwischenbewertungen wurden an Ort und Stelle und/oder bei der Kommission geprüft. (18) Beispielsweise heißt es: Belebung des ländlichen Raums, Verstärkung des regionalen Wirtschaftsgefüges, Strukturänderungen im Zusammenhang mit der Regionalentwicklung. (19) In den Begleitausschüssen sind die betroffenen nationalen Stellen und die Kommission vertreten.

ANHANG I ZUSAMMENFASSUNG DER METHODEN FÜR DIE EX-POST-BEWERTUNG DER ZIEL-1-GFK DES ZEITRAUMS 1989-1993 1. Die Ex-post-Bewertung der Ziel-1-GFK des Zeitraums 1989-1993 hatte folgende ausdrückliche Ziele: a) Beurteilung der GFK-Strategie und der mit den GFK verfolgten Ziele und Gewinnung von Erkenntnissen für zukünftige Aktionen; Analyse der sich für die ursprünglich festgesetzten Ziele ergebenden Folgen aus einer Neufestlegung und Anpassung der Interventionen während des Durchführungszeitraums; b) Erstellung einer ersten Bilanz der materiellen Ergebnisse der wichtigsten Aktionen auf der Ebene der GFK und der OP und erste Beurteilung ihrer Auswirkungen; c) Analyse der Wirksamkeit der Durchführungsverfahren und Ermittlung der daraus für etwaige zukünftige Anpassungen zu ziehenden Lehren.

2. Der Hauptberater, dem die Koordinierung der von anderen Beratern in den jeweiligen Mitgliedstaaten durchgeführten Bewertungen oblag, erarbeitete folgende methodische Ansätze: a) Zur Erreichung des ersten Ziels, d. h. zur Bewertung der internen Logik der GFK und OP und ihrer Anpassungen seit 1989 und spezifischer zur Analyse der Gründe für diese Anpassungen, des zusätzlichen Nutzens der Gemeinschaftsfinanzierung, der internen und externen Kohärenz, der Abstimmung der Strategie auf die Probleme und der Angemessenheit der Finanzierungen, sollten folgende Arbeiten, die einem Top-down-Ansatz entsprechen, durchgeführt werden: - Erfassung von Informationen und Schlüsselangaben:

Finanzdaten, vorher festgesetzte Ziele, erwarteter Output/erwartete Auswirkungen, Zielgruppen und -bereiche, wichtigste eingesetzte Instrumente, Zahl der genehmigten Vorhaben/Maßnahmen, Zahl der durchgeführten Vorhaben; - Beschreibung der Programmumgebung und ihrer Entwicklung (Ausgangslage - derzeitige Lage); Ermittlung der externen Faktoren, die die Entwicklung des Programms und seinen Erfolg/sein Scheitern beeinflussen; Analyse der grundlegenden Probleme und Ursachen; Festlegung der Schlüsselindikatoren für die Regionalentwicklung, einschließlich der Indikatoren für eine Veränderung der Ungleichheiten; - Ermittlung der politischen Instrumente (Darlehen, Subventionen, technische Hilfe); - Aufstellung einer Rangordnung der Ziele, Ermittlung der Rangebenen und des Verhältnisses zwischen Zielen und Instrumenten. b) Die zur Erreichung des zweiten Ziels durchzuführenden Analysen beruhten sowohl auf Top-down- als auch auf Bottom-up-Ansätzen: - Output- und Wirkungsanalyse auf der Ebene der OP, Maßnahmen und Vorhaben unter Berücksichtigung von "Nettoverlusten" und Substitutions- und Multiplikatoreffekten; - Analyse der relativen Wirksamkeit von Maßnahmen und Maßnahmenkombinationen;

Analyse der Kausalfaktoren für Erfolge/Mißerfolge; - Input-Output-Vergleich. Außerdem sollten Schlüsselindikatoren und fakultative Indikatoren festlegt werden. c) Zur Erreichung des dritten Ziels sollte die Wirksamkeit der Durchführungsverfahren auf der Ebene der GFK und OP und einer beschränkten Anzahl von Maßnahmen analysiert sowie festgestellt werden, welche Verbesserungen bei der Programmplanung, Durchführung, Begleitung und Bewertung erzielt wurden und noch zu erzielen waren; in jedem Mitgliedstaat sollten die Verfahren der Entscheidungsfindung, Planung, Finanzkontrolle, Durchführung, Begleitung und Kontrolle, die Finanzierungswege, die Partnerschaft, die Zusätzlichkeit der Mittel, die Koordinierung der Fonds sowie die Verfahren zur Vereinfachung, Harmonisierung, Flexibilisierung und Schaffung von mehr Transparenz untersucht werden; die Durchführung und Begleitung einer kleinen Stichprobe von Maßnahmen/Großvorhaben sollte vertieft analysiert werden. d) Es wurden Ad-hoc-Stichproben von Programmen, Maßnahmen und Vorhaben ausgewählt, um zum einen eine begrenzte Zahl materieller und Wirkungsindikatoren zu erläutern und zum anderen vertiefte Analysen durchzuführen.

ANHANG II ZUSAMMENFASSUNG DES EX-POST-BEWERTUNGSKONZEPTS FÜR ZIEL 2 (1989-1993) Die Ex-post-Bewertung der im Rahmen von Ziel 2 durchgeführten Gemeinschaftsinterventionen des Programmplanungszeitraums 1989-1993, an denen im allgemeinen der EFRE und der ESF beteiligt waren, umfaßte folgende Analysen und Studien: a) allgemeine Analysen, die sich auf alle unter Ziel 2 fallenden Regionen und Gebiete bezogen. Damit sollte die sozioökonomische Lage vor Beginn der im Rahmen von Ziel 2 durchgeführten SF-Interventionen mit der sozioökonomischen Lage nach Beendigung dieser Interventionen verglichen werden.

Außerdem sollten die angewandte Strategie, die Rangordnung der Ziele, Prioritäten und Maßnahmen, die Indikatoren, die geplanten und nicht geplanten Auswirkungen, die Synergien zwischen den Programmteilen und das Zusammenwirken der verschiedenen Fonds analysiert werden. Diese Analysen sollten auf der Grundlage der Angaben in den GFK und OP, der jährlichen Durchführungsberichte oder der dem Begleitausschuß vorgelegten Berichte und, sofern verfügbar, der Vorausbeurteilungen und Ex-post-Bewertungen vorgenommen werden; b) vertiefte Studien, die sich auf 22 Regionen bezogen. Diese Studien hatten folgende Ziele: - gründliche Untersuchung der Angemessenheit der GFK, OP und Maßnahmenarten; - Analyse der Organisationsstrukturen und der Modalitäten der Programmverwaltung; - Bewertung der Auswirkungen und "Verstärkungseffekte", die auf die GFK und OP zurückgeführt werden können; - Bewertung der Kosten und der Wirksamkeit der Maßnahmen; - Untersuchung des Beitrags der im Rahmen des Z2-Programms durchgeführten Interventionen im Regionalentwicklungsprozeß.

Die vertieften Bewertungen erfolgen nach dem Bottom-up-Konzept. Ziel dabei ist es, zunächst das Verfahren zur Auswahl der Aktionen, die Art der Aktionen, die Verwaltungsverfahren, die Auswirkungen und die verstärkende Wirkung der Aktionen, die Synergien und die Zusätzlichkeit der Mittel zu prüfen und dann durch Aggregation der gewonnenen Informationen auf die Ebene der Maßnahme und schließlich des Programms zu gelangen. ANHANG III MERKMALE DER IM RAHMEN DER STRUKTURFONDSBEWERTUNG VERWENDETEN MAKROÖKONOMISCHEN MODELLE 1. Im Rahmen der makroökonomischen Bewertung im Bereich der Strukturfonds wurden hauptsächlich folgende Modelle verwendet: a) ökonometrische Modelle, z.

B. HERMIN (1), HELM (2) und QUEST II (3); b) berechenbare allgemeine Gleichgewichtsmodelle, z. B. OGM (4) und BBM (5); c) Input-Output-Modelle, z. B. DIO (6) und FIDIMI (7); d) strukturelle Grenzwertanalyse. Die Tabellen III.1 und III.2 geben eine schematische Übersicht über die Merkmale dieser Modelle in den untersuchten Fällen. Tabelle III.3 zeigt die modellmäßige Erfassung der GFK-Merkmale. 2. Im übrigen erlaubt die auf multisektorieller Basis für ein Zeitintervall von mehr als zehn Jahren durchgeführte Simulation der wirtschaftlichen Entwicklung in den unter Ziel 1 fallenden Mitgliedstaaten eine Einschätzung des durch die Strukturfonds verursachten Strukturwandels und eine Bewertung der Dauerhaftigkeit des Aufholprozesses, den die Gemeinschaftshilfe unterstützen und verstärken soll.

3. Im Rahmen seiner Untersuchung ließ der Hof eine Analyse erstellen (8), mit der beurteilt werden sollte, inwieweit sich diese makroökonomischen Techniken für die Messung der Auswirkungen der Strukturinterventionen eignen und wirksam zu den strategischen Entscheidungen im Programmplanungsprozeß beitragen können. 4. Es ist festzustellen, daß die Erkenntnisse zu den endogenen oder exogenen Faktoren, die den Erfolg der Strukturprogramme beeinflussen, sich je nach den angewandten Methoden und Konzepten unterscheiden. Mit den makroökonomischen Modellen sollen nämlich die Mechanismen des Wirtschaftssystems eines Landes oder einer Region dargestellt und die Auswirkungen eines exogenen Schocks, wie z.

B. die Intervention der Strukturprogramme, abgebildet oder simuliert werden. Die reale Lage der Wirtschaft läßt sich jedoch mit einer einzigen Darstellung nicht vollständig wiedergeben. 5. Das ökonometrische Modell HERMIN berücksichtigt die Besonderheiten der einzelnen Mitgliedstaaten und aggregiert die Auswirkungen auf nationaler Ebene. Es geht von der Annahme aus, daß die Produktionskapazitäten der Volkswirtschaften nicht voll ausgelastet sind und die mit steigenden Investitionsausgaben verbundenen Multiplikator- und Akzeleratoreffekte zu einem Produktions- und Beschäftigungszuwachs führen.

Das Modell liefert allem Anschein nach zufriedenstellende Ergebnisse im Hinblick auf die Nachfrageeffekte. Im Hinblick auf die Angebotseffekte bewirkt der Rückgang der Arbeitslosigkeit dem Modell zufolge unter Berücksichtigung der Phillips-Kurve einen Anstieg der Löhne bei gleichzeitiger Beschränkung der Auswirkung auf die Inflation. Im übrigen werden die Produktivitätseffekte ausdrücklich berücksichtigt, indem modellmäßig erfaßt wird, wie sich externe Einsparungen durch Steigerung und Verbesserung des Humankapitals und des öffentlichen und privaten materiellen Kapitals auf die Produktivität auswirken.

Die Berücksichtigung dieser Aspekte ist jedoch von Land zu Land unterschiedlich. Das Modell liefert nur partielle Angaben zur Dauerhaftigkeit der Entwicklung; insbesondere werden Wechselkursänderungen, die das Zahlungsbilanzgleichgewicht gewährleisten sollen, oder Schwankungen der Fiskaltransfers nicht berücksichtigt. 6. Das für die Zwischenbewertung des Z1-PPD 1994-1999 der Provinz Hainaut (Belgien) eingesetzte makroökonometrische Modell HELM ist eines der wenigen Modelle, die spezifisch den Regionalentwicklungsansatz berücksichtigen: Es betrachtet die mit der langfristigen Produktivität verbundenen Auswirkungen des endogenen Wachstums, obwohl sich auf die Strukturfonds-Interventionen zurückzuführende Produktivitätsverbesserungen weitgehend auf den industriellen Sektor beschränken und nur die Arbeitsproduktivität betreffen.

Im Hinblick auf die Verwendung der Produktionskapazitäten und die sich durch die Investitionen für die Nachfrage ergebenden Multiplikator- und Akzeleratoreffekte liegen dem Modell ähnliche Annahmen zugrunde wie dem Modell HERMIN; hiervon ausgehend liefert es Angaben/Vorhersagen zu globalen und aggregierten Auswirkungen des PPD auf die Wirtschaft der Region Hainaut (z. B. insgesamt bewirkte Investitionen, Wertschöpfung oder Beschäftigung in der verarbeitenden Industrie und im Bereich der Handelsdienstleistungen) im Zeitraum 1994 bis 2002/2005. Es ist anzumerken, daß das Modell HELM zwar die regionalen Ausfuhren berücksichtigt, nicht jedoch die Einfuhren aus anderen Regionen, so daß die Gefahr besteht, daß die Nachfrageeffekte überbewertet werden.

Die Nachfrage wird noch dadurch verstärkt, daß weder die Lohnanpassungen im Zusammenhang mit dem Rückgang der Arbeitslosigkeit noch höhere Kosten oder Kapazitätsbeschränkungen berücksichtigt wurden. Das Modell HELM macht außerdem wenig Angaben zur Entwicklung der Arbeitslosigkeit und zum Beschäftigungsangebot. Schließlich beruht es auf in früheren Perioden erfaßten statistischen Angaben, die nicht anhand von anderen einschlägigen Informationsreihen überprüft wurden. 7. Die berechenbaren allgemeinen Gleichgewichtsmodelle beziehen sich insbesondere auf die nationale Ebene. Sie verdeutlichen die langfristigen Angebotseffekte, die sich durch die Strukturinterventionen der Gemeinschaft ergeben.

Das Modell OGM geht auf der Grundlage des Konzepts eines intertemporalen endogenen Wachstums davon aus, daß die Produktionsfaktormärkte im Gleichgewicht sind und die Produktionskapazitäten der Volkswirtschaft voll ausgelastet sind. Änderungen bei der Nachfrage wirken sich nicht auf Produktion und Beschäftigung aus, und die Strukturfondsprogramme können das Wachstum nur durch Produktivitätssteigerungen stimulieren; diese Produktivitätseffekte sind in der Produktionsfunktion klar dargelegt. Das Modell versucht, eine optimale Lösung für das jeweilige Land zu ermitteln, indem eine intertemporale Wohlfahrtsfunktion maximiert wird.

Ausgehend von der Annahme einer Lage ohne Unsicherheiten wird erwartet, daß die Wirtschaftsakteure, die genau vorhersehen können, wieviel Mittel ihnen zugewiesen werden und auf welchen Zeitraum sich die Hilfe erstreckt, optimale Verbrauchs- und Investitionsentscheidungen treffen. Schließlich sieht das optimale Wachstumsmodell langfristig ein Gleichgewicht der Zahlungsbilanz und ein Haushaltsgleichgewicht voraus. 8. Das Modell BBM sieht im Hinblick auf einige Sektoren ein Gleichgewicht der Arbeitsmärkte voraus, so daß die Nachfrageeffekte keinen Einfluß auf Produktion und Beschäftigung haben; dagegen wird im Hinblick auf andere Sektoren davon ausgegangen, daß eine höhere Nachfrage zu Wachstum führt.

Das Modell bezieht ebenfalls Produktivitätseffekte im Zusammenhang mit technologischen Veränderungen ein, die zu einer Input-Reduzierung führen. 9. Mit dem Input-Output-Modell DIO soll das Verhältnis zwischen allen einer Volkswirtschaft zur Verfügung stehenden Ressourcen und dem gesamten Endverbrauch dargestellt werden. So werden die Verflechtungen zwischen den verschiedenen Wirtschaftssektoren eines Landes aufgezeigt, die durch sektorübergreifenden Verbrauch miteinander verbunden sind. Der Input-Output-Ansatz maximiert die Auswirkungen der Strukturinterventionen auf die Nachfrage und läßt die Angebotseffekte unbeachtet (Produktivitätseffekte, Lohneffekte, inflationäre Anpassungen).

Die Dauerhaftigkeit der Entwicklung wird nicht behandelt. Das Modell FIDIMI ist eine Kombination aus dem allgemeinen Gleichgewichtsmodell und dem Input-Output-Modell und ermöglicht eine Analyse der Auswirkungen von in Süditalien durchgeführten Gemeinschaftsinterventionen auf Norditalien. 10. Von den sonstigen Techniken zur Bewertung der Auswirkungen der regionalpolitischen Maßnahmen verwendet Eurostat insbesondere die strukturelle Grenzwertanalyse, und zwar zur Bewertung der Auswirkungen der SF in einigen unter die Ziele 1 oder 2 fallenden Fördergebieten. Ziel dieser Analyse ist es, den Grenzwert zu ermitteln, die Differenz zwischen der tatsächlichen und einer simulierten Lage, die sich durch Anwendung der geschätzten nationalen Trends ergibt.

Bei den so abgegrenzten Auswirkungen werden jedoch die Ergebnisse des gerade bewerteten Programms, der anderen nationalen und europäischen politischen Aktionen und der früher in der Regionalpolitik eingeschlagenen Richtung miteinander vermischt. Außerdem enthalten die 1997 von Eurostat durchgeführten Studien Angaben zu Indikatoren, von denen die neuesten aus dem Jahre 1993 stammen. Dadurch wird der Wert der Schlußfolgerungen erheblich relativiert. 11. Das Modell QUEST II dient der Analyse der Volkswirtschaften der Mitgliedstaaten und ihrer Wechselbeziehungen zur übrigen Welt, vor allem zu den Vereinigten Staaten und Japan.

Das Modell betrachtet insbesondere die Übertragung der Auswirkungen der Wirtschaftspolitik auf nationaler und internationaler Ebene. Ursprünglich sollte es Simulationszwecken und nicht so sehr Vorhersagezwecken dienen. Das Modell QUEST II integriert stärker als das vorangehende Modell die Angebotseffekte und berücksichtigt mehr die Wechselbeziehungen im Hinblick auf die Bestände. Die sich als Verhaltensänderungen der Wirtschaftsakteure niederschlagenden Auswirkungen werden jedoch bei QUEST II nur wenig oder unzulänglich berücksichtigt. >PLATZ FÜR EINE TABELLE> >PLATZ FÜR EINE TABELLE> >PLATZ FÜR EINE TABELLE> (1) HERMIN: ökonometrisches Modell, das auf dem Originalmodell HERMES ("Harmonised Econometric Research for Modelling Economic Systems") basiert, jedoch von geringerem Umfang ist (Min), daher (HER)MIN.

(2) HELM: "Hainaut Economic Lead-in Model". (3) "QUEST II: A multi-country business cycle and growth model - Economic Papers No 123" - Oktober 1997. GD II - Wirtschaft und Finanzen. (4) Optimales Wachstumsmodell ("Optimal Growth Model (OGM") von Pereira (1991 und 1995). (5) Bourguignon-, Branson- und de Melo-Modell (BBM) von Lolos und Zonzilas (1992). (6) "Dynamisches Input-Output-Modell" (DIO) von Beutel (1995, 1996 und 1997). (7) Beratungsgesellschaft FIDIMI, Bewertung der makroökonomischen Auswirkungen der Ziel-1-GFK für Italien und der Durchführungsmechanismen. (8) Der Hof nahm die Dienste eines externen Bewerters in Anspruch, der sich auf makroökonomische Modelle und auf die europäische Wirtschaft spezialisiert hat.

ANTWORTEN DER KOMMISSION I. ALLGEMEINE AUSFÜHRUNGEN Die Kommission räumt ein, daß die Bewertung in vielerlei Hinsicht einen innovativen Charakter hat und daher noch keine präzisen Ergebnisse liefern und nur bedingt genutzt werden kann. Sie weist jedoch darauf hin, daß innerhalb weniger Jahre bereits beträchtliche Fortschritte erzielt worden sind. Zur Bewältigung der noch verbleibenden Schwierigkeiten hat die Kommission ihre Bemühungen um eine bessere Organisation und Methodik der Bewertungen verstärkt und steht in permanentem Dialog mit allen, die in den Mitgliedstaaten der Union Bewertungsmethoden konzipieren und weiterentwickeln.

Drei wichtige Etappen, die den drei Programmplanungszeiträumen entsprechen, sind für die Entwicklung der Bewertung der Strukturfonds-Interventionen von Bedeutung: Der Zeitraum 1989-1993 Die Verordnungen der ersten Strukturfondsreform wurden erst im Dezember 1988 vom Rat angenommen. Die Anfang 1989 vorgelegten einzelstaatlichen Pläne entsprachen nur teilweise den Forderungen für das strategische Konzept, die Wahl der zu erreichenden Ziele und die Quantifizierung der erwarteten Auswirkungen. In der Folgezeit wurde im Rahmen der Ex-post-Bewertung versucht, diese Defizite durch Vergleich der erreichten Ergebnisse mit den ursprünglichen Zielen zu beheben.

Daß diese umfangreiche Arbeit ihre Grenzen hat, ist den Berichten über die Interventionen in den Ziel-1- und den Ziel-2-Gebieten zu entnehmen. Dennoch stellt sie den ersten Versuch einer kohärenten Analyse der Auswirkungen dieser Reform auf den wirtschaftlichen und sozialen Zusammenhalt dar. Der Zeitraum 1994-1999 Auf Wunsch einiger Mitgliedstaaten und der Kommission wurden auf der Grundlage dieser ersten Erfahrungen die Rechtsvorschriften für die Begleitung und Bewertung weiterentwickelt und drei Bewertungsphasen (Ex-ante-, Zwischen- und Ex-post-Phase) festgelegt. Der Nutzen der Zwischenbewertung ist unbestritten.

Über eine strikte Anwendung der Verordnungen hinaus wurden die Zwischenbewertungen zum ersten Mal von dem jeweiligen Begleitausschuß vorbereitet und durchgeführt, wobei Bewerter und mittelbewirtschaftende Stellen zusammenarbeiteten. Die erstellten Berichte wurden dem entsprechenden Ausschuß vorgelegt und von diesem diskutiert. Hierdurch wurden in stärkerem Maße als mit den Maßnahmen der Kommission pädagogische und operative Ziele erreicht. Über die anzuwendenden Verfahren, die Auswahl der Bewerter, die Kosten der Arbeiten und die Genauigkeit der Ergebnisse bestand mitunter Uneinigkeit, obwohl das Referat für die Koordinierung der Bewertung der Kommissionsdienststellen und deren einzelstaatliche Ansprechpartner in der Fachgruppe Bewertung die Maßnahmen allgemein festlegten und koordinierten.

Aber trotz einiger Meinungsverschiedenheiten über den Handlungsspielraum der einzelnen Mitgliedstaaten im Rahmen der Subsidiarität haben diese Maßnahmen nach Auffassung der Kommission wesentlich zur Verbreitung einer echten Bewertungskultur beigetragen. Den mittelbewirtschaftenden Stellen wurde somit gezeigt, daß sie über ein operatives Instrument zur besseren Verwaltung der aus einzelstaatlichen und gemeinschaftlichen Quellen finanzierten Interventionen verfügen. Für künftige Bewertungen kann dies nur von Vorteil sein, denn die Qualität der Schlußfolgerungen hängt sowohl von der Genauigkeit der Daten der mittelbewirtschaftenden Stellen als auch vom Fachwissen der unabhängigen Bewerter ab.

Der Zeitraum 2000-2006 Die neuen Verordnungsvorschläge zielen insbesondere darauf ab, die Schwachstellen der Bewertung weiter zu reduzieren. Hierbei geht es hauptsächlich darum, einen effizienteren Einsatz der Strukturfonds zu ermöglichen. So werden vor allem folgende Maßnahmen vorgeschlagen: - eine wirkliche Einbeziehung der Ex-ante-Bewertung in die von den Mitgliedstaaten vorzulegenden Pläne sowie eine genaue Quantifizierung der zu erreichenden Ziele; - die Berücksichtigung der Ergebnisse der im vorangegangenen Zeitraum durchgeführten thematischen oder programmspezifischen Bewertungen; - die Herstellung eines direkten Zusammenhangs zwischen der Änderung der Programmplanung nach der Halbzeitüberprüfung und den Schlußfolgerungen der Zwischenbewertungen.

In dem Bemühen um einen effizienteren Einsatz der Strukturfonds hat die Kommission vorgeschlagen, 10 % des Betrags dieser Fonds nach der Halbzeitüberprüfung entsprechend den erzielten Leistungen zu vergeben, wobei ein enger Zusammenhang zwischen den Leistungskriterien und der Qualität der Programmplanung, der Begleitung sowie der Ex-ante- und Zwischenbewertungen besteht. Im Bereich der Methodik wird die Kommission im Hinblick auf eine stärkere Harmonisierung der Bewertung in der Union bis zum Herbst eine Darstellung folgender im Rahmen von MEANS (1) durchgeführter Arbeiten veröffentlichen: - genaue Beschreibung eines Lastenhefts und der Methodik für eine Ex-ante-, Zwischen- oder Ex-post-Bewertung; - Erläuterung der verschiedenen in der Literatur beschriebenen Bewertungsmethoden und der Bedingungen für ihre Anwendung; - Analyse der Indikatorsysteme für die einzelnen Interventionsbereiche, Harmonisierung der Konzepte und Liste der Indikatoren; - Methodik der thematischen Bewertungen und ihrer Vorbereitung; - mehrsprachiges Glossar der wichtigsten Bewertungsbegriffe; - Beschreibung der jüngsten Erfahrungen der Mitgliedstaaten und der Gemeinschaft.

Wie den nachstehenden Bemerkungen zu entnehmen ist, teilt die Kommission in einigen Fällen die Auffassung des Rechnungshofs. Dennoch sind stets die Schwierigkeiten und Beschränkungen zu berücksichtigen, die - auch wenn sie schrittweise überwunden werden - mit jeder Bewertung einhergehen. Auf keinen Fall darf jedoch vergessen werden, daß die Bewertung zunächst ein technisches Instrument ist, das die Entscheidungsfindung oder Verwaltung erleichtern und nicht die politischen Entscheidungsträger ersetzen soll. Sie soll in bestimmten Teilbereichen die Konsequenzen zu treffender oder bereits getroffener Entscheidungen aufzeigen.

Bei den anzuwendenden Methoden ist stets ein gewisses Maß an Flexibilität erforderlich, um den jeweiligen Bewertungskontexten Rechnung tragen zu können. Schließlich weist die Kommission darauf hin, daß die Aufgaben der nationalen Verwaltungen und der Kommission im Bereich der Strukturfondsverwaltung und insbesondere im Bereich der Bewertung im Zuge der 1988 eingeleiteten Strukturfondsreform genauer festgelegt wurden. Die Mitgliedstaaten sind zunehmend aufgerufen, die Hauptverantwortung zu übernehmen und eine eigene Bewertung vorzunehmen. II. BEMERKUNGEN ZU EINZELFRAGEN 2. PRÜFUNGSUMFANG 2.3.

Der Rechnungshof hat bei seiner Prüfung Mitgliedstaaten mit recht unterschiedlichen Bewertungskonzepten wie Deutschland und das Vereinigte Königreich außer acht gelassen. 3. WICHTIGSTE BEMERKUNGEN 3.2. Nach Auffassung der Kommission fallen bei den Bewertungen, deren haushaltspolitische Aspekte ihr nicht bekannt sind, keine größeren Ausgaben an. Da die Zwischenbewertung ständig weiterentwickelt wird und dezentral erfolgt, ändert sich das entsprechende Ausgabenvolumen fortwährend. Die für die Bewertung aufgewendeten Beträge werden nach Ländern, Zielen und Interventionsformen aufgeschlüsselt.

Angaben hierzu sind auch in der Bewertungs-Jahresbilanz der Kommission veröffentlicht worden. Die Kommission wird ihre Bemühungen um eine einheitliche Festlegung der für die Bewertung aufzuwendenden und im Rahmen der Partnerschaft zu verwaltenden Anteile der Beträge für die technische Hilfe fortsetzen. 3.3. Nach den Verordnungen und dem Subsidiaritätsprinzip ist die Kommission nicht befugt, genau festzulegen, welche Bewertungsindikatoren und -methoden anzuwenden sind. In ihrem Bemühen um eine Weiterentwicklung der einzelstaatlichen Verfahren und eine qualitative Verbesserung der Bewertung hat die Kommission: - das Programm MEANS entwickelt und acht Hefte mit methodischen Grundsätzen herausgegeben; - drei europäische Konferenzen zum Thema Bewertungstechniken und -verfahren veranstaltet; - Dokumente wie den Bezugsrahmen für Ex-ante-Bewertungen und einen Leitfaden für die Bewertung von Großvorhaben verteilt; - Bewertungsfachgruppen mit Beteiligung der Mitgliedstaaten eingesetzt und mehrere Seminare veranstaltet.

3.5. Es ist schwierig, die Ex-post-Bewertung und die verschiedenen Programmplanungsphasen der strukturpolitischen Maßnahmen aufeinander abzustimmen. Eine echte Ex-post-Bewertung kann erst zwei oder drei Jahre nach Abschluß der Programmplanung vorgenommen werden. Daher hat die Kommission die Durchführung von Zwischenbewertungen und thematischen Bewertungen vorangetrieben. So lieferten beispielsweise die 1992 und 1993 durchgeführten thematischen Bewertungen Informationen für die Programmplanung 1994-1999. Für die Programmplanung nach dem Jahr 2000 werden die bereits vorgenommenen Zwischenbewertungen zur Verfügung stehen.

Bewertungsbilanzen, die genauer und aktueller als die Zwischenbewertungen sind, werden derzeit für die einzelnen Ziele aufgestellt. Außerdem ist schon mit vier thematischen Bewertungen begonnen worden. Im übrigen hat die Kommission dieses Konzept in ihre Vorschläge zur Änderung der Verordnungen aufgenommen. 3.6. Es ist zwischen der Objektivität der Bewertungen sowie der Aussagekraft und Genauigkeit der Daten zu unterscheiden. Häufig steht der Aspekt der Daten bei der Bewertung im Vordergrund. In kaum einem Bericht wird nicht auf die Unzulänglichkeit der Daten hingewiesen. Insbesondere aufgrund der Bewertungsanforderungen ist jedoch eine erhebliche Verbesserung der Datensituation festzustellen.

Die Kommission ist nicht zufrieden mit der Datensituation. Diese Kritik betrifft jedoch nicht die Bewertung, sondern die Begleitsysteme. Die Kommission betont, daß das Problem der Zuverlässigkeit der Kontrolldaten und Indikatoren in erster Linie im Rahmen der Begleitung zu prüfen ist. Sie setzt ihre Bemühungen um eine Verbesserung dieser Situation fort und wird der Forderung des Hofs nach einer systematischeren Bewertung der Datenzuverlässigkeit nachkommen. Die im Rahmen der Überprüfung und Kontrolle durchgeführten Maßnahmen werden ebenfalls zur Verbesserung der in diesem Bereich seit einigen Jahren festgestellten Situation beitragen.

3.7. Die zuständigen Dienststellen halten sich an die Auftragsvergabeverfahren der einschlägigen Richtlinien und an das vom Vergabebeirat festgelegte Verfahren. Der Auftrag kann jedoch erst nach Vertragsunterzeichnung ausgehandelt werden. Da hierzu mitunter noch einige Sachverhalte zu klären sind, kommt es zu terminlichen Verzögerungen, die jedoch von marginaler Bedeutung sind. Im übrigen sind die Kommissionsdienststellen nicht allein für dieses Problem verantwortlich zu machen. Die Schwächen einiger Bewertungsberichte sind mitunter auf die unzureichende Kompetenz der Berater oder die unzulängliche Qualität der vorliegenden Daten zurückzuführen.

Trotz gleicher Vertragsbedingungen können bestimmte Berichte in einem Land von großem Nutzen und in anderen unzureichend sein. 3.8. Die Kommission teilt die Auffassung des Hofs über die Schwierigkeiten bei den ersten Bewertungen, die mit recht wenig Enthusiasmus in den Mitgliedstaaten durchgeführt wurden. Die Ex-post-Bewertungen für die Ziele 1 und 2 wurden von international renommierten Beraterfirmen und hochqualifizierten Sachverständigen auf der Grundlage einer gemeinsamen Methodik vorgenommen. Im zweiten Teil von Ziff. 3.7 werden die Bewertungen trotz der angeführten Einschränkungen als nützlich erachtet.

Die kritischen Bemerkungen des Rechnungshofs betreffen 1993/94 durchgeführte Bewertungen; seitdem wurden auf Initiative der Kommission jedoch viele Maßnahmen zur Weiterentwicklung der Bewertungsmethoden ergriffen. Die Kritik des Hofs an der Ex-post-Bewertung für Ziel 2 ist ebenfalls zum Teil zutreffend. Was die Möglichkeit einer präzisen quantitativen Messung der Auswirkungen der Maßnahmen oder ihres gemeinschaftlichen Mehrwerts anbelangt, so bedarf es jedoch einer pragmatischeren Sicht. 3.9. Bei der Zwischenbewertung wurde der Durchführungsstand der Interventionen untersucht. Deren Auswirkungen werden dagegen eher im Rahmen der Bilanzen und der Ex-post-Bewertungen analysiert.

Diese Bewertungen finden jedoch nicht immer mit Hilfe - meist sehr kostspieliger - ökonometrischer Modelle statt und eignen sich mitunter nicht optimal zur Messung der Auswirkungen. Die Bewertung soll die Verwaltung vereinfachen und somit lediglich den Entscheidungsprozeß erleichtern. 3.10. Die Kommission hat festgestellt, daß die Aufteilung der Programmplanung für Ziel 2 auf zwei Zeiträume dem Bedarf der betroffenen Gebiete nicht hinreichend entspricht und die Durchführung der Programme erschwert. Die Strukturfondsreform-Vorschläge der Kommission vom März 1998 sehen daher - wie im Falle der übrigen Ziele - auch für Ziel 2 nur eine Programmplanungsphase vor.

3.11. - 3.12. Um zu vermeiden, daß eine kaum noch überschaubare Zahl von Programm- oder Unterprogrammbewertungen durchgeführt wird, ist ein selektiveres Konzept in einigen Schlüsselbereichen mitunter die geeignetere Lösung. Die Kommission teilt die Auffassung des Rechnungshofs, daß es zweckmäßig wäre, die Zahl der Maßnahmen und Unterprogramme und sogar die Zahl der Programme zu reduzieren. Sie hat im Rahmen der Strukturfondsreform bereits konkrete Vorschläge hierfür vorgelegt. 4. ALLGEMEINE PROBLEME Einleitung 4.1. Die Kommission hat wiederholt mit Bedauern festgestellt, daß einige Mitgliedstaaten ihre Ziele nicht hinlänglich quantifiziert haben.

Das Fehlen einer nach Zielen aufgeschlüsselten Verwaltung der einzelstaatlichen Ausgaben erschwert ebenfalls die Weiterentwicklung der auf Indikatoren basierenden Verwaltungssysteme. Problematisch sind also weniger die methodischen oder analytischen Mängel als vielmehr die Konzeption der Programme und der aktuelle Stand der einzelstaatlichen Statistiken. 4.3. Die Kommission weist darauf hin, daß sie: - bereits 1994 den Mitgliedstaaten "Gemeinsame Leitlinien für die Begleitung und die Zwischenbewertung" übermittelte; - im Dezember 1994 der Fachgruppe Bewertung, die für die Bewertung in den Mitgliedstaaten verantwortlich ist, ein Rahmenpapier über Zweck, Inhalt und Durchführung der Zwischenbewertung vorlegte; nach diesem ersten Koordinierungstreffen fanden vier weitere Sitzungen der Gruppe statt; - 1995 den Verwaltungen das MEANS-Heft "Organisation der Zwischenbewertung im Rahmen der Partnerschaft" zur Verfügung stellte, in dem drei von fünf Kapitel die Erarbeitung des Lastenhefts und der Ausschreibungen, die Auswahl der Bewerter und die Erfassung der Bewertungsqualität behandeln; - 1996 (vor Eingang der ersten Bewertungen) den Verwaltungen ein MEANS-Heft über die Beurteilung der Qualität der Bewertungsberichte mit genauen Anleitungen übermittelte.

4.5. Auch im Zeitraum 1989-1993 wurden einige Bewertungen im Rahmen der Partnerschaft durchgeführt. So waren die Mitgliedstaaten und die Begleitausschüsse aktiv an mehreren von der Kommission initiierten thematischen oder Ex-post-Bewertungen beteiligt. 4.10. Der Hof stellt fest, daß für die Bewertung der Ziele 1 und 2 im ersten Programmplanungszeitraum nur relativ geringe Beträge bereitgestellt wurden. Da die meisten Mitgliedstaaten alleine keine Bewertung vorgenommen hatten, wurde zu Beginn des Zeitraums auf Initiative der Kommission eine erste Bewertung von sämtlichen Ziel-1-GFK und von 15 Ziel-2-PPD durchgeführt.

Neben den thematischen Bewertungen, die auch den Zeitraum 1989-1993 betreffen, nahm die Kommission auch eine Ex-post-Bewertung aller unter die Ziele 1 und 2 fallenden GFK und PPD des Zeitraums 1989-1993 vor. 4.11. Auf die Kostenfrage wurde unter Ziff. 3.2 eingegangen. Einige wenige ausschließlich auf Initiative eines Mitgliedstaats eingeleitete und im Rahmen der technischen Hilfe finanzierte Bewertungen konnten vielleicht nicht in der von der Kommission erstellten Finanzbilanz der Bewertungen berücksichtigt werden. Hierbei geht es jedoch nur um vergleichsweise geringe Beträge. Bezugsrahmen 4.12. - 4.13.

Die MEANS-Dokumente wurden mit pädagogischer Zielsetzung für Verwaltungen verfaßt, die ihr Fachwissen in der Regel ständig auf den neusten Stand bringen. Die Kommission hielt es für wichtiger, das durchschnittliche Niveau der Bewertungen und nicht das Fachwissen bereits spezialisierter Sachverständiger zu verbessern. Statistische Datenbanken und Angaben zu den verfolgten Zielen 4.14. - 4.15. Die Kommission unterstützt die Feststellungen des Hofs. Indikatoren 4.16. - 4.21. Der Hof erkennt die Bemühungen der Kommission um die Verbesserung der Indikatoren an. So wurden 1993 die entsprechenden Rechtsvorschriften weiterentwickelt und die einzelnen Mitgliedstaaten um die Quantifizierung der Disparitäten ersucht.

Bei der Ex-ante-Bewertung gehörte die Quantifizierung der Ziele zu den Prioritäten. Es wurden bereits Fortschritte erzielt, denn bei den Interventionen im Zeitraum 1994-1999 wurden die Ziele wesentlich genauer quantifiziert als bei vorangegangenen Maßnahmen. Im Rahmen der Zwischenbewertungen sollten vor allem die Indikatoren und ihre Effizienz verbessert werden. Wie die Kommission betont, geht es nicht nur darum, die Zahl der Indikatoren zu erhöhen oder zu verringern, sondern sicherzustellen, daß die vereinbarten und in den Programmen bereits vorgesehenen Indikatoren mit Hilfe der Begleitsysteme regelmäßig quantifiziert werden.

Auch kann nicht von mangelnder Kohärenz bei der Programmplanung die Rede sein, denn die regionalen und lokalen Behörden dürfen im Rahmen der Subsidiarität ihre eigenen Prioritäten festlegen und den Umfang der Programmplanung in ihrem Land selbst bestimmen. Es lassen sich jedoch bereits Fortschritte erkennen, die auf die Bewertungsanforderungen zurückzuführen sind. Da die Kommission der Ansicht ist, daß es nicht ausreicht, nur Methoden festzulegen, wird sie im Rahmen der Strukturfondsreform weitergehende Initiativen ergreifen. Berücksichtigung der Bewertung 4.23. Die beiden Programmplanungsphasen haben die Koordination zwischen der Bewertung und der Programmplanung in der Tat nicht erleichtert, so daß die Kommission unter anderem die Beschränkung auf eine einzige Programmplanungsphase vorgeschlagen hat.

Dennoch konnten durch die Ex-post-Bewertung für den Zeitraum 1989-1993 und die von der Kommission initiierte Ex-ante-Bewertung der PPD im Hinblick auf in ihre Zuständigkeit fallende Fragen und die Prioritäten der Union wertvolle Erkenntnisse für die Programmplanung 1997-1999 gewonnen werden. In der Frage der Ex-post-Bewertung für den Zeitraum 1994-1996 ist die Kommission der Auffassung, daß bei den Bewertungen im Rahmen der Änderung der Programmplanung und den thematischen Bewertungen für die KMU und die Forschung und Entwicklung der angeführte Aspekt berücksichtigt wurde. Sie diskutiert derzeit mit den Mitgliedstaaten darüber, ob in der zweiten Hälfte des Jahres 1998 eine Bewertungsbilanz für den Zeitraum ab 1994 aufgestellt werden könnte.

Diese Bilanz würde bei der künftigen Programmplanung zugrunde gelegt. 4.24. - 4.27. Die Kommission erstellt derzeit einen nach Ländern gegliederten Bericht über die Qualität der Bewertung und deren Nutzen für die Anpassung der Interventionen. Ein zusammenfassender Bericht wird Aufschluß über die wesentlichen Aspekte der Halbzeitüberprüfung geben. Nach ihren Informationen kann die Kommission die Feststellungen des Hofs über die sehr unterschiedlichen Situationen und die Vielzahl der Programme nicht bestätigen. Sie wird bei der Vorlage ihres Berichts über die Halbzeitüberprüfung Bilanz ziehen.

Die Aussagen des Hofs dürften derzeit verfrüht sein. Sie weist auch darauf hin, daß die Bewertungen nicht nur für die mittelbewirtschaftenden Stellen von Nutzen sind, sondern auch zur besseren Information der Haushaltsbehörde, insbesondere des Europäischen Parlaments, und des Bürgers dienen. Objektivität der Bewertungen 4.28. - 4.30. In diesen Absätzen scheint der Hof der Komplexität der Partnerschaft trotz seiner positiven Äußerungen unter Ziff. 6.5-6.7 nicht hinlänglich Rechnung zu tragen. Die Objektivität und Unabhängigkeit der Bewertungen hängen von mehr Faktoren ab als den Aspekten im Zusammenhang mit dem Vorhandensein eines genauen Bezugsrahmens für die Anwendung der Methoden und die Kontrolle der Angaben vor Ort.

Von größerer Bedeutung für die Qualität der Bewertung sind beispielsweise der Grad der Professionalität, die Berufsethik und der Einfluß der Interessen der Mitgliedstaaten. Der Hof erwähnt nicht, daß das Heft MEANS Nr. 5 über die Beurteilung der Qualität der Bewertungsberichte ausdrücklich als (drei der acht) Kriterien die Zweckmäßigkeit der Methodik, die Zuverlässigkeit der Angaben und die Glaubwürdigkeit der Ergebnisse vorsieht. Die Kommission ist fortwährend bestrebt, unter Berücksichtigung der Gegebenheiten vor Ort die Normen und das Anforderungsniveau zu verbessern. Sie wird daher auch verstärkt das Funktionieren der Bewertungssysteme an Ort und Stelle kontrollieren.

Von der Kommission vergebene Bewertungsaufträge 4.31. - 4.32. Die Kommission wendet die vom Vergabebeirat festgelegten Normen und Verfahren für die Auftragsvergabe an. So werden die Sachverständigen anhand der im Amtsblatt der Europäischen Gemeinschaften veröffentlichten Auswahl- und Zuschlagskriterien ausgewählt. Die Anwendung dieser Kriterien und die Ergebnisse dieses Verfahrens werden in einem dem Vergabebeirat vorgelegten Bericht erläutert. In der Frage der Genauigkeit der Verträge ist zu berücksichtigen, daß die Kommission Sachverständige heranzieht und großes Interesse daran hat, daß die Verträge so abgefaßt sind, daß die beauftragten Sachverständigen bestmöglich von ihren Fachkenntnissen Gebrauch machen können.

4.33. Die für das Ziel 1 angewandte Methode eignet sich nicht für das 60 Programme umfassende Ziel 2. Sie hätte angesichts der Höhe des Betrags und der Zahl der beteiligten Teams eine Aufteilung der Ausschreibung zur Folge, die gegen Geist und Buchstaben der Richtlinie über die Verfahren zur Vergabe öffentlicher Bauaufträge verstoßen würde. Die Kommission hielt sich in diesen Fällen an die Regeln und war bestrebt, nicht den Überblick über die Modalitäten für die Durchführung der Bewertung zu verlieren. Daher wurden "Lenkungsausschüsse" zur Begleitung der Bewertung eingesetzt und regelmäßige Zusammenkünfte mit den Bewertungsteams organisiert.

Die erarbeiteten Berichte wurden anschließend zusammen mit den mittelbewirtschaftenden Dienststellen überprüft. 4.34. Der Inhalt des Lastenhefts hängt vom Informationsbedarf und von den sonstigen Anforderungen des Auftraggebers ab. Alle Anforderungen sind vom Auftraggeber festzulegen und werden von den Bewertungsausschüssen inhaltlich geprüft. Die Vertragsbedingungen wurden (mit Ausnahme der eigentlichen Auftragsbeschreibung) auf Initiative des Vergabebeirats standardisiert. Wie bereits erwähnt, gibt es keine allgemein akzeptierte Methodik für die Bewertung von Programmen. Um nicht die Kontrolle über den gewählten Ansatz zu verlieren, diskutiert die Kommission in diesem Zusammenhang die Methodik und deren Zweckmäßigkeit unter Berücksichtigung auftauchender Fragen und der Anwendbarkeit der vorgeschlagenen Verfahren.

Die allgemeinen methodischen Ansätze sind Bestandteil des Lastenhefts; über die Einzelheiten und die technischen Instrumente kann jedoch diskutiert werden. 4.35. In diesem konkreten Fall wollte die Kommission im Einvernehmen mit den Bewertungsberatern den Bericht verbessern und berief zu diesem Zweck eine Zusammenkunft ein, um mit allen beteiligten Stellen und Beamten über den Inhalt des Berichts und die Schlußfolgerungen zu diskutieren. Der Abschlußbericht wurde im Mai 1995 (drei Monate nach der vorgesehenen Frist) vorgelegt und nach einer offiziellen Beratung im Juni 1995 genehmigt. Die Zahlung erfolgte im Juli 1995.

Bei dem Bericht, auf den sich die Kritik des Rechnungshofs bezieht, handelt es sich lediglich um abschließende Erläuterungen des Beraters, für die keine zusätzlichen Zahlungen geleistet wurden. 4.36. Die Kommission betont, daß bei den Vertragsbedingungen drei genau definierte wichtige Aspekte im Vordergrund stehen: die Zweckmäßigkeit der Strategie, die Bilanz sowie die Effizienz der durchgeführten Maßnahmen und der Durchführungsmechanismen (Seiten 2-4 des Dokuments). Sie hat unter Ziffer 4.12 ihren Standpunkt zur Frage der Methodik erläutert. Die verschiedenen Dienststellen werden in dieser Angelegenheit befragt.

Die Entscheidung über die Genehmigung des Berichts liegt dann bei der federführenden Dienststelle. 5. EX-POST-BEWERTUNGEN DER UNTER DIE ZIELE 1 UND 2 FALLENDEN GFK (1989-1993) Einleitung 5.1. Die Kommission unterstützt die Bemerkungen des Hofs über die Schwierigkeiten bei diesen Bewertungen, die mit der Konzeption der Programme der ersten Generation zusammenhängen. Ex-post-Bewertung der Ziel-1-GFK (1989-1993) 5.4. Einige diesbezügliche Bemerkungen des Hofs bedürfen einer genaueren Betrachtung. a) Sofern die Angaben zu den regionalen Unterschieden "veraltet" sind, betrifft diese Kritik die statistischen Ämter und nicht die Bewertungsmethodik. b) Die Bewerter haben allgemein übliche Stichprobenverfahren angewandt und zur Gewinnung genauerer Erkenntnisse Fallstudien durchgeführt.

Diese weitverbreiteten Verfahren führen zu zuverlässigen Ergebnissen. e) Nach Auffassung des Hofs lassen "Bottom-up-Analysen" nicht immer Schlußfolgerungen zu den Auswirkungen auf Programmebene zu. Die Auswirkungen auf die Gemeinschaftspolitik, die Verbesserung der Verwaltung, die Transparenz usw. können jedoch weder durch "Top-down-Analysen" noch mit Hilfe ökonometrischer Modelle ermittelt werden. g) Der Hof kritisiert Aspekte, die nicht Bestandteil des Bewertungsauftrags waren. 5.7. Die Kommission bekräftigt, daß sie den betreffenden Bewertungen im Rahmen ihrer Verpflichtung zur Berichterstattung gegenüber der Haushaltsbehörde sowie bei den Arbeiten zur Erstellung des Berichts über den wirtschaftlichen und sozialen Zusammenhalt in vollem Umfang Rechnung getragen hat.

5.8. Eins der drei Ziele des Bewertungsauftrags bestand in der Tat in der Erarbeitung von Vorschlägen zur Verbesserung des Begleit- und Verwaltungssystems. Im übrigen wurde die Zweckmäßigkeit der Strategie untersucht und eine Durchführungsbilanz aufgestellt, anhand deren die Effizienz der Interventionen analysiert werden konnte. Ex-post-Bewertungen zu Ziel 2 (1989-1993) 5.13. Die systematische Anwendung ökonometrischer Modelle ist nicht in allen Fällen gerechtfertigt; nicht angebracht ist sie, wenn nur geringe Mittel bereitgestellt werden oder keine regionalen statistischen Reihen vorliegen.

Die meisten politikbezogenen Bewertungen enthält der Bericht über den wirtschaftlichen und sozialen Zusammenhalt. Die Kommission hat im Rahmen ihres neuen Vorschlags für eine Strukturfondsreform ab dem Jahr 2000 entsprechende Anpassungen empfohlen. 5.16. Die Kommission hat in ihren neuen Verordnungsvorschlägen bereits eine Reihe der Empfehlungen dieser Bewertung berücksichtigt. 6. ZWISCHENBEWERTUNGEN (1994-1999) Entwicklung und Einbindung der Zwischenbewertungsgrundsätze 6.1. - 6.20. Die Kommission teilt die in diesem Teil des Berichts dargelegten Auffassungen des Hofs, den sie jedoch auf folgendes hinweist: - Zu Ziffer 6.15:

Nach Ansicht der Kommission sind die kritische Beurteilung der Entwicklungsstrategie, der Auswirkungen im Vergleich zu den Zielen und der Effizienz der Projekte eher Gegenstand der Ex-ante- oder der Ex-post-Bewertung. - Zu Ziffer 6.16: Anhand der Zwischenbewertungen sollen die Interventionen angepaßt und die Verwaltung verbessert werden. Der gemeinschaftliche Mehrwert ist dagegen im Rahmen der Bewertungsbilanz und der Ex-post-Bewertungen zu untersuchen. Dennoch liefert die Analyse der Auswirkungen der Gemeinschaftsprioritäten im Hinblick auf die Anpassung der Interventionen mitunter nützliche Informationen über den gemeinschaftlichen Mehrwert. - Zu Ziffer 6.18:

Die Kommission hat versucht, anhand der Zwischenbewertung die Synergieeffekte zwischen den aus den verschiedenen Fonds finanzierten Maßnahmen weitestgehend zu ermitteln, insbesondere in Ländern mit separaten Programmplanungen wie im Falle der deutschen Ziel-1-PPD. Zu diesem Zweck haben die für die EFRE-Maßnahmen beauftragten Bewerter die im Rahmen der einzelnen Fonds durchgeführten Bewertungen zusammengefaßt. Die Kommission räumt ein, daß die Bewertung der vom Hof angeführten Region beträchtliche Schwächen aufweist. Sie ist jedoch nicht repräsentativ für die in diesem Land vorgenommenen Bewertungen.

Zutreffend ist beispielsweise, daß bei der Zwischenbewertung die sich aus einem Antrag auf Änderung des OP Brandenburg ergebenden Anpassungen des indikativen Finanzierungsplans nicht untersucht wurden. In der Frage der hohen Mittelausschöpfung ist festzustellen, daß die betreffenden Maßnahmen in den Begleitausschußsitzungen vom 12. Juni 1996 und 5. August 1996 schrittweise angepaßt wurden. Ansätze, Methoden und Techniken 6.21. Laut der Kritik des Rechnungshofs werden die Ziele der Zwischenbewertungen in den Verträgen zu allgemein formuliert. Die Kommission hat zwar entsprechende Leitlinien verfaßt, die aber auf dezentraler Ebene in einigen Fällen nicht befolgt worden sind.

Nutzen und Wirkung der Maßnahmen werden durch "Bottom-up-Analysen" ermittelt. Bei den großen GFK, bei denen die Konsequenzen der Programmplanungsänderung für die globalen Auswirkungen erfaßt werden sollten, wurden in Irland, Spanien, Griechenland, Portugal und Italien auf ökonometrischen Modellen basierende Verfahren angewandt. 6.22. Die Kommission hat die qualifiziertesten Sachverständigen in Europa und den Vereinigten Staaten mobilisiert, damit die bestmöglichen Ansätze bei der Bewertung der Programme zum Tragen kommen. Objektive methodische Probleme und häufig unzulängliche Begleitsysteme beeinträchtigen die Vergleichbarkeit der Ergebnisse auf europäischer Ebene.

6.23. Im allgemeinen zielen die Zwischenbewertungen nicht auf die Messung der Programmauswirkungen ab, da diese in der ersten Phase der Interventionen noch keine konkreten Formen annehmen. Die logische Reihenfolge lautet: Durchführung der Maßnahmen - Ergebnisse - Auswirkungen. Auf den Aspekt der Beurteilung der globalen Auswirkungen der großen GFK wurde unter Ziffer 6.21 eingegangen. 7. AUSWIRKUNGEN DER STRUKTURFONDS UND BEWERTUNGSMODELLE Auswirkungen auf der Ebene der GFK und Programme 7.1. - 7.15. In diesem Teil des Berichts behandelt der Hof die Ergebnisse der verschiedenen ökonometrischen und makroökonomischen Modelle, ohne deren Wirkung oder Merkmale zu erklären.

Dies könnte zu einer einiger Verwirrung führen. Diese Angaben mit entsprechenden Erläuterungen sind bereits in übersichtlicher Form im Bericht über den wirtschaftlichen und sozialen Zusammenhalt zu finden. Auswirkungen auf der Ebene der Unterprogramme, Maßnahmen und Vorhaben 7.16. - 7.19. Der Rechnungshof kritisiert offenbar das Fehlen von Bewertungen auf der Ebene der Unterprogramme oder Maßnahmen. Zwangsläufig stützt sich jedoch die im allgemeinen nach dem "Bottom-up-Konzept" durchgeführte Programmbewertung auf die Bewertung der Maßnahmen und Unterprogramme. Außerdem zielen die von der Kommission eingeleiteten horizontalen Bewertungen insbesondere auf bestimmte Kategorien von Maßnahmen bzw.

Unterprogrammen wie Maßnahmen für KMU, die Forschung und Entwicklung, die Umwelt usw. 8. SCHLUSSFOLGERUNG 8.1. - 8.19. Nach Auffassung der Kommission stellen die Schlußfolgerungen des Rechnungshofs eine konstruktive Kritik an Punkten dar, an deren Verbesserung sie seit Jahren arbeitet und denen auch künftig ihre Aufmerksamkeit gelten wird. Die Kommission räumt ein, daß der Hof Schwachstellen aufzeigen konnte. Gleichzeitig hat er jedoch auch auf die bereits erzielten Fortschritte hingewiesen. Die von der Kommission im Rahmen der Strukturfonds durchgeführten und durch das Programm SEM 2000 verstärkten Maßnahmen haben zu einer noch nie dagewesenen Bewertungskultur geführt.

Nur wenige Regionen haben keine Bewertungen vorgenommen und sich nicht an diesem Prozeß beteiligt. Sowohl das Subsidiaritätsprinzip als auch die Probleme sowie die Heterogenität der geographischen und thematischen Kontexte gehören zu den ebenfalls zu berücksichtigenden Faktoren. (1) Mehrjahresprogramm für Analysen und Vorschläge für Bewertungsmethoden.