Stuttgart 21/Stresstest/Kritik an SMA: Unterschied zwischen den Versionen
(ergänzt) |
(ergänzt) |
||
Zeile 3: | Zeile 3: | ||
Die '''Kritik an der Arbeit der SMA''' ist nahezu so umfangreich wie die Kritik am Stresstest selbst. Dies ist eine logische Konsequenz, da der Auditor ein deutlich fehlerhaftes Verfahren positiv testierte. Die Systematik der handwerklichen Fehler der SMA, ihre eindeutige Tendenz beim Schönreden gravierender Mängel des Stresstests, legen den Verdacht nahe, dass die Auditierung des Stresstests durch die SMA ein '''Gefälligkeitsgutachten''' zugunsten des Auftraggebers und Großkunden Deutsche Bahn AG ist. | Die '''Kritik an der Arbeit der SMA''' ist nahezu so umfangreich wie die Kritik am Stresstest selbst. Dies ist eine logische Konsequenz, da der Auditor ein deutlich fehlerhaftes Verfahren positiv testierte. Die Systematik der handwerklichen Fehler der SMA, ihre eindeutige Tendenz beim Schönreden gravierender Mängel des Stresstests, legen den Verdacht nahe, dass die Auditierung des Stresstests durch die SMA ein '''Gefälligkeitsgutachten''' zugunsten des Auftraggebers und Großkunden Deutsche Bahn AG ist. | ||
− | Ein '''fehlerhafter Prozess''' wird nicht dadurch richtig, dass eine '''fehlerhafte Auditierung''' dieses Prozesses durchgeführt wird. Auch wenn die Kritiker den Auditor SMA selbst vorgeschlagen hatten, darf das nicht den Blick verschließen vor den gravierenden Mängeln seiner Arbeit. Diese können nicht allein damit begründet werden, dass dies der Erstfall der Auditierung einer solchen Simulation ist | + | Ein '''fehlerhafter Prozess''' wird nicht dadurch richtig, dass eine '''fehlerhafte Auditierung''' dieses Prozesses durchgeführt wird. Auch wenn die Kritiker den Auditor SMA selbst vorgeschlagen hatten, darf das nicht den Blick verschließen vor den gravierenden Mängeln seiner Arbeit. Diese können nicht allein damit begründet werden, dass dies der Erstfall der Auditierung einer solchen Simulation ist, sondern scheinen weitgehend dem Interesse des Auftraggebers zu folgen. |
+ | <span style="margin-left:2em; float:right; border:1px solid #BBBBCC; padding: 0.8em; background-color:#F0F0FF"> | ||
+ | <big><big><u>Kritik an der Arbeit der SMA</u></big></big><br /> | ||
+ | <!-- ### Zum Editieren der Inhalte der Übersichtstabelle bitte die Seite "Vorlage:Gescheitert" editieren! ### --> | ||
+ | {{Gescheitert|2}}<br /> | ||
+ | </span> | ||
__TOC__ | __TOC__ | ||
Zeile 11: | Zeile 16: | ||
{{Seitenstatus|Baustelle}} | {{Seitenstatus|Baustelle}} | ||
− | Es scheint allein dem politischen Druck vom Koalitionspartner SPD geschuldet, wenn der baden-württembergische Ministerpräsident Winfried Kretschmann vor einer eingehenden Prüfung das Audit der SMA als | + | Es scheint allein dem politischen Druck vom Koalitionspartner SPD geschuldet, wenn der baden-württembergische Ministerpräsident Winfried Kretschmann vor einer eingehenden Prüfung das Audit der SMA als seriös akzeptierte und auch die Leistungsfähgikeit für erwiesen deklarierte: |
+ | :''"Grün-Rot akzeptiert die Bewertung des Stresstestes für das Bahnprojekt Stuttgart 21. {{hl|»Das Gutachten ist seriös«}}, sagt Kretschmann sogar. Wenn die vom Gutachter geforderten Nachbesserungen erfolgen, {{hl|sei die Leistungsfähigkeit des Tiefbahnhofs erwiesen}}. Dann müssten nur noch die vom Schlichter verlangten Forderungen umgesetzt werden und die Bahn die Kosten transparent und »vollumfänglich« darlegen. Das sind die vier Stellen der Übereinstimmung."'' (Stuttgarter Zeitung, 23.07.2011)<ref>23.07.2011, [http://www.stuttgarter-zeitung.de/inhalt.kommentar-zu-stuttgart-21-der-bau-wird-wahrscheinlicher.8df82c1c-242a-411c-a4ac-63b2f55e1b3f.html stuttgarter-zeitung.de], "Der Bau wird wahrscheinlicher"</ref> | ||
− | Die SMA schreibt richtig: "Es existieren keine Richtlinien für die Prüfung einer eisenbahnbetriebswissenschaftlichen Simulation. Ein Prüfverfahren musste also zuerst aufgestellt werden." (Audit Schlussber. S. 4 / Bl. 10) Die SMA hat dabei ein durchaus nachvollziehbares Schema der Prüfung aufgestellt. An der Durchführung wird jedoch im folgenden Kritik geübt. | + | Die SMA schreibt richtig: ''"Es existieren keine Richtlinien für die Prüfung einer eisenbahnbetriebswissenschaftlichen Simulation. Ein {{hl|Prüfverfahren musste also zuerst aufgestellt werden}}."'' (Audit Schlussber. S. 4 / Bl. 10) Die SMA hat dabei ein durchaus nachvollziehbares Schema der Prüfung aufgestellt. An der Durchführung wird jedoch im folgenden Kritik geübt. |
Die SMA war sich bei Übernahme des Mandats für die Prüfung des Stresstests sehr wohl bewusst, wie heikel diese Aufgabe ist. Das wird an folgender Aussage aus dem Angebot (!) der SMA deutlich: | Die SMA war sich bei Übernahme des Mandats für die Prüfung des Stresstests sehr wohl bewusst, wie heikel diese Aufgabe ist. Das wird an folgender Aussage aus dem Angebot (!) der SMA deutlich: | ||
− | :''"Zur Sicherung der Glaubwürdigkeit des Stresstests fühlt sich die SMA und Partner AG verpflichtet, ihre Objektivität und Neutralität auch gegenüber der Öffentlichkeit gewährleistet zu sehen."'' (Angebot SMA Vorwort S. 1 / Bl. 5)<ref>Siehe auch: Angebot SMA Vorwort S. 5 / Bl. 9: ''"Neutralität und Objektivität sind das übergeordnete Ziel der Prüfungsauftraggeber, um ihre Glaubwürdigkeit bei allen Interessenvertretern gewähren zu können."'' Auch dieser Satz macht das Anliegen der SMA nicht viel klarer. Auf jeden Fall wird deutlich, dass die SMA um ihre Neutralität und Objektivität besorgt ist.</ref> | + | :''"Zur Sicherung der Glaubwürdigkeit des Stresstests fühlt sich die SMA und Partner AG verpflichtet, ihre {{hl|Objektivität und Neutralität}} auch gegenüber der Öffentlichkeit {{hl|gewährleistet zu sehen}}."'' (Angebot SMA Vorwort S. 1 / Bl. 5)<ref>Siehe auch: Angebot SMA Vorwort S. 5 / Bl. 9: ''"Neutralität und Objektivität sind das übergeordnete Ziel der Prüfungsauftraggeber, um ihre Glaubwürdigkeit bei allen Interessenvertretern gewähren zu können."'' Auch dieser Satz macht das Anliegen der SMA nicht viel klarer. Auf jeden Fall wird deutlich, dass die SMA um ihre Neutralität und Objektivität besorgt ist.</ref> |
Über die Logik dieser Aussage kann gerätselt werden, etwa wer hier den Ruf der SMA beschützen könnte außer sie selbst. Aber diese unmotivierte Erklärung macht immerhin deutlich, dass die SMA ihre Objektivität und Neutralität bedroht sah. Bemerkenswerterweise findet sich im Audit-Bericht keinerlei erneute Erklärung der Objektivität und Neutralität des Gutachters. | Über die Logik dieser Aussage kann gerätselt werden, etwa wer hier den Ruf der SMA beschützen könnte außer sie selbst. Aber diese unmotivierte Erklärung macht immerhin deutlich, dass die SMA ihre Objektivität und Neutralität bedroht sah. Bemerkenswerterweise findet sich im Audit-Bericht keinerlei erneute Erklärung der Objektivität und Neutralität des Gutachters. | ||
Zeile 26: | Zeile 32: | ||
===Audit statt Gutachten=== | ===Audit statt Gutachten=== | ||
− | + | ''→ siehe auch [[Stuttgart 21/Stresstest/Glaubwürdigkeit#Audit statt Gutachten|Glaubwürdigkeit#Audit statt Gutachten]]'' | |
− | + | ||
− | ''→ siehe auch | + | |
Schon die Tatsache, dass die SMA von der Bahn nicht mit einem "Gutachten", sondern [[Stuttgart 21/Stresstest/Nachweis durch Audit?|nur einem "Audit"]] beauftragt wurde, stellt eine gravierende Beschränkung der Aufgabenstellung dar. Nur mit dem umfassenden Prüfauftrag eines Gutachtens wäre eine Aussage über die tatsächliche zukünftige Leistungsfähigkeit von S21 möglich. Das Audit erlaubt allenfalls die Bewertung, ob der Stresstest regelkonform durchgeführt wurde, nicht aber, ob seine Annahmen realitätsnah sind und die simulierte Leistungsfähigkeit tatsächlich in der Praxis erreicht werden kann. | Schon die Tatsache, dass die SMA von der Bahn nicht mit einem "Gutachten", sondern [[Stuttgart 21/Stresstest/Nachweis durch Audit?|nur einem "Audit"]] beauftragt wurde, stellt eine gravierende Beschränkung der Aufgabenstellung dar. Nur mit dem umfassenden Prüfauftrag eines Gutachtens wäre eine Aussage über die tatsächliche zukünftige Leistungsfähigkeit von S21 möglich. Das Audit erlaubt allenfalls die Bewertung, ob der Stresstest regelkonform durchgeführt wurde, nicht aber, ob seine Annahmen realitätsnah sind und die simulierte Leistungsfähigkeit tatsächlich in der Praxis erreicht werden kann. | ||
Zeile 124: | Zeile 128: | ||
===Senstivitäten liefern keinerlei Nachweis=== | ===Senstivitäten liefern keinerlei Nachweis=== | ||
− | {{NoGo}} {{Ex}} Es ist der Gipfel der Inkonsequenz, wenn die SMA zur Beurteilung der Wirkung fehlerhafter Parameter sogenannte "Sensitivitäten", d.h. die Simulation eines einzelnen Tages mit diesem korrigierten Parameter empfiehlt. Eine solche "Sensitivität" liefert, wie auch der Name sagt, nur die Reaktion des Systems (an einem Beispieltag) auf diese gezielte Parameteränderung. Sie wäre allenfalls gerechtfertigt, wenn sich zum Abschluss der Prüfung im Audit noch ein letzter Fehler in der Simulation entdeckt worden wäre | + | {{NoGo}} {{Ex}} Es ist der Gipfel der Inkonsequenz, wenn die SMA zur Beurteilung der Wirkung fehlerhafter Parameter sogenannte "Sensitivitäten", d.h. die Simulation eines einzelnen Tages mit diesem korrigierten Parameter empfiehlt. Eine solche "Sensitivität" liefert, wie auch der Name sagt, nur die Reaktion des Systems (an einem Beispieltag) auf diese gezielte Parameteränderung. Sie wäre allenfalls gerechtfertigt, wenn sich zum Abschluss der Prüfung im Audit noch ein letzter Fehler in der Simulation entdeckt worden wäre. Ergäbe hier die Sensitivität eine geringe Auswirkung auf das Ergebnis, könnte evtl. noch ein Testat mit einer entsprechenden Bemerkung erteilt werden. |
Liste der durchgeführten Sensitivitätsbetrachtungen: | Liste der durchgeführten Sensitivitätsbetrachtungen: | ||
Zeile 139: | Zeile 143: | ||
# Sensitivitätsbetrachtung '''eingeengter Auswertezeitraum 7-8 Uhr''' (Empfehlung in Audit SI-02 S. 4 / Bl. 144). | # Sensitivitätsbetrachtung '''eingeengter Auswertezeitraum 7-8 Uhr''' (Empfehlung in Audit SI-02 S. 4 / Bl. 144). | ||
#* SMA: ''"Die Werte des Verspätungsverlaufs ändern sich in ihrer Höhe deutlich. Allerdings zeigt das Modell auch hier {{hl|noch keine Tendenz zum »Kippen«}}, bei welchem das Modell eine mangelhafte resp. risikobehaftete Betriebsqualität zeigt. | #* SMA: ''"Die Werte des Verspätungsverlaufs ändern sich in ihrer Höhe deutlich. Allerdings zeigt das Modell auch hier {{hl|noch keine Tendenz zum »Kippen«}}, bei welchem das Modell eine mangelhafte resp. risikobehaftete Betriebsqualität zeigt. | ||
− | # Sensitivitätsbetrachtung '''Verlängerte S-Bahn-Haltezeit 48 Sekunden | + | # Sensitivitätsbetrachtung '''Verlängerte S-Bahn-Haltezeit 48 Sekunden''' (Audit SI-07 S. 7 / Bl. 181, SI-05 S. 6 / Bl. 161, SI-08 S. 9 / Bl. 194). |
#* SMA: ''"Die Ergebnisse zeigen, dass sich das S-Bahn-System mit diesen Annahmen im Bereich der Stammstrecke {{hl|in einem kritischen Bereich}} befindet. Eine weitere Anspannung der Situation durch Haltezeitverlängerungen oder Reduzierung der Zuschläge {{hl|könnte zu einem »Kippen« des Systems führen}}. Wo diese Grenze liegt, ist jedoch nicht bekannt und auch nicht Gegenstand der vorliegenden Simulation."'' (Audit SI-07 S. 8 / Bl. 182) | #* SMA: ''"Die Ergebnisse zeigen, dass sich das S-Bahn-System mit diesen Annahmen im Bereich der Stammstrecke {{hl|in einem kritischen Bereich}} befindet. Eine weitere Anspannung der Situation durch Haltezeitverlängerungen oder Reduzierung der Zuschläge {{hl|könnte zu einem »Kippen« des Systems führen}}. Wo diese Grenze liegt, ist jedoch nicht bekannt und auch nicht Gegenstand der vorliegenden Simulation."'' (Audit SI-07 S. 8 / Bl. 182) | ||
#* Die gemessenen Haltezeiten der S-Bahn heute liegen bei 53 (?) Sekunden (.... überprüfen, Quelle). Hier so vorschnell die Analyse zu beenden, heißt, beide Augen zuzudrücken. .... | #* Die gemessenen Haltezeiten der S-Bahn heute liegen bei 53 (?) Sekunden (.... überprüfen, Quelle). Hier so vorschnell die Analyse zu beenden, heißt, beide Augen zuzudrücken. .... | ||
#* SMA: ''"Bei der S-Bahn führt die Verlängerung der Haltezeiten in Stuttgart tief um 18 Sekunden zu einem Verspätungszuwachs in diesem Bereich von etwa 30 Sekunden pro Zug."'' | #* SMA: ''"Bei der S-Bahn führt die Verlängerung der Haltezeiten in Stuttgart tief um 18 Sekunden zu einem Verspätungszuwachs in diesem Bereich von etwa 30 Sekunden pro Zug."'' | ||
#* Das ist ein absolut dramatischer Verspätungszuwachs! .... | #* Das ist ein absolut dramatischer Verspätungszuwachs! .... | ||
− | # Sensitivitätsbetrachtung Datenmodell 15. Juli (Audit SI-08 S. 1 / Bl. 186) | + | # Sensitivitätsbetrachtung '''Datenmodell 15. Juli''' (Audit SI-08 S. 1 / Bl. 186) |
#* SMA: ''"Mit diesen neuen Prämissen ist eine leicht sinkende Betriebsqualität zu beobachten. Das Modell bleibt jedoch stabil und befindet sich noch deutlich unter der Grenze zu Instabilität. Hinzu kommt, dass der erforderlich Verspätungszuwachs zum Erreichen risikobehafteter Betriebsqualität deutlich höher ist, als der Zuwachs vom Ursprungsmodell zur Sensitivitätsanalyse. Der Zuwachs vom Grundmodell zur Sensitivitätsanalyse betrug je nach Vergleichsbetriebsstellen etwa 5 Sekunden. Es wäre jedoch ein weiterer Zuwachs von 20 Sekunden erforderlich bis zum Erreichen der Grenze der risikobehafteteten Betriebsqualität."'' (Audit SI-08 S. 14 / Bl. 199) | #* SMA: ''"Mit diesen neuen Prämissen ist eine leicht sinkende Betriebsqualität zu beobachten. Das Modell bleibt jedoch stabil und befindet sich noch deutlich unter der Grenze zu Instabilität. Hinzu kommt, dass der erforderlich Verspätungszuwachs zum Erreichen risikobehafteter Betriebsqualität deutlich höher ist, als der Zuwachs vom Ursprungsmodell zur Sensitivitätsanalyse. Der Zuwachs vom Grundmodell zur Sensitivitätsanalyse betrug je nach Vergleichsbetriebsstellen etwa 5 Sekunden. Es wäre jedoch ein weiterer Zuwachs von 20 Sekunden erforderlich bis zum Erreichen der Grenze der risikobehafteteten Betriebsqualität."'' (Audit SI-08 S. 14 / Bl. 199) | ||
#* Hier unterliegt die SMA dem gängigen Missverständnis, für die Betriebsqualität wäre von Einbruch zu Ausbruch ein Verspätungszuwachs von 1 Minute als Qualitätsgrenze festgelegt. Das ist nicht der Fall, allein für Teilstrecken und Bahnhofsköpfe existieren (vorläufige) Grenzwerte. Für den gesamten Auswerteraum gibt die Richtlinie lediglich eine qualitative Einstufung. (.... Quellen, Links) | #* Hier unterliegt die SMA dem gängigen Missverständnis, für die Betriebsqualität wäre von Einbruch zu Ausbruch ein Verspätungszuwachs von 1 Minute als Qualitätsgrenze festgelegt. Das ist nicht der Fall, allein für Teilstrecken und Bahnhofsköpfe existieren (vorläufige) Grenzwerte. Für den gesamten Auswerteraum gibt die Richtlinie lediglich eine qualitative Einstufung. (.... Quellen, Links) | ||
#* Diese Sensitivität adressiert außerdem nicht alle nötigen Korrekturen .... | #* Diese Sensitivität adressiert außerdem nicht alle nötigen Korrekturen .... | ||
+ | # Der '''"Finale Simulationslauf"''' (Doku. FS, Audit FS, Anpassungen FS) ist die letzte der unseligen Sensitivitäten und liefert [[Stuttgart 21/Stresstest/Richtlinienverstöße#Sensitivitäten kein Ersatz für Vollsimulation|genausowenig einen Nachweis für die Leistungsfähigkeit]] von Stuttgart 21, wie die vorausgegangenen. | ||
+ | #* Erst die Berücksichtigung sämtlicher Korrekturen auf realitätsnahe Parameter und eine volle Simulation über 100 Tage würde einen Nachweis liefern können. Die Sensitivitäten von Einzelparametern sind ohne jede Beweiskraft. | ||
{{Hinweis|Baustelle|Liste muss weiter ausgearbeitet und bereinigt werden!}} | {{Hinweis|Baustelle|Liste muss weiter ausgearbeitet und bereinigt werden!}} | ||
Zeile 166: | Zeile 172: | ||
Die SMA schreibt nicht einfach bei der Zitierung der Haltzeitverlängerung folgende | Die SMA schreibt nicht einfach bei der Zitierung der Haltzeitverlängerung folgende | ||
:''"{{hl|Grundlage bildet}} die Richtlinie 405.0204A03. Die folgende Tabelle zeigt Näherungswerte für Urverspätungen als Haltezeitverlängerungen:"'' | :''"{{hl|Grundlage bildet}} die Richtlinie 405.0204A03. Die folgende Tabelle zeigt Näherungswerte für Urverspätungen als Haltezeitverlängerungen:"'' | ||
− | |||
===Fehlende Flanken der Spitzenstunde=== | ===Fehlende Flanken der Spitzenstunde=== | ||
Zeile 174: | Zeile 179: | ||
===Weitere Inkonsequenzen=== | ===Weitere Inkonsequenzen=== | ||
# Der Fehler durch den [[#Verspätungsabbau im Einbruchsbahnhof|unzulässigen Verspätungsabbau in den Einbruchsbahnhöfen]] wird zwar benannt, aber seine Behebung in folgenden Sensitivitäten bzw. dem Finalen Simulationslauf nicht eingefordert. (Audit SI-07 S. 5 / Bl. 179) | # Der Fehler durch den [[#Verspätungsabbau im Einbruchsbahnhof|unzulässigen Verspätungsabbau in den Einbruchsbahnhöfen]] wird zwar benannt, aber seine Behebung in folgenden Sensitivitäten bzw. dem Finalen Simulationslauf nicht eingefordert. (Audit SI-07 S. 5 / Bl. 179) | ||
− | |||
==Verdeckende Kritik== | ==Verdeckende Kritik== | ||
Zeile 212: | Zeile 216: | ||
Entscheidung im Lenkungskreis von April .... | Entscheidung im Lenkungskreis von April .... | ||
− | ... | + | {{Hinweis|Baustelle|Muss noch fertig ausgearbeitet werden ...}} |
===Unzureichende Urverspätungen=== | ===Unzureichende Urverspätungen=== | ||
Zeile 237: | Zeile 241: | ||
#''"Die Sensitivitätsbetrachtungen zeigen den {{hl|Einfluss der Eingangsprämissen auf die Resultate der Simulation}}. Es lässt sich jedoch feststellen, dass die damit erzielbaren Qualitätsmerkmale des SPV im Betrachtungsraum nicht grundlegend ändern und eine {{hl|gewisse Stabilität}} aufweisen."'' (SI-07 S. 10 / Bl. 184) | #''"Die Sensitivitätsbetrachtungen zeigen den {{hl|Einfluss der Eingangsprämissen auf die Resultate der Simulation}}. Es lässt sich jedoch feststellen, dass die damit erzielbaren Qualitätsmerkmale des SPV im Betrachtungsraum nicht grundlegend ändern und eine {{hl|gewisse Stabilität}} aufweisen."'' (SI-07 S. 10 / Bl. 184) | ||
− | # | + | #* Hier nur von "Einfluss" zu sprechen, nachdem praktische jede einzelne Sensitivität einen "deutlichen" Einfluss bis nahe hin an das "Kippen" des Systems zeigte und die Summe der Sensitivitäten den praktisch sicheren Kollaps des Systems erwarten lässt, ist ein ausgesprochener Euphemismus. |
# .... | # .... | ||
Zeile 252: | Zeile 256: | ||
# {{NoGo}} {{Ex}} '''Alte Definition der "guten Betriebsqualität"''': Es ist zwar präzise, wenn im Audit steht: "Der Begriff »gute Betriebsqualität« kommt in keinem <u>bestehenden</u> Regelwerk vor." Aber es ist unredlich, zu verschweigen, dass bis 2008 diese Stufe der Betriebsqualität sehr wohl definiert war<ref>29.07.2011, Stresstest-Präsentation, 14:57 Uhr, Boris Palmer</ref> und auch dem Projekt Stuttgart 21 bspw. vor dem Verwaltungsgericht zugrunde gelegt worden war. Dies dient mutmaßlich zur Verdeckung des Umstands, dass dieser Qualitätsstufe heute "Premium" entsprechen würde. Das Verschweigen dieser klaren Sachlage erscheint absolut absichtsvoll und wiegt besonders schwer, da in den Prämissengesprächen vor dem Auditor ausführlich über diese frühere und vor dem VGH relevante Definition diskutiert wurde. | # {{NoGo}} {{Ex}} '''Alte Definition der "guten Betriebsqualität"''': Es ist zwar präzise, wenn im Audit steht: "Der Begriff »gute Betriebsqualität« kommt in keinem <u>bestehenden</u> Regelwerk vor." Aber es ist unredlich, zu verschweigen, dass bis 2008 diese Stufe der Betriebsqualität sehr wohl definiert war<ref>29.07.2011, Stresstest-Präsentation, 14:57 Uhr, Boris Palmer</ref> und auch dem Projekt Stuttgart 21 bspw. vor dem Verwaltungsgericht zugrunde gelegt worden war. Dies dient mutmaßlich zur Verdeckung des Umstands, dass dieser Qualitätsstufe heute "Premium" entsprechen würde. Das Verschweigen dieser klaren Sachlage erscheint absolut absichtsvoll und wiegt besonders schwer, da in den Prämissengesprächen vor dem Auditor ausführlich über diese frühere und vor dem VGH relevante Definition diskutiert wurde. | ||
# {{NoGo|10}}'''Stresstest auf Basis ungültiger Prozessbeschreibung''': Die Bahn hatte angegeben, beim Stresstest gemäß Prozess "[[Stuttgart 21/Stresstest/Richtlinienverstöße#Stresstest-Simulation auf Basis ungültiger Prozessbeschreibung|'Fahrplanrobustheitsprüfung (FRP) durchführen' (LN34-07-01-03)]]" verfahren zu haben (Doku Teil 1 S. 2). Die SMA prüfte weder, ob diese Prozessbeschreibung gültig war, noch ob sie oder die gültige Fassung eingehalten wurde. So wurde auch übersehen, dass die Prüfung von Infrastrukturvarianten nicht gemäß der zur Zeit der Stresstest-Erstellung gültigen Prozessbeschreibung erfolgt war. Allein dieser Punkt würde ein Testat ausschließen. | # {{NoGo|10}}'''Stresstest auf Basis ungültiger Prozessbeschreibung''': Die Bahn hatte angegeben, beim Stresstest gemäß Prozess "[[Stuttgart 21/Stresstest/Richtlinienverstöße#Stresstest-Simulation auf Basis ungültiger Prozessbeschreibung|'Fahrplanrobustheitsprüfung (FRP) durchführen' (LN34-07-01-03)]]" verfahren zu haben (Doku Teil 1 S. 2). Die SMA prüfte weder, ob diese Prozessbeschreibung gültig war, noch ob sie oder die gültige Fassung eingehalten wurde. So wurde auch übersehen, dass die Prüfung von Infrastrukturvarianten nicht gemäß der zur Zeit der Stresstest-Erstellung gültigen Prozessbeschreibung erfolgt war. Allein dieser Punkt würde ein Testat ausschließen. | ||
− | # Die SMA hat die laut Richtlinie [[Stuttgart 21/Stresstest/Richtlinienverstöße#Belegungsgrade sind nicht angegeben|zwingende Ermittlung und Darstellung der Belegungsgrade]] übersehen. Es erscheint schwer nachvollziehbar, wie die SMA bei ihrer Expertise in dem Feld ausgerechnet bei diesem Projekt diese grundlegendste Kennzahl der Kapazitätsplanung übersehen konnte. | + | # '''Belegungsgrade''': Die SMA hat die laut Richtlinie [[Stuttgart 21/Stresstest/Richtlinienverstöße#Belegungsgrade sind nicht angegeben|zwingende Ermittlung und Darstellung der Belegungsgrade]] übersehen. Es erscheint schwer nachvollziehbar, wie die SMA bei ihrer Expertise in dem Feld ausgerechnet bei diesem Projekt diese grundlegendste Kennzahl der Kapazitätsplanung übersehen konnte. |
− | # ''' | + | # '''Mittelung der Betriebsqualität über 4 Stunden''': Während die SMA die [[#Fehlende Flanken der Spitzenstunde|fehlenden Flanken in der Modellierung der Spitzenstunde]] hätte bemerken müssen, da sie Anforderung und die Nicht-Realisierung auf Folgeseiten im Audit gegenüberstellte, aber inkonsequenterweise die Diskrepanz nicht betrachtete, hat die SMA den zweiten Aspekt der [[Stuttgart 21/Stresstest/Anforderungen#Mittelung der Betriebsqualität über 4 Stunden|Mittelung über die 4 Stunden]] zumindest übersehen, wenn nicht übergangen. Der mit rund 13 % quantitativ größte Effekt in der Reduzierung des Stresses im Stresstest wird so von der SMA in der Folge kleingeredet, indem die Betrachtung der alleinigen Spitzenstunde als "fachlich fraglich" dargestellt wird. |
− | # Die SMA übernahm die [[Stuttgart 21/Stresstest/Anforderungen#Regelwidrige Qualitätsgrenzen im Stresstest unkorrekte Grenzwert-Festlegung für die Betriebsqualität]] offenbar ohne kritische Prüfung von der Bahn inklusive aller Fehler (Audit SI-07 S. 2 / Bl. 176). Das ging nur, wenn diese Definition nicht anhand der Richtlinie überprüft wurden, denn die Abweichungen springen ins Auge. | + | # '''Falsche Grenzwerte für die Betriebsqualität''': Die SMA übernahm die [[Stuttgart 21/Stresstest/Anforderungen#Regelwidrige Qualitätsgrenzen im Stresstest|unkorrekte Grenzwert-Festlegung für die Betriebsqualität]] offenbar ohne kritische Prüfung von der Bahn inklusive aller Fehler (Audit SI-07 S. 2 / Bl. 176). Das ging nur, wenn diese Definition nicht anhand der Richtlinie überprüft wurden, denn die Abweichungen springen ins Auge. |
# .... | # .... | ||
===Mangelnde bzw. freihändige Begründungen=== | ===Mangelnde bzw. freihändige Begründungen=== | ||
− | # {{NoGo}} {{Ex}} Die Aussage zur Erteilung des Testats, obwohl nicht alle Fehler im Modell beseitigt wurden entbehrt jeder nachvollziehbaren Begründung und erscheint als haltlose Behauptung: ''"Auch nach den Zusatz-Überprüfungen bleiben eine {{hl|Anzahl Unstimmigkeiten im Simulationsmodell bestehen}}. Sie sind nach unserer Einschätzung in einer Größenordnung, die das Gesamtresultat zwar {{hl|zahlenmäßig etwas verändern}}, ohne dass jedoch die Resultateinstufung aus dem Bereich »wirtschaftlich optimal« herausfällt."'' | + | # {{NoGo}} {{Ex}} '''Testat, obwohl nicht alle Fehler beseitigt''': Die Aussage zur Erteilung des Testats, obwohl nicht alle Fehler im Modell beseitigt wurden entbehrt jeder nachvollziehbaren Begründung und erscheint als haltlose Behauptung: ''"Auch nach den Zusatz-Überprüfungen bleiben eine {{hl|Anzahl Unstimmigkeiten im Simulationsmodell bestehen}}. Sie sind nach unserer Einschätzung in einer Größenordnung, die das Gesamtresultat zwar {{hl|zahlenmäßig etwas verändern}}, ohne dass jedoch die Resultateinstufung aus dem Bereich »wirtschaftlich optimal« herausfällt."'' |
#* Es wird auch an anderer Stelle keine qualifizierte Abschätzung zur Größenordnung der Fehler gegeben (.... nochmal überprüfen), so dass diese Behauptung haltlos ist. Es gibt keinerlei Beleg, dass ausgeschlossen werden kann, dass "wirtschaftlich optimal" gehalten wird. | #* Es wird auch an anderer Stelle keine qualifizierte Abschätzung zur Größenordnung der Fehler gegeben (.... nochmal überprüfen), so dass diese Behauptung haltlos ist. Es gibt keinerlei Beleg, dass ausgeschlossen werden kann, dass "wirtschaftlich optimal" gehalten wird. | ||
#* Die Formulierung "zahlenmäßig etwas verändern" ist ein weiterer Fall von Schönreden zugunsten der Bahn, so als könnten sich einzelne Korrekturen auch positiv auswirken. Alle Korrekturen führen zu einer Verschlechterung der Qualität und der Leistung. | #* Die Formulierung "zahlenmäßig etwas verändern" ist ein weiterer Fall von Schönreden zugunsten der Bahn, so als könnten sich einzelne Korrekturen auch positiv auswirken. Alle Korrekturen führen zu einer Verschlechterung der Qualität und der Leistung. | ||
#* Die Empfehlung einer Nachsimulation ist untauglich zum Nachweis der Leistungsfähigkeit, da | #* Die Empfehlung einer Nachsimulation ist untauglich zum Nachweis der Leistungsfähigkeit, da | ||
− | # {{NoGo}} Die SMA meldet schwere [[Stuttgart 21/Richtlinienverstöße#Abschlussdokumentation nicht nachvollziehbar|Kritik an der Stresstest-Dokumentation]] an: | + | # {{NoGo}} '''Unvollständige Abschlussdokumentation''': Die SMA meldet schwere [[Stuttgart 21/Stresstest/Richtlinienverstöße#Abschlussdokumentation nicht nachvollziehbar|Kritik an der Stresstest-Dokumentation]] an: |
#:''"Der Bericht 'Stresstest Stuttgart 21 – Fahrplanrobustheitsprüfung' der DB Netz AG vom 30. Juni {{hl|ist nicht selbsterklärend, weist teilweise inhaltliche Mängel auf und bietet keine vollständige Dokumentation der durchgeführten Arbeiten}}."'' (Audit SI-07 S. 10 / Bl. 184) | #:''"Der Bericht 'Stresstest Stuttgart 21 – Fahrplanrobustheitsprüfung' der DB Netz AG vom 30. Juni {{hl|ist nicht selbsterklärend, weist teilweise inhaltliche Mängel auf und bietet keine vollständige Dokumentation der durchgeführten Arbeiten}}."'' (Audit SI-07 S. 10 / Bl. 184) | ||
#:Abgesehen davon, dass nicht nachvollziehbar ist, wie die SMA nach einer solchen Aussage und auf der Basis einer solchen Ausgangsdatenlage überhaupt in der Lage war, zu testieren, ist aber insbesondere inakzeptabel, dass die SMA einen solchen schweren Vorwurf nicht im Einzelnen mit den konkreten Mängeln belegt. Als Pauschalvorwurf ist diese Aussage zwar ungerecht gegenüber der Bahn, das Verschweigen der Detailkritik erspart der Bahn aber mutmaßlich weitaus härtere Kritik in der Öffentlichkeit. | #:Abgesehen davon, dass nicht nachvollziehbar ist, wie die SMA nach einer solchen Aussage und auf der Basis einer solchen Ausgangsdatenlage überhaupt in der Lage war, zu testieren, ist aber insbesondere inakzeptabel, dass die SMA einen solchen schweren Vorwurf nicht im Einzelnen mit den konkreten Mängeln belegt. Als Pauschalvorwurf ist diese Aussage zwar ungerecht gegenüber der Bahn, das Verschweigen der Detailkritik erspart der Bahn aber mutmaßlich weitaus härtere Kritik in der Öffentlichkeit. | ||
− | # {{NoGo}} Die SMA erteilt das Testat "wirtschaftlich optimal" (Audit Schlussbericht S. 7 / Bl. 13) hatte aber hinten im Audit festgestellt: | + | # {{NoGo}} '''Testat wirtschaftlich optimal statt Premium''': Die SMA erteilt das Testat "wirtschaftlich optimal" (Audit Schlussbericht S. 7 / Bl. 13) hatte aber hinten im Audit festgestellt: |
#:''"Aus der Abbildung ist erkennbar, dass {{hl|bei Anwendung der in RiL 405 definierten Kategorien der Betriebsqualität das Qualitätsmerkmal »Premiumqualität« erzielt wird}}: die mittlere Verspätung aller Züge lässt sich im Betrachtungsraum um 29 Sekunden abbauen."'' (Audit SI-07 S. 4 / Bl. 178) | #:''"Aus der Abbildung ist erkennbar, dass {{hl|bei Anwendung der in RiL 405 definierten Kategorien der Betriebsqualität das Qualitätsmerkmal »Premiumqualität« erzielt wird}}: die mittlere Verspätung aller Züge lässt sich im Betrachtungsraum um 29 Sekunden abbauen."'' (Audit SI-07 S. 4 / Bl. 178) | ||
#:Im Weiteren sprach die SMA nur noch von zusätzlichen Qualitätschecks bezüglich der Zu- und Ablaufstrecken. Warum nicht "Premium" testiert wurde, wird an keiner Stelle des Audits dargelegt. Dies führte in der Stresstest-Präsentation zu viel Verwirrung und einer langen Diskussion.<ref>29.07.2011, Stresstest-Präsentation, [http://stuttgart21.wikiwam.de/Stresstest_Pr%C3%A4sentation/Wortprotokoll#Premium-Qualit.C3.A4t 16:51 Uhr bis ... Uhr], sowie auch schon vereinzelt zuvor.</ref> | #:Im Weiteren sprach die SMA nur noch von zusätzlichen Qualitätschecks bezüglich der Zu- und Ablaufstrecken. Warum nicht "Premium" testiert wurde, wird an keiner Stelle des Audits dargelegt. Dies führte in der Stresstest-Präsentation zu viel Verwirrung und einer langen Diskussion.<ref>29.07.2011, Stresstest-Präsentation, [http://stuttgart21.wikiwam.de/Stresstest_Pr%C3%A4sentation/Wortprotokoll#Premium-Qualit.C3.A4t 16:51 Uhr bis ... Uhr], sowie auch schon vereinzelt zuvor.</ref> | ||
Zeile 296: | Zeile 300: | ||
# Die [[Stuttgart 21/Stresstest/Anforderungen#Zu wenig Züge im Vor- und Nachlauf|unrealistische Spitzenstunde]] blieb [[#Inkonsequente Bewertungen|unkommentiert]]. | # Die [[Stuttgart 21/Stresstest/Anforderungen#Zu wenig Züge im Vor- und Nachlauf|unrealistische Spitzenstunde]] blieb [[#Inkonsequente Bewertungen|unkommentiert]]. | ||
# Gute Betriebsqualität .... | # Gute Betriebsqualität .... | ||
− | # Sensitivitäten .... | + | # Sensitivitäten, Finaler Simulationslauf ohne jede Beweiskraft .... |
# Insbesondere das systematische Ausblenden der kritischen Prüfung der Eingangsgrößen .... | # Insbesondere das systematische Ausblenden der kritischen Prüfung der Eingangsgrößen .... | ||
# .... | # .... |
Version vom 17. Oktober 2011, 20:51 Uhr
→ Dies ist die Detaildarstellung des entsprechenden Abschnitts im Hauptartikel Stuttgart 21/Stresstest (wichtige Quellen dort unter Dokumente).
Die Kritik an der Arbeit der SMA ist nahezu so umfangreich wie die Kritik am Stresstest selbst. Dies ist eine logische Konsequenz, da der Auditor ein deutlich fehlerhaftes Verfahren positiv testierte. Die Systematik der handwerklichen Fehler der SMA, ihre eindeutige Tendenz beim Schönreden gravierender Mängel des Stresstests, legen den Verdacht nahe, dass die Auditierung des Stresstests durch die SMA ein Gefälligkeitsgutachten zugunsten des Auftraggebers und Großkunden Deutsche Bahn AG ist.
Ein fehlerhafter Prozess wird nicht dadurch richtig, dass eine fehlerhafte Auditierung dieses Prozesses durchgeführt wird. Auch wenn die Kritiker den Auditor SMA selbst vorgeschlagen hatten, darf das nicht den Blick verschließen vor den gravierenden Mängeln seiner Arbeit. Diese können nicht allein damit begründet werden, dass dies der Erstfall der Auditierung einer solchen Simulation ist, sondern scheinen weitgehend dem Interesse des Auftraggebers zu folgen.
Kritik an der Arbeit der SMA
Unzureichende Aufgabenstellung
Nach Aufgabenstellung Testat nur über Simulation,
nicht über zukünftige Leistungsfähigkeit möglich
Keine Plausibilisierung aller Eingangsgrößen
Testat erteilt trotz fehlender Grundlage
Testat erteilt trotz erkannter großer Mängel:
Testat erteilt ohne nachvollziehbare Dokumentation
Testat erteilt ohne vollständige Simulation
Testat erteilt trotz vieler Richtlinienverstöße
Testat erteilt ohne Abschluss der Analyse
Handwerkliche Mängel zugunsten der Bahn
Schönreden gravierender Mängel
Viele Mängel übersehen / nicht angesprochen
Entscheidende Aussagen ohne Quellenangaben
Inhaltsverzeichnis
Es scheint allein dem politischen Druck vom Koalitionspartner SPD geschuldet, wenn der baden-württembergische Ministerpräsident Winfried Kretschmann vor einer eingehenden Prüfung das Audit der SMA als seriös akzeptierte und auch die Leistungsfähgikeit für erwiesen deklarierte:
- "Grün-Rot akzeptiert die Bewertung des Stresstestes für das Bahnprojekt Stuttgart 21. »Das Gutachten ist seriös«, sagt Kretschmann sogar. Wenn die vom Gutachter geforderten Nachbesserungen erfolgen, sei die Leistungsfähigkeit des Tiefbahnhofs erwiesen. Dann müssten nur noch die vom Schlichter verlangten Forderungen umgesetzt werden und die Bahn die Kosten transparent und »vollumfänglich« darlegen. Das sind die vier Stellen der Übereinstimmung." (Stuttgarter Zeitung, 23.07.2011)[1]
Die SMA schreibt richtig: "Es existieren keine Richtlinien für die Prüfung einer eisenbahnbetriebswissenschaftlichen Simulation. Ein Prüfverfahren musste also zuerst aufgestellt werden." (Audit Schlussber. S. 4 / Bl. 10) Die SMA hat dabei ein durchaus nachvollziehbares Schema der Prüfung aufgestellt. An der Durchführung wird jedoch im folgenden Kritik geübt.
Die SMA war sich bei Übernahme des Mandats für die Prüfung des Stresstests sehr wohl bewusst, wie heikel diese Aufgabe ist. Das wird an folgender Aussage aus dem Angebot (!) der SMA deutlich:
- "Zur Sicherung der Glaubwürdigkeit des Stresstests fühlt sich die SMA und Partner AG verpflichtet, ihre Objektivität und Neutralität auch gegenüber der Öffentlichkeit gewährleistet zu sehen." (Angebot SMA Vorwort S. 1 / Bl. 5)[2]
Über die Logik dieser Aussage kann gerätselt werden, etwa wer hier den Ruf der SMA beschützen könnte außer sie selbst. Aber diese unmotivierte Erklärung macht immerhin deutlich, dass die SMA ihre Objektivität und Neutralität bedroht sah. Bemerkenswerterweise findet sich im Audit-Bericht keinerlei erneute Erklärung der Objektivität und Neutralität des Gutachters.
Tatsächlich lässt die SMA im Audit durch eine Vielzahl übersehener Fehler im Stresstest, aber insbesondere auch durch die erkannten Fehler, die vollkommen inkonsequent bewertet oder teilweise regelrecht schöngeredet wurden, erhebliche Zweifel an ihrer Objektivität und Neutralität aufkommen. Die Systematik dieser Punkte könnte den Eindruck entstehen lassen, das Audit wäre ein Gefälligkeitsgutachten zugunsten der Bahn als Auftraggeber und Großkunde der SMA. Den Ansprüchen einer wissenschaftlichen Vorgehensweise für eine nachvollziehbare Bewertung wird es in keiner Weise gerecht.
Beschränkungen der Aufgabenstellung
Audit statt Gutachten
→ siehe auch Glaubwürdigkeit#Audit statt Gutachten
Schon die Tatsache, dass die SMA von der Bahn nicht mit einem "Gutachten", sondern nur einem "Audit" beauftragt wurde, stellt eine gravierende Beschränkung der Aufgabenstellung dar. Nur mit dem umfassenden Prüfauftrag eines Gutachtens wäre eine Aussage über die tatsächliche zukünftige Leistungsfähigkeit von S21 möglich. Das Audit erlaubt allenfalls die Bewertung, ob der Stresstest regelkonform durchgeführt wurde, nicht aber, ob seine Annahmen realitätsnah sind und die simulierte Leistungsfähigkeit tatsächlich in der Praxis erreicht werden kann.
Nachweis durch Audit?
Im Schlichterspruch zu Stuttgart 21 war für den Stresstest gefordert worden, es sei der "Nachweis" zu erbringen, dass 30 Prozent mehr Leistung durch den neuen Bahnhof erbracht würden. Nachweis heißt, dass ein Beweis zu führen ist. Nichts geringeres kann hinreichen, da in der Schlichtung begründete Zweifel an der Leistungsfähigkeit der Milliardeninvestition Stuttgart 21 aufgekommen waren.
Im üblichen Wirtschaftsgeschehen werden Nachweise durch Gutachten von Experten erbracht. Vielfach war insofern auch im Vorfeld des Stresstests von "Begutachtung" und den "Gutachtern" aus der Schweiz die Rede. Tatsächlich hat die Bahn bei der SMA jedoch nur ein "Audit" beauftragt. Audits prüfen je nach Gegenstand, ob zu untersuchende Prozesse den geltenden Anforderungen und Richtlinien entsprechen oder ob eine bestimmte Leistung erbracht wurde. Während Gutachten zur Urteilsfindung alle verfügbaren Informationen auch außerhalb des zu betrachtenden Unternehmens heranziehen, prüft ein Audit in der Regel nur Informationen, die von dem auditierten Unternehmen selbst stammen.
Tatsächlich lautet dann aber das Testat der SMA:
- "Unsere Prüfung der Simulationsergebnisse hat gezeigt, dass die geforderten 49 Ankünfte im Hauptbahnhof Stuttgart in der am meisten belasteten Stunde und mit dem der Simulation unterstellten Fahrplan mit wirtschaftlich optimaler Betriebsqualität abgewickelt werden können." (Audit Schlussber. S. 7 / Bl. 13)
Eine solche Tatsachenfeststellung über eine in der Realität in der Zukunft erbrachte Leistungsfähigkeit des Bahnhofs ist gar nicht von der Aufgabenstellung des Audits gedeckt:
- "Am Ende des Schlichtungsprozesses waren sich Befürworter und Gegner darüber einig, [...] dass diese Simulation von einer neutralen Institution (SMA und Partner AG) geprüft wird. Es existieren keine Richtlinien für die Prüfung einer eisenbahnbetriebswissenschaftlichen Simulation. Ein Prüfverfahren musste also zuerst aufgestellt werden. Es umfasst die folgenden Schritte: • Prüfen der im Simulationsmodell erfassten Infrastrukturdaten bezüglich Ort und Funktion, • Prüfen aller Fahrplanelemente, • Prüfen der Simulationsmethodik, des Ablaufs und der Ergebnisse." (Audit Schlussber. S. 4 / Bl. 10)
Unter dieser Aufgabenstellung hätte allenfalls eine Aussage getroffen werden können in der Art: 'Die Simulation wurde mit weitgehend korrekten Infrastruktur- sowie Fahrplandaten und der richtigen Methodik durchgeführt. Unter den getroffenen Annahmen kann vom Auditor nachvollzogen werden, dass in der Simulation 49 Ankünfte pro Stunde mit wirtschaftlich optimaler Betriebsqualität verarbeitet werden.'
Für eine Aussage über die zukünftige in der Realität erreichbare Leistungsfähigkeit fehlt der umfassende Ansatz eines Gutachtens, aber auch wichtige Aspekte, die das Audit gar nicht hinreichend überprüfte. So fehlt in der Aufgabenbeschreibung des Audits die Prüfung der Eingangsgrößen über Infrastruktur- und Fahrplandaten hinaus wie die Realitätsnähe der Annahmen für Verspätungen und Verspätungsabbau. Auch fehlt die Forderung aus dem Schlichterspruch nach der Einhaltung der anerkannten Standards. Diese Forderung würde schon aus dem Bezugsrahmen Deutsche Bahn AG hinausführen. Es ist aber besonders kritisch zu sehen, dass sogar zahlreiche Richtlinien der DB nicht eingehalten wurden. Das bemerkt in einigen Fällen selbst die SMA, zieht aber nicht die notwendigen Konsequenzen.
Zu diesen formalen Schwächen des Audits kommt hinzu, dass das Audit zahlreiche Falschannahmen der DB im Stresstest nicht identifiziert oder schönredet oder nicht konsequent bewertet. D.h. das Audit hat nicht den Nachweis erbracht, dass Stuttgart 21 die geforderte Leistungsfähigkeit erbringen kann, und konnte diesen Nachweis nach seiner Aufgabenstellung auch gar nicht erbringen.
Tatsächlich lassen sich mit realistischen Annahmen, unter Erfüllung der Fahrplanvorgaben des Landes und unter Einhaltung der Richtlinien die 49 Züge pro Stunde im Bahnhof Stuttgart 21 nicht erreichen.
Keine Prüfung aller Eingangsgrößen
Auffällig sind die Auslassungen in der Aufgabenstellung des Audits (Audit Schlussber. S. 4 / Bl. 10), wo es heißt, es ginge um die "Prüfung einer eisenbahnbetriebswissenschaftlichen Simulation", um die Korrektheit der Infrastruktur- und Fahrplandaten, sowie der Methodik. Hier fehlen entscheidende Aspekte:
- Es fehlt die Prüfung der über Infrastruktur- und Fahrplandaten hinausgehenden Eingangsgrößen wie die unterstellten Mindesthaltezeiten oder simulierten Verspätungen.
- Auch fehlt die Überprüfung der im Schlichterspruch geforderten Einhaltung der anerkannten Standards. Verstöße gegen Bahn-Richtlinien wurden teils erwähnt aber dennoch hingenommen, internationale Standards wurden nicht herangezogen.
Auch in eine Seite zuvor im Audit (Audit Schlussber. S. 3 / Bl. 9) fehlen bei den Eingangsgrößen die Annahmen für die Verspätungen, den Verspätungsabbau die Haltezeiten etc., die doch mindestens ebenso wesentliche Eingangsgrößen sind wie die Infrastruktur und der Fahrplan.
Dies ist die Fortsetzung eines logischen Bruchs, der sich schon im Angebot der SMA findet, das die Grundlage des Auftrags durch die Deutsche Bahn AG ist. Modul 3 besteht aus dem Arbeitsschritt:
- "Fachliche Bewertung der Ergebnisse der Betriebssimulation, um die Plausibilität der Resultate bestätigen zu können." (Angebot SMA Vorwort S. 1 / Bl. 5)
Dies ist natürlich eine logische Unmöglichkeit, allein aus der Bewertung der Ergebnisse deren Plausibilität bestätigen zu können. Entweder würde dazu die gesamte Prozesskette von den Prämissen her beginnend geprüft – mit besonderem Augenmerk auf eben diese Startgrößen – oder es würde wenigstens das Ergebnis mit anderen Vergleichswerten (z.B. Praxisvergleich, andere Neubauten, Belegungsgrad etc.) plausibilisiert, – besser natürlich beides. Aber nichts dergleichen ist geschehen. So bleibt die SMA den Nachweis schuldig, inwiefern sich ein Ergebnis allein aus sich heraus plausibilisieren ließe.
Tatsächlich wurden folgende wesentliche Eingangsgrößen der Simulation nicht von der SMA geprüft bzw. plausibilisiert:
- Einbruchverspätungen: ....
- Verspätungsabbau aus Fahrzeitreserven: ....
- Mindesthaltezeiten: ....
- Haltezeitverlängerungen: ....
- ....
Ein Nachweis ist so nicht zu erbringen, wenn ein Großteil der entscheidenden Eingangsgrößen gar keiner ernsthaften Prüfung und Plausibilisierung unterzogen werden soll.
Testat obwohl Voraussetzungen nicht erfüllt
Es ist nicht nachvollziehbar, wie die SMA ein Testat erteilen konnte, obwohl nach den Feststellungen der SMA selbst die Voraussetzungen unmöglich erfüllt sein können.
Dokumentation nicht nachvollziehbar
[Zitat aus dem Audit ....]
Die Dokumentation erfüllt nicht annähernd die Ansprüche aus der Richtlinie sowie die Ansprüche an die Grundlage einer Testierung. Insbesondere da die Dokumentation auch die Grundlage der Information der Öffentlichkeit bietet ist nicht akzeptabel, dass die SMA sich weitergehende Informationen gezielt besorgen musste. So bleibt das Ergebnis des Stresstests intransparent.
Keine vollständige Simulation mit korrekten Parametern
[Zitat aus dem Audit ....]
Es lag bis zuletzt keine vollständige Simulation (100 Betriebstage) eines korrekten Eingangsdatensatzes vor. Die in dieser Vollständigkeit laut Richtlinie im Minimum notwendige Entscheidungsgrundlage kann nicht durch die Berechnung einzelner Sensitivitäten ersetzt werden (siehe auch Nachsimulation).
Bahn-Richtlinien nicht eingehalten
Die Verkürzung des Gutachten-Auftrags auf ein Audit, bei dem die Bahn selbst die Kontroll-Maßstäbe liefert, war eine wesentlicher Maßnahme der Bahn, um die realitätsfernen Prämissen vor dem Auditor besser rechtfertigen zu können. Im Minimum hätte der Auditor jedoch die Einhaltung der Bahn-Richtlinien streng prüfen müssen. Hier ist der Bahn (wo die SMA selbst in vielen Fällen Verstöße aufführte).
Laut dem Auftrag im Schlichterspruch hätte darüber hinaus die Einhaltung der anerkannten Standards des Bahnverkehrs geprüft werden müssen, d.h. die Realitätsnähe der Annahmen für Haltezeiten. Dies ist praktisch nicht erfolgt ....
Die SMA hat selbst eine Reihe von Richtlinienverletzungen festgestellt, diese aber teilweise nur mit verharmlosenden Bemerkungen versehen oder lediglich eine Sensitivitäsanalyse angeregt, statt eine regelkonforme Wiederholung der Vollsimulation einzufordern:
- Verspätungsabbau ab Einbruchsbetriebstelle Abfahrt ....
- Fahrzeitüberschüsse ....
- ....
- ....
Es ist unverständlich, wie bei zahlreichen bestehenden Richtlinienverletzungen dennoch ein Testat erteilt werden kann.
Analyse noch nicht abgeschlossen
Einerseits lässt das von der SMA im Detail untersuchte Datenmodell vom 21.06.2011 kein Testat (Bewertung des Gesamtergebnisses) zu, andererseits ist das Datenmodell vom 15.07.2011 nur in Form einer Sensitivität (keine Vollsimulation) simuliert worden und die Analyse durch die SMA ist nicht abgeschlossen:
- "Im in Berlin übergebenen Datenmodell (Stand 21. Juni 2011) sind Elemente identifiziert, die eine Bewertung des Gesamtergebnisses noch nicht zulassen. Ein großer Teil dieser Elemente wurde der DB Netz AG schriftlich bzw. mündlich am 06. Juli und 07. Juli mitgeteilt. Diese Anmerkungen ließen sich zum Teil in das Simulationsmodell einarbeiten. Mit dem geänderten Modell erfolgte eine neue Simulation. Die Ergebnisse wurden am 15. Juli in Berlin besprochen sowie das zugehörige Simulationsmodell analysiert. Diese Resultate und Analysen sowie weitere Sensitivitätsbetrachtungen sind in diesem Steckbrief zusammen gefasst. Das Datenmodell der Sensitivitätsanalyse ist in seiner Vollständigkeit und Korrektheit nicht in gleichem Maße analysiert wie das Datenmodell der Grundvariante vom 21. Juni." (Audit SI-08 S. 1 / Bl. 186)
Obwohl der Bahn nur ein Teil der Elemente mitgeteilt worden war, die eine Gesamtbewertung noch nicht zulassen, und obwohl nur ein Teil der mitgeteilten Elemente berücksichtigt wurden und obwohl nur eine Sensitivität, nicht eine Vollsimulation (mit 100 simulierten Tagen), gerechnet wurde und obwohl deren Datenmodell nicht abschließend auf Vollständigkeit und Korrektheit von der SMA überprüft wurde ... wurde dennoch von der SMA ein Testat erteilt!
- "Aufgrund der vielen umgesetzten Änderungen ist eine Zuordnung bzw. Bewertung einzelner Punkte nicht möglich." (Audit SI-08 S. 11 / Bl. 196)
Obwohl die SMA noch kein Verständnis der gerechneten Sensitivität erarbeiten konnte, wurde dennoch ein Testat erteilt.
Inkonsequente Bewertungen
In vielen weiteren Fällen hat die SMA kritische Daten dargestellt, aber nicht die Konsequenz dieser Werte analysiert. Insbesondere ist es im höchsten Maße inkonsequent, einzelne "Sensitivitäten" anzufordern, sobald einzelne Fehler festgestellt wurden. Der "Nachweis" der Leistungsfähigkeit kann nur mit einer Vollsimulation und nur im Vergleich zu einer Referenz, d.h. dem Kopfbahnhof, erbracht werden.
Senstivitäten liefern keinerlei Nachweis
Es ist der Gipfel der Inkonsequenz, wenn die SMA zur Beurteilung der Wirkung fehlerhafter Parameter sogenannte "Sensitivitäten", d.h. die Simulation eines einzelnen Tages mit diesem korrigierten Parameter empfiehlt. Eine solche "Sensitivität" liefert, wie auch der Name sagt, nur die Reaktion des Systems (an einem Beispieltag) auf diese gezielte Parameteränderung. Sie wäre allenfalls gerechtfertigt, wenn sich zum Abschluss der Prüfung im Audit noch ein letzter Fehler in der Simulation entdeckt worden wäre. Ergäbe hier die Sensitivität eine geringe Auswirkung auf das Ergebnis, könnte evtl. noch ein Testat mit einer entsprechenden Bemerkung erteilt werden.
Liste der durchgeführten Sensitivitätsbetrachtungen:
- Sensitivitätsbetrachtung Verspätungsabbau mit nur 75 % der Fahrzeitreserven (Empfehlung in Audit SI-04 S. 2 / Bl. 154) (Empfehlung Sensitivität der "hohen Reserven" in Audit FP-05 S. 3 / Bl. 82) (Doku. Teil 2 S. 112 / Bl. 51 ff):
- SMA: Die Sensitivitätsanalyse "hat gezeigt, dass die Summe der Verspätungen über alle Züge zwischen 2 und 9 Sekunden zunimmt. Dies ist eine geringe Veränderung. Das Resultat der Simulation bleibt also stabil." (Audit SI-04 S. 2 / Bl. 154)
- Im Widerspruch zu Stohler in der Stresstestpräsentation zu den Sekundenwerten des durchschnittlichen Verspätungsaufbaus: "Diese Durchschnittswerte, die sind so unvorstellbar klein, dass man sich kaum etwas drunter vorstellen kann. [...] Also wir, wir charakterisieren hier einen Zustand mit sehr kleinen Größen, der aber eigentlich recht große Auswirkungen hat." [3]
- SMA: "Das Modell reagiert somit deutlich auf eine Änderung des für den Verspätungsabbau nutzbaren Fahrzeitüberschusses, was sich in schlechteren Werten des Verspätungsverlaufs zeigt. Allerdings zeigt das Modell noch keine Tendenz zum »Kippen«: ein Zustand, bei welchem das Modell eine mangelhafte oder sogar risikobehaftete Betriebsqualität aufweisen würde." (Audit SI-07 S. 7 / Bl. 181)
- Es ist wenig überzeugend, wenn eine Sensitivität noch nicht das "Kippen" des Modells anzeigt. Vielmehr hätte abgeschätzt werden müssen, wie es mit dem "Kippen" aussieht, wenn sämtliche Parameter regelkonform bzw. realistisch angesetzt würden.
- Sensitivitätsbetrachtung ohne Güterverkehr (Doku. Teil 2 S. 132 / Bl. 71 ff):
- SMA: "Ein Betriebsprogramm ohne Güterverkehr ist nicht realistisch. Da dieser Zustand einen fiktiven Fall darstellt, wird er hier nicht detailliert kommentiert." (Audit SI-07 S. 7 / Bl. 181)
- Diese Sensitivität macht wenig Sinn, es sei denn man hätte sich Sorgen gemacht, durch die extrem unseriöse drastische Kappung der Haltezeitverlängerungen im Güterverkehr, dessen Einfluss komplett aus der Simulation entfernt zu haben.
- Sensitivitätsbetrachtung Abfertigungszeiten (Empfehlung in Audit FP-03 S. 7 / Bl. 73), (Darstellung in Audit SI-08 S. 2 / Bl. 187) ....
- ....
- Sensitivitätsbetrachtung eingeengter Auswertezeitraum 7-8 Uhr (Empfehlung in Audit SI-02 S. 4 / Bl. 144).
- SMA: "Die Werte des Verspätungsverlaufs ändern sich in ihrer Höhe deutlich. Allerdings zeigt das Modell auch hier noch keine Tendenz zum »Kippen«, bei welchem das Modell eine mangelhafte resp. risikobehaftete Betriebsqualität zeigt.
- Sensitivitätsbetrachtung Verlängerte S-Bahn-Haltezeit 48 Sekunden (Audit SI-07 S. 7 / Bl. 181, SI-05 S. 6 / Bl. 161, SI-08 S. 9 / Bl. 194).
- SMA: "Die Ergebnisse zeigen, dass sich das S-Bahn-System mit diesen Annahmen im Bereich der Stammstrecke in einem kritischen Bereich befindet. Eine weitere Anspannung der Situation durch Haltezeitverlängerungen oder Reduzierung der Zuschläge könnte zu einem »Kippen« des Systems führen. Wo diese Grenze liegt, ist jedoch nicht bekannt und auch nicht Gegenstand der vorliegenden Simulation." (Audit SI-07 S. 8 / Bl. 182)
- Die gemessenen Haltezeiten der S-Bahn heute liegen bei 53 (?) Sekunden (.... überprüfen, Quelle). Hier so vorschnell die Analyse zu beenden, heißt, beide Augen zuzudrücken. ....
- SMA: "Bei der S-Bahn führt die Verlängerung der Haltezeiten in Stuttgart tief um 18 Sekunden zu einem Verspätungszuwachs in diesem Bereich von etwa 30 Sekunden pro Zug."
- Das ist ein absolut dramatischer Verspätungszuwachs! ....
- Sensitivitätsbetrachtung Datenmodell 15. Juli (Audit SI-08 S. 1 / Bl. 186)
- SMA: "Mit diesen neuen Prämissen ist eine leicht sinkende Betriebsqualität zu beobachten. Das Modell bleibt jedoch stabil und befindet sich noch deutlich unter der Grenze zu Instabilität. Hinzu kommt, dass der erforderlich Verspätungszuwachs zum Erreichen risikobehafteter Betriebsqualität deutlich höher ist, als der Zuwachs vom Ursprungsmodell zur Sensitivitätsanalyse. Der Zuwachs vom Grundmodell zur Sensitivitätsanalyse betrug je nach Vergleichsbetriebsstellen etwa 5 Sekunden. Es wäre jedoch ein weiterer Zuwachs von 20 Sekunden erforderlich bis zum Erreichen der Grenze der risikobehafteteten Betriebsqualität." (Audit SI-08 S. 14 / Bl. 199)
- Hier unterliegt die SMA dem gängigen Missverständnis, für die Betriebsqualität wäre von Einbruch zu Ausbruch ein Verspätungszuwachs von 1 Minute als Qualitätsgrenze festgelegt. Das ist nicht der Fall, allein für Teilstrecken und Bahnhofsköpfe existieren (vorläufige) Grenzwerte. Für den gesamten Auswerteraum gibt die Richtlinie lediglich eine qualitative Einstufung. (.... Quellen, Links)
- Diese Sensitivität adressiert außerdem nicht alle nötigen Korrekturen ....
- Der "Finale Simulationslauf" (Doku. FS, Audit FS, Anpassungen FS) ist die letzte der unseligen Sensitivitäten und liefert genausowenig einen Nachweis für die Leistungsfähigkeit von Stuttgart 21, wie die vorausgegangenen.
- Erst die Berücksichtigung sämtlicher Korrekturen auf realitätsnahe Parameter und eine volle Simulation über 100 Tage würde einen Nachweis liefern können. Die Sensitivitäten von Einzelparametern sind ohne jede Beweiskraft.
Die SMA abschließend zu den Sensitivitäten:
- "Die Sensitivitätsbetrachtungen zeigen den Einfluss der Eingangsprämissen auf die Resultate der Simulation. Es lässt sich jedoch feststellen, dass die damit erzielbaren Qualitätsmerkmale des SPV im Betrachtungsraum nicht grundlegend ändern und eine gewisse Stabilität aufweisen." (SI-07 S. 10 / Bl. 184)
Mehrere Sensitivitäten zeigten "deutliche" Verschlechterungen, teilweise bis nahe ans Kippen des Systems. Hier ohne Attribut nur von "Einfluss" zu sprechen ist Schönfärberei. Die einzelnen Korrekturen waren zumeist nur ein Teilschritt in der Annäherung an einen wirklich realistischen Parameter. Und nachdem man bei so vielen einzelnen 'Trippelschritten' dem Kollaps des Systems schon so nahe kam, ist es der Gipfel der Irrationalität, nicht zu fragen, was die Korrektur aller Fehler in Richtung realistische Werte bedeuten würde. Es müsste eine sehr vertiefte Bewertung folgen, um den eigentlich sicher erscheinden Schluss, dass alle Korrekturen gemeinsam den sicheren Kollaps bedeuten, ausschließen zu können. Dass hier die Analyse endete ist vielsagend.
Bei der Vielzahl der im Stresstest vorliegenden Fehler und der hohen Nichtlinearität der Problemstellung ist das wiederholte Adressieren durch einzelne Sensitivitäten, die jeweils andere Aspekte beleuchten, absolut untragbar. Die Richtlinie schreibt 100 simulierte Tage vor, um eine ausreichende statistische Basis für eine gültige Aussage zu erhalten. Die SMA ist soweit mit der Materie vertraut, dass sie diese grundsätzlichen Fehler sicher kennt, sie aber doch sehenden Auges begeht. Für die Öffentlichkeit entsteht der Eindruck, hier wäre einer berechtigten Sorge korrekt nachgegangen worden, was mitnichten der Fall ist.
Gekappte Haltezeitverlängerungen dargestellt aber nicht besprochen
Dass die SMA die Kappung der Haltezeitverlängerungen zwar im Audit darstellt und sie nicht beschreibt, ist nicht plausibel. Wenn in dem zentralen Element der Simulation, den stochastischen Verspätungswerten, ein neuer vierter Parameter auftaucht, so müsste seine Verwendung, die Wahl des Wertes und seine Auswirkung unbedingt geprüft werden. In der von SMA erstellten Tabelle werden Maximalwerte angegeben, die nahe an und sogar unter den gewünschten Mittelwerten liegen, – da hätte jeder Auditor hellhörig werden müssen.
Die SMA hatte mehrfach Gelegenheit dazu, auf das Thema aufmerksam zu werden. Nicht nur beim Erstellen der Tabelle, auch der extrem auffällige Wert der Güterzüge nachgetragen werden musste[4]. Außerdem wurde im Fragenkatalog der Kritiker in den Prämissengesprächen ausdrücklich nach der Behandlung und Wirkung der Verspätungsspitzen gefragt. Bei so viel Übersehenem bei einer zentralen Manipulation des Stresstests drängt sich der Eindruck auf, dass hier beide Augen zugedrückt wurden.
Die SMA schreibt nicht einfach bei der Zitierung der Haltzeitverlängerung folgende
- "Grundlage bildet die Richtlinie 405.0204A03. Die folgende Tabelle zeigt Näherungswerte für Urverspätungen als Haltezeitverlängerungen:"
Fehlende Flanken der Spitzenstunde
Die SMA wies per Schema im Audit auf die Bedeutung einer realistische "Flanken" vor und nach der Spitzenstunde hin (Audit SI-02 S. 2 / Bl. 142). Dass aber im Stresstest rechts und links von der Spitzenstunde nur Grundtaktverkehr simuliert wird (siehe Folgeseite im Audit!) hat die SMA nicht besprochen und vollkommen inkonsequent in keiner Weise bewertet.
Weitere Inkonsequenzen
- Der Fehler durch den unzulässigen Verspätungsabbau in den Einbruchsbahnhöfen wird zwar benannt, aber seine Behebung in folgenden Sensitivitäten bzw. dem Finalen Simulationslauf nicht eingefordert. (Audit SI-07 S. 5 / Bl. 179)
Verdeckende Kritik
Unvollständige Abschlussdokumentation
Die SMA kritisiert die unvollständige Abschlussdokumentation:
- "Der Bericht 'Stresstest Stuttgart 21 – Fahrplanrobustheitsprüfung' der DB Netz AG vom 30. Juni ist nicht selbsterklärend, weist teilweise inhaltliche Mängel auf und bietet keine vollständige Dokumentation der durchgeführten Arbeiten." (Audit SI-07 S. 10 / Bl. 184)
Abgesehen davon, dass nicht nachvollziehbar ist, wie die SMA nach einer solchen Aussage und auf der Basis einer solchen Ausgangsdatenlage überhaupt in der Lage war zu testieren, erscheint es zudem unfair der Bahn gegenüber sowie als ein grober handwerklicher Fehler, dass die SMA einen solchen schweren Vorwurf nicht im Einzelnen mit den konkreten Mängeln belegt. Tatsächlich ist dies sehr von Vorteil für die Bahn, denn die Nennung der Abschlussdokumentation nicht nachvollziehbar|einzelnen Lücken in der Abschlussdokumentation würde den Umfang der Informationszurückhaltung gegenüber der Öffentlichkeit und die Systematik der Täuschung deutlich machen.
Letztlich nutzt es hier der Bahn extrem, dass die SMA ihre Kritik nicht begründet. Es erscheint unwahrscheinlich, dass ein solch gravierender handwerklicher Fehler sich zufällig den SMA-Kontrollen im Redaktionsprozess entzog und sich dabei zufällig so vorteilhaft für die Bahn auswirkt. Die Rüge der SMA antwortet proforma auf die entsprechende Kritik aus den Prämissengesprächen. Indem sie aber mehr verschweigt als benennt hat sie eine überwiegend verdeckende Wirkung.
Schein-Argumentationen zugunsten der Bahn
Störfälle nicht definierbar
Die SMA schreibt, es wäre nicht möglich, charakteristische Störfälle zu definieren:
- "Für schwere Störfälle, d.h. mit einer Stördauer von mehr als einigen Minuten, ist es nicht zuverlässig möglich, für den zukünftigen Bahnhof charakteristische Störfalle zu definieren und die dazugehörigen Verspätungsdauern und Auftretenswahrscheinlichkeiten zu entwickeln. Darüber hinaus ist es nahezu unmöglich, für das gesamte Netz im Untersuchungsraum die geeigneten Störfälle und Orte zu definieren. Es ist daher das übliche Vorgehen, die Robustheit des Fahrplans anhand von kleinen, stochastischen Störungen zu untersuchen." (Audit Si-02 S. 4 / Bl. 144)
Hiermit verteidigt die SMA eine zentrale Schwäche des Stresstests, das Fehlen von Stör- und Notfällen, mit einer Schutzbehauptung. Störfälle sind für einen Stresstest essentiell und ihre ersatzweise Berücksichtigung durch verlängerte Urverspätungen ist von der Richtlinie vorgegeben, so dass die SMA hier sogar gegen die Richtlinie argumentiert:
- "Die Modellierung der Ausfälle oder Teilverfügbarkeiten von Infrastrukturelementen muss bisher ersatzweise durch Erhöhung der zugbezogenen Parameter für Urverspätungen erfolgen." (Richtlinie 405.0206 S. 11 / Bl. 251)
Außerdem schreiben dies auch die Passagen der Richtlinie zur Anpassung der Simulation entsprechend der Aufgabenstellung vor, das bedeutet hier die Durchführung eines echten Stresstests mit entsprechenden Anpassungen in den Parametern.
Typische Störfälle sind beispielsweise:
- Die häufigen Suizide an Bahnhöfen (in Deutschland rund 750 mal im Jahr, 250 mal innerhalb von Bahnhöfen[5]) führen oft zur Sperrung eines oder mehrerer Gleise für rund zwei Stunden (Notarzteinsatz, Spurensicherung, Staatsanwaltschaft). Über die Bedeutung und die Parameter dieses Szenarios bestand auch in den Prämissengesprächen Einigkeit.
- Relativ häufig treten auch technische Störungen beim Wiederanfahren eines Zuges auf. Züge bleiben dann rund 30 Minuten bis über eine Stunde im Bahnhof liegen.
- Ganz abgesehen von den allfälligen Signalstörungen, Weichenstörungen etc.
Wenn hierfür keine dazugehörigen Verspätungsdauern und Auftretenswahrscheinlichkeiten zu "entwickeln" sind, dann auch nicht für Haltezeitverlängerungen und Einbruchsverspätungen. Die Bahn besitzt ausreichend statistische Daten für eine solche Simulation, wie die detaillierte Verspätungsauswertung in der Richtlinie zeigt (405.0205A01 S. 8 / Bl. 238), sowie die eigene Richtlinie zur Erstellung der entsprechenden Verspätungsauwertungen (405.0206 S. 1 / Bl. 241 ff) für die beispielsweise aus dem System LEIDIS offenbar umfassende Daten zur Verfügung stehen. Selbst für jeden Internet-Nutzer lassen sie sich aus den elektronischen Ankunfts- und Abfahrtstafeln[6] gewinnen, wie es für einige Darstellungen in diesem Portal gemacht wurde.
Die Simulationssoftware ist zweifellos zur Verarbeitung solcher Fälle in der Lage. Die im Modell abgebildeten stochastischen Störungen beinhalten zum Beispiel auch bei der Haltezeitverlängerung "Ausreißer" mit relativ langer Zusatzverspätung von mehreren Minuten. Es ist also nur eine Frage der Parameterwahl, hin und wieder einen Zug auch mal 30 Minuten (technische Störung) oder 120 Minuten (Suizid) im Bahnhof stehen zu lassen. Hier ist die von der Bahn im Stresstest vorgenommene 'Deckelung' der Verspätungswerte in einem Umfang, der die Mittelwerte deutlich reduziert, als absolut unzulässige Manipulation zu sehen.
Eine solche spezifische Modellierung einer spezifischen Verspätungssituation kann offenbar problemlos in das System integriert werden, wie am Beispiel der "Gesonderten Ur- und Einbruchsverspätungen" in Marbach und Bondorf geschehen (Audit SI-08 S. 9 / Bl. 194). In gleicher Weise könnten auch die für den achtgleisigen Tiefbahnhof so kritischen Szenarien "Suizid" und "Technische Störung am Zug" bspw. durch testweise auf 120 bzw. 30 Min. heraufgesetzte Haltezeitverlängerungen im Hauptbahnhof simuliert werden.
Nachdem genau diese Anpassungen auf Anregung der SMA geschahen, aus einer durchaus gleichwertigen Argumentation heraus, wie sie die Simulation der typischen Störungsszenarien im Hauptbahnhof begründen würde, argumenteirt die SMA unaufrichtig, mit zweierlei Maß. Kleine Korrekturen ja, Stresstest-Korrekturen mit echten Störungsszenarien nein.
Entscheidung im Lenkungskreis von April ....
Unzureichende Urverspätungen
"Die Abbildung der Urverspätungen über Verlängerung der Haltezeiten ist ein übliches und international anerkanntes Verfahren, das auch hier angewendet werden kann" (Audit SI-05 S. 14 / Bl. 169). Diese darüber hinaus vollkommen unbelegte Aussage ist manipulativ, da die Methode als übliches Verfahren bestätigt wird, aber nicht hinterfragt wird, ob die Urverspätungen in ausreichender Höhe berücksichtigt sind.
Unzulässige Nutzung der Bauzuschläge und vollen Fahrzeitreserven
Statt Hinweis auf die Unzulässigkeit der Verwendung von 100% der Reserven zum Verspätungsabbau hinzuweisen wird verharmlosend formuliert:
- "Die Reserven, die zum Verspätungsabbau genutzt werden können, sind eher hoch." (Audit FP-05 S. 1 ff / Bl. 80 ff)
....
Verspätungsabbau im Einbruchsbahnhof
Die SMA hat den Fehler, dass entgegen der Richtlinie die Haltezeitverkürzung im Einbruchsbahnhof von dem Verspätungsabbau abgezogen wird, zwar benannt, ihn aber nicht konsequent bewertet sondern vielmehr schöngeredet:
- "Es ist zu bemerken, dass für die Bestimmung der Betriebsqualität die Ankunft an der Einbruchsbetriebstelle herangezogen wird. Dies entspricht nicht der Forderung gemäß „Steckbrief SI-05 Ur- und Einbruchsverspätungen“, dass die Abfahrt an der Einbruchsbetriebstelle zu verwenden ist (der absolute Unterschied beträgt bloss 1 Sekunde, weitere Effekte im Zulauf nach Stuttgart Hbf sind nicht abgeschätzt)." (Audit SI-07 S. 5 / Bl. 179)
Es wird nicht klar gesagt, auf welche Größe sich die "1 Sekunde" bezieht. Auf den Gesamtverspätungsaufbau, d.h. den mittleren Verspätungsabbau im Zulauf aller Züge? Dann wäre die Sekunde nicht vernachlässigbar (in der Grundversion würde der Fehler gegenüber den 8 Sekunden 12,5 % Fehler ausmachen). Allerdings erscheint der Mittelwert von 1 Sekunde unglaubwürdig. Immerhin weisen einige Bahnhöfe Reduktionen des mittleren Verspätungsniveaus von über 1 Minute auf (.... Quelle oder Link). Der genaue Fehler ist aufgrund der unvollständigen Liniendarstellungen in der Stresstest-Dokumentation nicht rekonstruierbar.
Auch wird nicht gesagt, wie die 1 Sekunde ausgewertet wurde, auch hier fehlt die Quelle bzw. die Begründung. Darüber hinaus ist bemerkenswert, dass die SMA nicht auf Korrektur dieses Fehlers dringt bei der Durchführung der Sensitivitätsrechnungen. Auch die Nachsimulation beinhaltet diesen Fehler unkorrigiert (Doku. FS S. 5).
Schönfärberische Formulierungen
- "Die Sensitivitätsbetrachtungen zeigen den Einfluss der Eingangsprämissen auf die Resultate der Simulation. Es lässt sich jedoch feststellen, dass die damit erzielbaren Qualitätsmerkmale des SPV im Betrachtungsraum nicht grundlegend ändern und eine gewisse Stabilität aufweisen." (SI-07 S. 10 / Bl. 184)
- Hier nur von "Einfluss" zu sprechen, nachdem praktische jede einzelne Sensitivität einen "deutlichen" Einfluss bis nahe hin an das "Kippen" des Systems zeigte und die Summe der Sensitivitäten den praktisch sicheren Kollaps des Systems erwarten lässt, ist ein ausgesprochener Euphemismus.
- ....
Handwerkliche Fehler
Dass es bei der Auditierung eines derart komplexen Prozesses wie des Stresstests zu Stuttgart 21 auch zu handwerklichen Fehlern kommt, ist zu erwarten, angesichts des Zeitdrucks, der Unvollständigkeit der Informationen der Bahn AG und den späten Nachbesserungen. Es fällt aber auf, dass die handwerklichen Fehler einer Systematik folgen. Es wurden ausschließlich Punkte übersehen oder übergangen, die kritisch für ein Bestehen des Stresstests waren. Es wurde dagegen bisher kein Fall gefunden, dass die SMA an irgendeiner Stelle überhöhte Ansprüche an den Stresstest angelegt hätte.
Hier bei den handwerklichen Mängeln ist ein Mechnismus vorstellbar, der die SMA geringfügig von ihrer Mitschuld entlastet. Es ist denkbar, dass die Bahn in der Abstimmung mit den Auditor sämtliche Fehler des Auditors, die zu ihren Lasten ging, korrigierte, die anderen aber nicht. Dieses denkbare Szenario vermag natürlich nicht die anderen Kritikpunkte an der Arbeit der SMA zu entkräften. Inkonsequenz, verdeckende Kritik und das Schönreden von Mängeln erfordern eine erhebliche Mitverantwortung des Auditors.
Auslassungen und übersehene Punkte
Die SMA hat mehrere Mängel des Stresstests übersehen, ihre Argumentation ist an mehreren Stellen auffallend lückenhaft auch auch werden immer wieder wesentliche Aspekte der Simulation und ihrer Bewertung verschwiegen. In einigen Fällen besteht der Eindruck, dass die Umstände dieser Versäumnisse die Grenze von der Fahrlässigkeit zur bewussten Auslassung überschreiten.
- Alte Definition der "guten Betriebsqualität": Es ist zwar präzise, wenn im Audit steht: "Der Begriff »gute Betriebsqualität« kommt in keinem bestehenden Regelwerk vor." Aber es ist unredlich, zu verschweigen, dass bis 2008 diese Stufe der Betriebsqualität sehr wohl definiert war[7] und auch dem Projekt Stuttgart 21 bspw. vor dem Verwaltungsgericht zugrunde gelegt worden war. Dies dient mutmaßlich zur Verdeckung des Umstands, dass dieser Qualitätsstufe heute "Premium" entsprechen würde. Das Verschweigen dieser klaren Sachlage erscheint absolut absichtsvoll und wiegt besonders schwer, da in den Prämissengesprächen vor dem Auditor ausführlich über diese frühere und vor dem VGH relevante Definition diskutiert wurde.
- Stresstest auf Basis ungültiger Prozessbeschreibung: Die Bahn hatte angegeben, beim Stresstest gemäß Prozess "'Fahrplanrobustheitsprüfung (FRP) durchführen' (LN34-07-01-03)" verfahren zu haben (Doku Teil 1 S. 2). Die SMA prüfte weder, ob diese Prozessbeschreibung gültig war, noch ob sie oder die gültige Fassung eingehalten wurde. So wurde auch übersehen, dass die Prüfung von Infrastrukturvarianten nicht gemäß der zur Zeit der Stresstest-Erstellung gültigen Prozessbeschreibung erfolgt war. Allein dieser Punkt würde ein Testat ausschließen.
- Belegungsgrade: Die SMA hat die laut Richtlinie zwingende Ermittlung und Darstellung der Belegungsgrade übersehen. Es erscheint schwer nachvollziehbar, wie die SMA bei ihrer Expertise in dem Feld ausgerechnet bei diesem Projekt diese grundlegendste Kennzahl der Kapazitätsplanung übersehen konnte.
- Mittelung der Betriebsqualität über 4 Stunden: Während die SMA die fehlenden Flanken in der Modellierung der Spitzenstunde hätte bemerken müssen, da sie Anforderung und die Nicht-Realisierung auf Folgeseiten im Audit gegenüberstellte, aber inkonsequenterweise die Diskrepanz nicht betrachtete, hat die SMA den zweiten Aspekt der Mittelung über die 4 Stunden zumindest übersehen, wenn nicht übergangen. Der mit rund 13 % quantitativ größte Effekt in der Reduzierung des Stresses im Stresstest wird so von der SMA in der Folge kleingeredet, indem die Betrachtung der alleinigen Spitzenstunde als "fachlich fraglich" dargestellt wird.
- Falsche Grenzwerte für die Betriebsqualität: Die SMA übernahm die unkorrekte Grenzwert-Festlegung für die Betriebsqualität offenbar ohne kritische Prüfung von der Bahn inklusive aller Fehler (Audit SI-07 S. 2 / Bl. 176). Das ging nur, wenn diese Definition nicht anhand der Richtlinie überprüft wurden, denn die Abweichungen springen ins Auge.
- ....
Mangelnde bzw. freihändige Begründungen
- Testat, obwohl nicht alle Fehler beseitigt: Die Aussage zur Erteilung des Testats, obwohl nicht alle Fehler im Modell beseitigt wurden entbehrt jeder nachvollziehbaren Begründung und erscheint als haltlose Behauptung: "Auch nach den Zusatz-Überprüfungen bleiben eine Anzahl Unstimmigkeiten im Simulationsmodell bestehen. Sie sind nach unserer Einschätzung in einer Größenordnung, die das Gesamtresultat zwar zahlenmäßig etwas verändern, ohne dass jedoch die Resultateinstufung aus dem Bereich »wirtschaftlich optimal« herausfällt."
- Es wird auch an anderer Stelle keine qualifizierte Abschätzung zur Größenordnung der Fehler gegeben (.... nochmal überprüfen), so dass diese Behauptung haltlos ist. Es gibt keinerlei Beleg, dass ausgeschlossen werden kann, dass "wirtschaftlich optimal" gehalten wird.
- Die Formulierung "zahlenmäßig etwas verändern" ist ein weiterer Fall von Schönreden zugunsten der Bahn, so als könnten sich einzelne Korrekturen auch positiv auswirken. Alle Korrekturen führen zu einer Verschlechterung der Qualität und der Leistung.
- Die Empfehlung einer Nachsimulation ist untauglich zum Nachweis der Leistungsfähigkeit, da
- Unvollständige Abschlussdokumentation: Die SMA meldet schwere Kritik an der Stresstest-Dokumentation an:
- "Der Bericht 'Stresstest Stuttgart 21 – Fahrplanrobustheitsprüfung' der DB Netz AG vom 30. Juni ist nicht selbsterklärend, weist teilweise inhaltliche Mängel auf und bietet keine vollständige Dokumentation der durchgeführten Arbeiten." (Audit SI-07 S. 10 / Bl. 184)
- Abgesehen davon, dass nicht nachvollziehbar ist, wie die SMA nach einer solchen Aussage und auf der Basis einer solchen Ausgangsdatenlage überhaupt in der Lage war, zu testieren, ist aber insbesondere inakzeptabel, dass die SMA einen solchen schweren Vorwurf nicht im Einzelnen mit den konkreten Mängeln belegt. Als Pauschalvorwurf ist diese Aussage zwar ungerecht gegenüber der Bahn, das Verschweigen der Detailkritik erspart der Bahn aber mutmaßlich weitaus härtere Kritik in der Öffentlichkeit.
- Testat wirtschaftlich optimal statt Premium: Die SMA erteilt das Testat "wirtschaftlich optimal" (Audit Schlussbericht S. 7 / Bl. 13) hatte aber hinten im Audit festgestellt:
- "Aus der Abbildung ist erkennbar, dass bei Anwendung der in RiL 405 definierten Kategorien der Betriebsqualität das Qualitätsmerkmal »Premiumqualität« erzielt wird: die mittlere Verspätung aller Züge lässt sich im Betrachtungsraum um 29 Sekunden abbauen." (Audit SI-07 S. 4 / Bl. 178)
- Im Weiteren sprach die SMA nur noch von zusätzlichen Qualitätschecks bezüglich der Zu- und Ablaufstrecken. Warum nicht "Premium" testiert wurde, wird an keiner Stelle des Audits dargelegt. Dies führte in der Stresstest-Präsentation zu viel Verwirrung und einer langen Diskussion.[8]
- ....
Unklare oder wertlose Aussagen
Unpräzise oder fehlende Quellenangaben
Folgende durchaus wichtige Aussagen haben ohne jeden Beleg also ohne Quellenangabe nur den Gehalt einer reinen Behauptung. Dies entspricht nicht einem wissenschaftlichen Vorgehen, bzw. dem Anspruch eines Audits an Nachvollziehbarkeit und Geschlossenheit der Argumentation.
- "Unter einem korrekten Einbrechen versteht man: [...]" (Audit IN-01 S. 3 / Bl. 22)
- "Die Abbildung der Urverspätungen über Verlängerung der Haltezeiten ist ein übliches und international anerkanntes Verfahren, das auch hier angewendet werden kann." (Audit SI-05 S. 14 / Bl. 169). Ohne jeden Beleg ist das eine bloße Behauptung. Außerdem ist dies eine Schein-Argumentation zugunsten der Bahn, da die verwendeten Standardwerte der Richtlinie unrealistisch günstig sind.
- Z.B. Mindesthaltezeiten (überprüfen) ....
- Der Fehler durch den unzulässigen Verspätungsabbau in den Einbruchsbahnhöfen wird mit 1 Sekunde angegeben, ohne zu nennen, auf welche Größe sich die Sekunde bezieht, aus welcher Quelle dieser Wert stammt bzw. wie er ausgewertet wurde. (Audit SI-07 S. 5 / Bl. 179)
- Etc. ....
Fazit
Die Systematik der handwerklichen Fehler in der Auditierung, die sämtlich ein "Bestehen" des Stresstests erleichtern, aber insbesondere das Übersehen der gravierendsten Mängel trotz mehrfachen Hinweises, das Schönreden gravierender Regelverstöße oder unrealistischer Annahmen für Prämissen des Stresstests, legen den Verdacht nahe, die Auditierung sei nur ein Gefälligkeitsgutachten für den Auftraggeber und Großkunden der SMA, die Deutsche Bahn AG. Gerade bei den größten Mängeln im Stresstest, ist erkennbar, dass der Auditor grundsätzlich die Problematik hätte erkennen können bzw. müssen, aber dann aus irgendwelchen Gründen doch beide Augen zudrückte:
- Dokumentation nicht nachvollziehbar ....
- Keine vollständige Simulation mit korrekten Parametern ....
- Bahn-Richtlinien nicht eingehalten ....
- Analyse noch nicht abgeschlossen ....
- Die Kappung der Haltezeitverlängerungen wird von der SMA dargestellt, aber unverständlicherweise in keiner Weise untersucht.
- Die unrealistische Spitzenstunde blieb unkommentiert.
- Gute Betriebsqualität ....
- Sensitivitäten, Finaler Simulationslauf ohne jede Beweiskraft ....
- Insbesondere das systematische Ausblenden der kritischen Prüfung der Eingangsgrößen ....
- ....
Es erscheint angesichts der Expertise und des Ansehens der SMA ausgesprochen unwahrscheinlich, dass der Auditor immer wenn es kritisch wurde einen plötzlichen Anfall von Minderleistung erlitt, der dann auch bei allen Überprüfungen im Team unerkannt blieb. Es muss daher davon ausgegangen werden, dass sich der Druck, dem die SMA seitens ihres Auftraggebers und Großkunden ausgesetzt war, sich in den vielfältigen Mängeln des Stresstests niederschlug. Das erteilte Testat ist weder vom Umfang des Auftrags noch von den Feststellungen der SMA im Audit selbst gedeckt. Darüber hinaus sind die Mängel im Audit so umfassend, wesentliche Argumentationen wurden unsauber geführt oder blieben unbelegt, dargestellte kritische Daten wurden inkonsequenterweise nicht bewertet, wesentliche Punkte wurden übersehen oder übergangen, kurzum die Standards einer nachvollziehbaren wissenschaftlich technischen Arbeit wurden nicht eingehalten. Das Testat hat keinerlei Bestand, die SMA hat ihren Ruf mit dieser Arbeit schwer beschädigt. Sollten andere Arbeiten dieser Firma ähnlich von den Wünschen der Auftraggeber bestimmt sein, müssten wohl einige der Untersuchungen noch einmal auf den Prüfstand vor unabhängigeren Gutachtern kommen.
Angesichts dieser Bilanz hinterlassen die Aussagen der SMA, sie wolle ihre "Objektivität und Neutralität" gewährleistet sehen, oder die von Ministerpräsident Kretschmann, der das Audit als "seriös" "akzeptierte" (siehe oben) einen schalen Beigeschmack. Insbesondere scheint die SMA das Ziel ihres Angebots nicht erreicht zu haben:
- "Am Ende der Schlichtungsgespräche zum Projekt Stuttgart 21 haben sich Befürworter und Gegner darauf verständigt, einen von der DB Netz AG durchzuführenden Stresstest von SMA und Partner AG prüfen zu lassen. Die SMA und Partner AG wird alles daran setzen, diese Aufgabe zu erfüllen und damit einen Beitrag in Richtung einer glaubwürdigen und transparenten Darstellung des Projektes zu leisten." (Angebot SMA Vorwort S. 1 / Bl. 5)
Einzelnachweise
In Klammern gesetzte (Quellenangaben) ohne Fußnote beziehen sich auf wesentliche Unterlagen zum Stresstest, die im Hauptartikel unter "Dokumente" aufgeführt sind.
- ↑ 23.07.2011, stuttgarter-zeitung.de, "Der Bau wird wahrscheinlicher"
- ↑ Siehe auch: Angebot SMA Vorwort S. 5 / Bl. 9: "Neutralität und Objektivität sind das übergeordnete Ziel der Prüfungsauftraggeber, um ihre Glaubwürdigkeit bei allen Interessenvertretern gewähren zu können." Auch dieser Satz macht das Anliegen der SMA nicht viel klarer. Auf jeden Fall wird deutlich, dass die SMA um ihre Neutralität und Objektivität besorgt ist.
- ↑ 29.07.2011, Stresstest-Präsentation, 13:54 Uhr, Werner Stohler
- ↑ Dies ist zusätzlich daran kenntlich, dass im Unterschied zu den anderen Werten bei dem nachgetragenen Wert "max." mit Abkürzungspunkt eingetragen ist.
- ↑ [http://de.wikipedia.org/wiki/Schienensuizid de.wikipedia.org Schienensuizid
- ↑ [reiseauskunft.bahn.de/bin/bhftafel.exe]
- ↑ 29.07.2011, Stresstest-Präsentation, 14:57 Uhr, Boris Palmer
- ↑ 29.07.2011, Stresstest-Präsentation, 16:51 Uhr bis ... Uhr, sowie auch schon vereinzelt zuvor.