Delphi-Methode

Die Delphi-Methode (auch Delphi-Studie, Delphi-Verfahren oder Delphi-Befragung genannt) ist ein systematisches, mehrstufiges Befragungsverfahren mit Rückkopplung und ist eine Schätzmethode, die dazu dient, zukünftige Ereignisse, Trends, technische Entwicklungen und dergleichen möglichst gut einschätzen zu können.

Namensgeber der Methode ist das antike Orakel von Delphi, das seinen Zuhörern Ratschläge für die Zukunft erteilte.

Geschichte

Die Delphi-Methode wurde – nach Vorarbeiten Ende der 1950er Jahre – von der amerikanischen RAND-Corporation 1963 entwickelt und wird seitdem häufig, wenn auch in variierter Form, für die Ermittlung von Prognosen/Trends sowie für andere Meinungsbildungen im Rahmen von Systemaufgaben angewendet. Mehr und mehr hat sich das Verfahren zu einem Bewertungsverfahren für Themen entwickelt, in dem festgestellt werden kann, ob es einen Konsens über das Thema gibt (bzw. ob dieser erreicht werden kann) oder nicht. In Deutschland war es in den 90er Jahren das damalige Bundesministerium für Forschung und Technologie (BMFT), das die ersten Delphi-Studien zur Entwicklung von Wissenschaft und Technik in Auftrag gab. Die Studien Deutscher Delphi-Bericht zur Entwicklung von Wissenschaft und Technik (1993) und Delphi '98 Umfrage. Zukunft nachgefragt. Studie zur globalen Entwicklung von Wissenschaft und Technik (1998) wurden vom Fraunhofer-Institut für System- und Innovationsforschung (ISI) durchgeführt. Die Aussagekraft der Ergebnisse von Delphi-Studien hält sich jedoch in Grenzen. Typisch sind die sehr allgemeinen Aussagen auf Metalevel (Bsp: 'Zukunftsfähige Energielösungen werden an Bedeutung zunehmen')

Vorgehensweise

Bei einer Delphi-Befragung wird einer Gruppe von Experten ein Fragen- oder Thesenkatalog des betreffenden Fachgebiets vorgelegt. Die Befragten haben in zwei oder mehr sogenannten Runden die Möglichkeit, die Thesen einzuschätzen. Ab der zweiten Runde wird Feedback gegeben, wie andere Experten geantwortet haben, in der Regel anonym. Auf diese Weise wird versucht, der üblichen Gruppendynamik mit sehr dominanten Personen entgegenzuwirken.

Die in der ersten Runde schriftlich erhaltenen Antworten, Schätzungen, Ergebnisse etc. werden daher aufgelistet und beispielsweise mit Hilfe einer speziellen Mittelwertbildung, Perzentilen oder Durchschnittswertberechnungen zusammengefasst und den Fachleuten anonymisiert erneut für eine weitere Diskussion, Klärung und Verfeinerung der Schätzungen vorgelegt. Dieser kontrollierte Prozess der Meinungsbildung erfolgt gewöhnlich über mehrere Stufen. Das Endergebnis ist eine aufbereitete Gruppenmeinung, die die Aussagen selbst und Angaben über die Bandbreite vorhandener Meinungen enthält.

Der Meinungsbildungsprozess enthält die Elemente: Generation, Korrektur bzw. teilweise Anpassung oder Verfeinerung, Mittelwertbildung bzw. Grenzwertbildung, oft auch offene Felder für Erläuterungen. Störende Einflüsse werden durch die Anonymisierung, den Zwang zur Schriftform und die Individualisierung eliminiert. Die Strategie der Delphi-Methode besteht aus: Konzentration auf das Wesentliche, mehrstufigem, teilweise rückgekoppeltem Editierprozess und sichereren, umfassenderen Aussagen durch Zulassen statistischer fuzzyartiger Ergebnisse. Ein häufiges Problem besteht darin, dass die Experten ihre einmal geäußerte Meinung in den folgenden Runden trotz Anonymität nicht ändern, sodass der Zusatznutzen weiterer Runden oft klein ist.

Als Ergänzung der Delphi Methode kann z. B. die Cross-Impact-Matrix-Methode verwendet werden. Auch in der D2-Methode finden sich Elemente der Delphi-Methode wieder. Kombinationen mit Szenarien werden inzwischen ebenfalls erprobt. Aus Delphi-Ergebnissen lassen sich einfache Roadmaps ableiten, so dass auch diese Kombination sich zunehmender Beliebtheit erfreut.

Man findet diverse Formen der Delphi-Methode, die das Verfahren der Schätzung etwas variieren: die Standard- und die Breitband-Methode sind einige der Varianten. Inzwischen werden die meisten Verfahren elektronisch durchgeführt. Realtime-Delphi-Verfahren (mit einer sofortigen Rückkopplung der Ergebnisse) sind eine Variante, die nur elektronisch möglich ist.

Standard-Delphi-Methode

Bei der Standard-Delphi-Methode werden mehrere Experten zur Schätzung eines Projektes – oder zur Prognostizierung – herangezogen, die sich nicht untereinander abstimmen dürfen. Der Prozess sieht wie folgt aus:

• Ein Projektleiter bereitet eine Projektbeschreibung vor, in der die einzelnen Teil-Produkte aufgelistet sind und bereitet sie in einem Arbeitsformular vor.
• Der Projektleiter stellt die Ziele des Gesamtprojektes vor und verteilt je ein Exemplar des Arbeitsformulars an jeden Experten. Es findet keine Diskussion der Schätzungen statt.
• Jeder Experte schätzt die im Arbeitsformular enthaltenen Arbeitspakete. Keiner der Experten arbeitet mit einem anderen Experten zusammen.
• Alle Arbeitsformulare werden vom Projektleiter gesammelt und ausgewertet.
• Ergeben sich gravierende Diskrepanzen, so werden diese vom Projektleiter einheitlich auf allen Arbeitsformularen in Bezug auf die Abweichung nach oben oder unten kommentiert. Jedes Arbeitsformular geht anschließend an seinen ursprünglichen Bearbeiter wieder zurück.
• Die Experten überdenken in Abhängigkeit von den Kommentaren ihre Schätzungen.
• Die beschriebene Schleife wiederholt sich so lange, bis sich in den Schätzungen unabhängig voneinander (in einem Toleranzbereich) Konsens einstellt.
• Von allen Schätzungen werden die Mittelwerte errechnet und als finale Schätzung präsentiert.

Das Fehlen jeglicher Diskussionen hat zwei Aspekte, die ein Projektleiter bewerten muss: Einerseits wird damit verhindert, dass sich aufgrund einer ungewollten Gruppendynamik Strömungen und Tendenzen in den Meinungen herausbilden, die unter Umständen gute Schätzungen verhindern. Auf der anderen Seite könnten Gruppendiskussionen dazu beitragen, Defizite im Know-how einzelner Experten und die damit verbundenen Fehleinschätzungen zu vermeiden.

Häufig werden Delphi-Umfragen schriftlich und getrennt durchgeführt, die Fragebogen werden also den Experten per Brief oder Mail gesandt. Die einzelnen Experten sehen sich nie und wissen auch erst nach Abschluss aller Umfragerunden die Namen der anderen Befragten. Dieses Vorgehen ist zuverlässiger als das Versammeln aller Experten in einem Raum. Liegt der Schlussbericht einmal vor, werden in der Regel alle Experten und andere Interessierte zu einem Symposium eingeladen.

Breitband-Delphi-Methode

Bei der Breitband-Delphi-Methode werden mehrere Experten zur Schätzung eines Projektes herangezogen, die sich untereinander abstimmen dürfen. Der Prozess sieht wie folgt aus:

• Ein Projektleiter bereitet eine Projektbeschreibung vor, in der die einzelnen Teil-Produkte aufgelistet sind und bereitet sie in einem Arbeitsformular vor.
• Der Projektleiter stellt die Ziele des Gesamtprojektes vor und verteilt je ein Exemplar des Arbeitsformulars an jeden Experten. Es findet eine Diskussion der Arbeitspakete unter den Experten statt, in der die Sicht der einzelnen Experten den anderen Teilnehmern in Bezug auf das Gesamtprojekt und die Teilaufgaben vermittelt werden.
• Anschließend schätzt jeder Experte die in seinem Arbeitsformular enthaltenen Arbeitspakete. Keiner der Experten arbeitet dabei mit einem anderen Experten zusammen.
• Der Projektleiter fasst die einzelnen Schätzaussagen zusammen, er begründet allerdings die Angaben und Unterschiede nicht. Die Ergebnisse werden an alle Experten verteilt.
• Der Projektleiter beruft ein neues Meeting mit den Experten zusammen und spricht die größten Diskrepanzen in den Schätzungen an. Jedes Arbeitsformular geht anschließend an seinen ursprünglichen Bearbeiter wieder zurück.
• Die Experten überdenken in Abhängigkeit von den angeführten Abweichungen ihre Schätzungen.
• Die beschriebene Schleife wiederholt sich so lange, bis sich in den Schätzungen unabhängig voneinander (in einem Toleranzbereich) Konsens einstellt.
• Von allen Schätzungen werden die Mittelwerte errechnet und als finale Schätzung präsentiert.

Durch die Wechselwirkungen der Experten untereinander werden unterschiedliche Ansichten vermittelt, was eine Konsens-Bildung beschleunigt. Vorteil dieser Methode ist zum einen die Anonymität der Schätzungen: Die Experten werden nicht mit ihren gravierenden Abweichungen der Schätzungen konfrontiert und können damit die Schätzaufwände in ihrem Sinne beeinflussen. Starke Abweichungen von Mittelwerten werden offengelegt. Nachteil dieser Methode ist die Gefahr einer Meinungsbildung durch die Gruppendynamik, in der eine unter Umständen notwendige gravierende Schätzabweichung dem Gruppenzwang unterliegt. Ein weiterer Nachteil ist, dass aufgrund mehrerer Iterations-Schleifen für die Meinungsbildung der gesamte Schätzaufwand recht umfangreich werden kann. Die Breitband-Delphi-Methode ist eine sinnvolle Technik für das Schätzen von großen Projekten, in denen komplexe Architekturen durch eine große Expertenrunde mit Hilfe der Interaktion der Experten untereinander zu realistischen Werten führen kann.

Kritik

Die Delphi-Methode versucht, durch das mehrstufige, manchmal auf Konsens angelegte Design, Fehleinschätzungen der Experten zu reduzieren. Dennoch lassen sich nicht alle Probleme der Expertenbefragung vermeiden; durch die Befragung mehrerer Personen entstehen weitere Einschränkungen.

• Der Hauptkritikpunkt betrifft die Grundannahme, dass Experten über Erkenntnisse verfügen, die über das Normalmaß hinausgehen und dass sich in der Kombination Zukunftswissen generieren lässt. Diese Annahme ist jedoch nicht beweisbar. Viele Expertenaussagen stellten sich später als falsch heraus, beispielsweise der Ausspruch von Thomas J. Watson, dem frühen Chef von IBM, aus dem Jahr 1943: „Ich glaube, es gibt einen Weltmarkt für vielleicht 5 Computer“.
• Zur Auswahl der Experten gibt es keine Kriterien; die Bezeichnung „Experte“ ist rein subjektiv und willkürlich; durch die Auswahl der Teilnehmer erfolgt schon eine Einflussnahme auf das Ergebnis.
• Themen und Thesen müssen zunächst formuliert werden, bevor sie das zweistufige Verfahren durchlaufen können. In manchen Fällen werden die Thesen zwar im Verfahren selbst erarbeitet, in der Regel sind hierzu jedoch weitere Methoden notwendig.
• Die Thesen müssen kurz, prägnant, aber eindeutig formuliert sein. Dies kann ein Vorteil sein, zwingt es doch die Teilnehmer zur Konzentration auf das Wesentliche. Methodisch können aber nur bedingt komplexe Themenstellungen bewertet werden.
• Experten konzentrieren sich per Definition im Wesentlichen auf ihren Fachbereich. Die Interdependenzen mit anderen Entwicklungen, die vor allem bei breit angelegten Studien wichtig sind, werden häufig vernachlässigt oder müssen nachgearbeitet werden.
• Werden relevante Rahmenbedingungen (z. B. soziale Entwicklungen bei der Prognose der technischen Entwicklung der Mobilkommunikation) beachtet, so kann man sich nicht darauf verlassen, dass die Befragten hierfür dieselbe zuverlässige Expertise besitzen wie in ihrem eigentlichen Fachbereich.
• Experten neigen dazu, die Geschwindigkeit von Entwicklungen zu überschätzen. Vor allem die Diffusionsgeschwindigkeit einer Innovation in der Gesellschaft wird schnell überschätzt.
• Bei der Befragung einer Gruppe entsteht eine soziale Situation. Hierbei können durch Autorität, oder auch aufgrund persönlicher Grabenkämpfe, Verzerrungen entstehen. So ist nicht immer klar, ob ein Konsens (oder ein Dissens) tatsächlich nur auf dem intensiven Hinterfragen der eigenen Meinung beruht. Eine Anonymisierung in der Feedback-Runde kann diese Probleme i.A. nicht vollständig vermeiden. Bei der Verwendung von Fragebögen (E-Mail oder postalisch) wird das Delphi-Verfahren explizit dazu genutzt, diese Dominanzen zu umgehen. Bei Präsenzrunden ist dies nur bedingt möglich.

Siehe auch

• Delphi-Effekt
• Cooke-Methode, ähnlich der Delphi-Methode, jedoch werden die Expertenmeinungen mit dem Fähigkeitsgrad der Experten gewichtet, um eine andere Schätzung zu erhalten und um die Gefahr der Tendenz zum Mittelwert auszuschließen.
• Strategische Frühaufklärung
• Zukunftsforschung

Literatur

• Michael Häder (Hrsg.): Delphi-Befragungen. Ein Arbeitsbuch. Westdt. Verlag, Wiesbaden 2002, ISBN 3-531-13748-4.
• Ammon, Ursula. (2005). Delphi-Befragung. Quantitative Organisationsforschung. Qualitative-Research.net, Online-Portal für qualitative Sozialforschung, Freie Universität Berlin. Online verfügbar
• Cuhls, Kerstin; Blind, Knut und Grupp, Hariolf (Hg.) (1998): Delphi '98 Umfrage. Zukunft nachgefragt. Studie zur globalen Entwicklung von Wissenschaft und Technik, Karlsruhe
• Grupp, Hariolf (Hg.) (1995): Der Delphi-Report, unter Mitarbeit von Breiner, Sibyl-le und Cuhls, Kerstin, dva-Verlag, Stuttgart
• Cuhls, Kerstin und Kuwahara, Terutaka (1994): Outlook for Japanese and Ger-man Future Technology, Comparing Technology Forecast Surveys, Physica-Verlag, Heidelberg
• Cuhls, Kerstin: Technikvorausschau in Japan. Ein Rückblick auf 30 Jahre Delphi-Expertenbefragungen, Physica Verlag, Heidelberg 1998 (Dissertation, ursprünglicher Titel: Retrospektive auf 30 Jahre Delphi-Expertenbefragungen)
• von der Gracht, H. A./ Darkow, I.-L.: Scenarios for the Logistics Service Industry: A Delphi-based analysis for 2025. In: International Journal of Production Economics, Vol. 127, No. 1, 2010, 46-59. - Ein Beispiel für wissenschaftlich fundierte Delphibasierte Szenarioentwicklung
• Steinmüller, Karlheinz. (1997): Grundlagen und Methoden der Zukunftsforschung: Szenarien, Delphi, Technikvorausschau. Werkstattbericht 21, SFZ. Online verfügbar bei Freie Universität Berlin, Arbeitsbereich Erziehungswissenschaftliche Zukunftsforschung (PDF)
• Thomas Seeger: Die Delphi-Methode. Expertenbefragungen zwischen Prognose und Gruppenmeinungsbildungsprozessen. Überprüft am Beispiel von Delphi-Befragungen im Gegenstandsbereich Information und Dokumentation. Hochschulverlag, Freiburg i. Br. 1979, ISBN 3-8107-2024-0 (=Dissertation, Freie Universität Berlin).
• USAF Project RAND Report Delphi Assessment: Expert Opinion, Forecasting and Group Process (pdf; 6,0 MB)

Sekundärliteratur zur Delphi-Methode:

Delphi-Studien:

• Cuhls, Kerstin; von Oertzen, Jürgen und Kimpeler, Simone: Future Information Tech-nology for the Health Sector, FAZIT-Schriftenreihe, Stuttgart 2007, www.fazit-forschung.de
• Friedewald, M.; von Oertzen, J.; Cuhls, K. (2007). European Perspectives on the In-formation Society: Delphi Report. EPIS Deliverable 2.3.1. Karlsruhe: Fraunhofer ISI, Brussels: European Techno-Economic Policy Support Network (ETEPS). http://epis.jrc.es/documents/Deliverables/EPIS%202-3-1%20Delphi%20Report.pdf.
• Cuhls, Kerstin; von Oertzen, Jürgen und Kimpeler, Simone: Zukünftige Informations-technologie für den Gesundheitsbereich. Ergebnisse einer Delphi-Befragung, FAZIT-Schriftenreihe, Stuttgart 2007, www.fazit-forschung.de
• Von Oertzen, Jürgen, Cuhls, Kerstin, Kimpeler, Simone: Wie nutzen wir Informations- und Kommunikationstechnologien im Jahr 2020? Ergebnisse einer Delphi-Befragung, FAZIT-Schriftenreihe, Band 3, Stuttgart 2006, www.fazit-forschung.de
• Cuhls, Kerstin; Breiner, Sibylle and Grupp, Hariolf (1995): Delphi-Bericht 1995 zur Entwicklung von Wissenschaft und Technik - Mini-Delphi -, Karlsruhe 1995 (Druck des BMBF, Bonn 1996)
• Cuhls, Kerstin; Blind, Knut und Grupp, Hariolf (Hg.) (1998): Delphi '98 Umfrage. Zukunft nachgefragt. Studie zur globalen Entwicklung von Wissenschaft und Technik, Karlsruhe
• Cuhls, Kerstin; Blind, Knut und Grupp, Hariolf: Innovations for our Future. Delphi '98: New Foresight on Science and Technology. Technology, Innovation and Policy, Series of the Fraunhofer Institute for Systems and Innovation Research ISI no. 13. Physica Heidelberg 2002
• Höller, A.: Das 21. Jahrhundert – Das Problem von Voraussagen durch Delphi-Studien und dynamische langfristige Betrachtung. Kassel 2002
• Keller, A.: Elektronische Zeitschriften im Wandel – eine Delphi-Studie. Wiesbaden 2001
• Krauß-Leichert, U.: Einsatz neuer Technologien im Bibliothekswesen – eine Expertenbefragung. München, K. G. Sauer, 1990
• Linstone, H. A.: The Delphi-Method – Techniques & Applications. Massachusetts 1975
• Rauch, W. und Wersig G.: Delphi-Prognosen in Information und Dokumentation. München 1978
• Ullrich, K. und Wenger, C.: Vision 2017 – Was Menschen morgen bewegt. Heidelberg 2008, ISBN 978-3-636-01582-2
• Wissen, D.: Bibliographie der Zukunft – Zukunft der Bibliographie – eine Expertenbefragung mittels Delphi-Technik in Archiven und Bibliotheken in Deutschland, Österreich und der Schweiz. Berlin 2007

Weblinks

• Hintergrund des BMBF-Foresight-Prozesses
• Foresight-Studien des Forschungsprojekts FAZIT