Das Demokratiebarometer: "basically theory driven"?

Abstract

Das Demokratiebarometer ist einer der neusten Ansätze, um die Qualitätsunterschiede zwischen etablierten Demokratien vergleichend messbar zu machen. Neben positiven Aspekten, wie der Sensibilität was de jure und de facto Indikatoren für Demokratie anbelangt oder der gründlichen Dokumentation von Methodik und verwendeten Daten, zeigen wir in unserer kritischen Diskussion dieses Ansatzes, dass auf den Ebenen der Konzeptualisierung, der Operationalisierung und Messung sowie der Aggregation weiterhin Probleme vorliegen. So geht erstens das Spannungsverhältnis der drei grundlegenden Demokratieprinzipien Freiheit, Gleichheit und Kontrolle im Laufe der Indexbildung verloren, zweitens wird die schrittweise Ausdifferenzierung des Konzeptbaums nicht bis auf die untersten Ebenen sauber durchgeführt, wodurch es zu Fehlanpassungen zwischen Konzept und Operationalisierung kommt, und drittens führt die verwendete Skalierung und Aggregationsregel zu unerwünschten Nebenwirkungen. Auch können die von den Autoren des Demokratiebarometers selbst durchgeführten Validierungsversuche bei genauerer Betrachtung nur bedingt überzeugen.

The Democracy Barometer is a newly established approach towards measuring differences in the democratic quality of widely recognized democracies. Apart from positive aspects like its sensitivity for de jure and de facto indicators of democracy and its thorough documentation, the critical examination reveals problems in terms of conceptualization, operationalization and measurement as well as aggregation of the data. First, the theoretically meaningful tension between the three basic democratic principles of freedom, equality and control vanishes in the course of the index construction. Second, the step-by-step development of the concept tree from its stem towards its leaves remains unclear to some extent, making it prone to possible mismatches between concept and operationalization. Third, the used scaling method and aggregation rule result in unintended side effects. Finally, on close inspection, the attempts of the Democracy Barometer' authors at validating their approach is not entirely convincing.