Applications of meta-analysis in sociology

The term meta-analysis encompasses a class of statistical techniques which aim at synthesizing published empirical outcomes. In 1976, when Glass coined the term meta-analysis, he was referring to outcome statistics like (standardized) mean differences. Over the last 35 years, the application of and research on meta-analysis has been expanded enormously.

While being a popular approach in medicine, psychology or educational sciences, sociological meta-analyses are still a rare phenomenon. At the Research Institute for Sociology of the University of Cologne, however, some efforts have been made to add meta-analysis to the sociological toolkit. Over the years, several meta-analytical projects have been conducted and their findings were published in Germany and internationally. We also have been actively involved in organizing conferences and workshops.

News

• 3/2012: In cooperation with GESIS – Leibniz-Institute for the Social Sciences, Dr. Bernd Weiss and Prof. Dr. Michael Wagner are offering an introductory workshop on meta-analysis in Cologne, Germany, December 13 - 14, 2012. The workshop will be held in German. We are planning to cover not only the usual meta-analysis methods, but also meta-analytical techniques that are appropriate when it comes to outcomes based on non-experimental study designs, e.g. regression results (which is a common outcome type in sociology). We will also have an introduction to individual participant data (IPD) meta-analysis. Finally, we will be using (and shortly introducing) the free software package R for all our tasks. More information can be found on the GESIS website.
• 11/2011: New publication by Bernd Weiß and Michael Wagner: The Identification and Prevention of Publication Bias in the Social Sciences and Economics. Journal of Economics and Statistics (Jahrbuecher fuer Nationaloekonomie und Statistik) 231: 661–684. Link

Research project "Meta-analysis of the determinants of partnership stability"

Wagner, Michael, und Bernd Weiß. 2003. Bilanz der deutschen Scheidungs- forschung. Versuch einer Meta-Analyse [A Meta-Analysis of German Research on Divorce Risks]. Zeitschrift für Soziologie 32: 29-49. Link

Wagner, Michael, und Bernd Weiß. 2004. Die Bilanz der Scheidungsforschung bleibt eine Bilanz. Eine Antwort auf Josef Brüderl [The Review of Divorce Research Remains a Review. A Response to Josef Brüderl]. Zeitschrift für Soziologie 33: 87-89. Link

Wagner, Michael, und Bernd Weiß. 2004. Scheidungsrisiken in Deutschland: Eine Meta-Analyse von empirischen Befunden der Jahre 1987 bis 2003 [Divorce risks in Germany: A meta-analytical review of empirical research from 1987 to 2003]. In Angewandte Soziologie, Hrsg. Robert Kecskes, Michael Wagner, und Christof Wolf, 381-409. Wiesbaden: Verlag für Sozialwissenschaften.

Wagner, Michael, und Bernd Weiß. 2006. On the Variation of divorce risks in Eu- rope: Findings from a meta-analysis of European longitudinal studies. European Sociological Review 22: 483-500. Link

Research project "Causes of unexcused school absenteeism in Germany: An individual person data meta-analysis"

Weiß, Bernd. 2008. Meta-Analyse als Forschungssynthese in der Soziologie. Dargestellt anhand zweier Fallbeispiele zum Schulabsentismus. Inauguraldissertation zur Erlangung des Doktorgrades der Wirtschafts- und Sozialwissenschaftlichen Fakultät der Universität zu Köln.

Research project "City-hinterland-migration in North Rhine-Westphalia - a meta-analysis"

Bleck, Markus, und Michael Wagner. 2006. Stadt-Umland-Wanderung in Nordrhein-Westfalen – eine Meta-Analyse [City-hinterland-migration in North Rhine-Westphalia - a meta-analysis]. Raumforschung und Raumordnung 64: 104–115. Link

Meta-analysis in sociology

Wagner, Michael, und Bernd Weiß. 2006. Meta-Analyse als Methode der Sozialforschung. In Methoden der Sozialforschung, Hrsg. Andreas Diekmann, 479-504. Sonderheft 44 der Kölner Zeitschrift für Soziologie und Sozialpsychologie Wiesbaden: VS-Verlag für Sozialwissenschaften. Link

Weiß, Bernd, und Michael Wagner, 2008: Potentiale und Probleme von Meta- Analysen in der Soziologie [Problems and Opportunities of Meta-Analyses in So- ciology]. Sozialer Fortschritt 10/11: 250–255. Link

Other publications related to meta-analysis

Weiß, Bernd, und Michael Wagner. 2011. The Identification and Prevention of Publication Bias in the Social Sciences and Economics. Journal of Economics and Statistics (Jahrbuecher fuer Nationaloekonomie und Statistik) 231: 661–684. Link

Ongoing research projects and publications

• An application of the caliper test to study the prevalence of publication bias in German social science journals
• How employment status affects partnership stability: A meta-analysis using longitudinal individual person data

Conferences and workshop

Weiß, Bernd, 2010: Yet another short introduction to R with some emphasis on meta-analysis. Half day workshop at Florida State University, Tallahassee, December 8th.

Weiß, Bernd, 2009: Meta-Analyse. Zweitägiger Workshop am Deutschen Jugendinstitut e.V., München, 15./16. Oktober 2009.

"Interdisciplinary Workshop on Meta-Analysis", University of Cologne, October 26th - 27th 2006.

Presentations

Weiß, Bernd, 2011: How employment affects relationship stability: An individual participant data meta-analysis – First ideas about the theoretical foundation, the data preparation and the technical infrastructure. Presentation prepared for a meeting of the FSU Synthesis Research Group, Tallahassee, March 25th, 2011.

Weiß, Bernd, 2010: Using a Combination of Individual and Aggregate Participant Data in Meta-Analysis: A Case Study on the Determinants of Unexcused School Absenteeism. Vortrag auf der Tagung der Arbeitsgemeinschaft Statistik, Dortmund, 23.–26. März 2010.

Weiß, Bernd, 2009: The Prevalence of Unexcused School Absenteeism in Germany: An Individual Participant Data Meta-Analysis. Presentation prepared for The Ninth Annual International Campbell Collaboration Colloquium, Oslo, Norwegen, 18.–20. Mai 2009.

Weiß, Bernd, 2008: What is the best way to perform a meta-analysis in sociology? Presentation prepared for The 7th International Conference on Social Science Methodology, Naples, Italy, September 1–5 2008.

Weiß, Bernd, 2008: A comparison of aggregate and individual person data meta-analyses. Applied to the research on school absenteeism. Presentation prepared for The Eighth Annual International Campbell Collaboration Colloquium, Vancouver, Canada, May 12?14 2008.

Weiß, Bernd, 2008: Soziologische Meta-Analysen: Einführung und Erläuterung der Frage ?Neue Aufgaben und Daten für die GESIS??. Vortrag am Vortrag am GESIS-ZA Zentralarchiv für empirische Sozialforschung, Köln, 14. Juli 2008.

Wagner, Michael, und Bernd Weiß, 2008: Quantitative Forschungssynthesen in der Soziologie: Zwei ~ Beispiele aus der Partnerschafts- und Schulabsentismusforschung. Vortrag am Kölner Max-Planck-Institut für Gesellschaftsforschung, 25. Juni 2008.

Weiß, Bernd: Comparing meta-analyses based on aggregate-level and person-level data: The influence of sex and class repetition on truancy. Paper prepared for "Interdisciplinary Workshop on Meta-Analysis", University of Cologne, October 26th - 27th 2006 (as PDF)

Laukötter, M.G., Hannig, M., Rijcken, E.M. Osada, N., Weiß, B., Brüwer, M., Senninger, N., und C.F. Krieglstein, 2005: Das Morbus Crohn assoziierte Karzinom (MCAC): Eine Metaanalyse. Posterpräsentation im Rahmen des 122. Kongress der Deutschen Gesellschaft für Chirurgie. München, 05.–08. April 2005. (DOI: 10.1055/s-2005-919823)

Wagner, Michael, und Bernd Weiß, 2004: On the variation of divorce risks in Europe: a meta-analysis. Paper prepared for "The 3rd Conference of the European Research Network on Divorce" University of Cologne, Germany, December 2nd - 4th 2004 (as PDF)

Wagner, Michael, und Bernd Weiß, 2003: Divorce Risks in Europe: A First Meta-analytical Approach. Paper prepared for "The Second Conference of the European Research Network on Divorce", Tilburg University, Netherlands, November 13–14th, 2003.

Wagner, Michael, und Bernd Weiß, 2002: A Meta-Analysis of German Research on Divorce Risks. Paper prepared for the conference on "Divorce in Cross-National Perspective: A European Research Network" European University Institute, Florence, Italy, November 14–15th, 2002.

Wagner, Michael, und Bernd Weiß, 2002: Bilanz der deutschen Scheidungsforschung. Versuch einer Meta-Analyse. Vortrag im Rahmen der Tagung der Sektion "Familiensoziologie" in der Deutschen Gesellschaft für Soziologie in Heidelberg am 11. - 12. April 2002.

Software

Weiß, Bernd. 2012. tuma: A graphical user interface for teaching univariate meta-analysis. Version 0.1.

Student theses

Berning, Carl. 2011. Publication Bias: Eine Analyse sozialwissenschaftlicher Fachzeitschriften. Diplomarbeit am Seminar für Soziologie. Universität zu Köln.

Fulda, Barbara. 2010. Eine quantitative Forschungssynthese zum Einfluss der Frauenerwerbstätigkeit auf die Beziehungsstabilität. Diplomarbeit am Seminar für Soziologie. Universität zu Köln.

Weiß, Bernd. 2002. Scheidungsursachen in Deutschland: Eine Meta-Analyse. Magisterarbeit am Seminar für Soziologie. Universität zu Köln.