Purpose – The purpose of this paper is to focus on the development of definitional standards for research information as a wicked problem. A central solution strategy for such problems, increasing transparency by argumentation visualisation, is being evaluated. Design/methodology/approach – Qualitative formal content analysis is used in order to examine whether the process of definition standardisation in the project can be characterised as a wicked problem. Action Research is used to assess the effect of argumentation visualisation in the project. Findings – The results of the content analysis confirm the interpretation of the standardisation process as a wicked problem. The implementation of argumentation visualisation shows to increase the meetings’ focus and effectiveness. Research limitations/implications – The relationship between information exchange, transparency and acceptance of the development result should be addressed in future empirical analyses. Visualisation solutions require further development in order to accommodate needs of the stakeholders. Practical implications – Argumentation visualisation is of high value for finding a consensus for definitional standards and should be considered for managing and exchanging information. Originality/value – Applying solution strategies from design research on wicked problems to large-scale standardisation efforts opens up new possibilities for not only handling such projects but also providing new avenues of research for both the design and research information communities.

Das Forschungsfeld der Bildungsforschung befindet sich seit der ersten PISA-Studie in einer starken Expansionsphase. Bisherige Analysen dieses Feldes beschranken sich allerdings auf allgemeine Ubersichten zu verschiedenen Aspekten, etwa zum Personal, zur Finanzierung, zu Forschungsprojekten oder zu Publikationen. Das Ziel der Dissertation ist es dagegen, speziell die kognitiven Strukturen der Bildungsforschung in Deutschland, und hier insbesondere die in diesem Feld behandelten Forschungsthemen sowie seine Wissensbasis, mittels der bibliometrischen Methoden der Kowort- und der Referenzanalyse zu untersuchen. Die Datengrundlage bildeten zum einen die Schlagworter zu 23389 Publikationen des Zeitraums 2000 bis 2009, die durch eine schlagwortbasierte Suche in der FIS Bildung Literaturdatenbank ermittelt wurden. Zum anderen die in den Beitragen der dritten Auflage des Handbuchs Bildungsforschung zitierten 3921 Referenzen. Die Ergebnisse der Referenzanalysen zeigen eine nach wie vor sehr grose Bedeutung der Publikationstypen Monographie und Sammelband und einen relativ starken nationalen Fokus im Zitationsverhalten, aber auch grose Unterschiede in den Zitationsmustern zwischen den einzelnen Beitragen. Zudem zeigt sich, dass die Schulleistungsstudien und die Bildungsberichte die einflussreichsten Publikationen der aktuellen Bildungsforschung darstellen und die Padagogik, die Soziologie, die Psychologie sowie die Wirtschaftswissenschaften die wichtigsten Bezugsdisziplinen. In der Analyse der thematischen Schwerpunkte bestatigt sich die zentrale Rolle des Themenbereichs Schulerleistung und ist ein Bedeutungszuwachs der Forschung zum Thema Lernen zu erkennen. Aus den Analysen lasst sich folgern, dass Handbucher eine informative, aber noch wenig genutzte, Datenquelle der Wissenschaftsforschung darstellen. Ferner sind mit der Methode der Kowortanalyse auch differenziertere Untersuchungen von Forschungsfeldern, die nicht gut in Zitationsdatenbanken abgedeckt sind, moglich. (DIPF/Orig.) Since the first PISA study the field of educational research is going through a phase of strong expansion. Previous analyses of the field are largely confined to general overviews of various aspects like scientific staff, funding, research projects or publications. The aim of the thesis, in contrast, is to study the cognitive structures of educational research in Germany, in particular the research topics and the knowledge base of the field, using the bibliometric methods of co-word analysis and reference analysis. Two data sources were used: the keywords of 23389 publications from the period 2000 to 2009. These publications were identified by a keyword-based search in the German Education Index. And the 3921 references cited in the articles of the third edition of the Handbuch Bildungsforschung. The results of the reference analysis show a high relevance of the document types monograph and edited book and a relatively strong national focus but also considerable differences in the citation patterns of the individual articles. Furthermore, student assessment studies and education reports are the most influential publications of current educational research and pedagogy, socioloy, psychology and economics the main reference disciplines. The analysis of the thematic priorities reaffirms the central role of the topic student achievement and shows a growing importance of the issue of learning. It can be concluded that handbooks are an informative but still largely unexplored data source in science studies. Moreover, the method of co-word analysis facilitates more detailed investigations of research fields that are not well covered in citation indexes. (DIPF/orig.)

In this paper, we analyze the degree to which the standardization project “Research core dataset” (CDS) qualifies as a wicked problem. The project was initiated in 2013 by the German Science Council. We suggest three solution approaches and discuss their application to standardization processes.

Es werden Promotions- und Habilitationsschriften uber einen Zeitraum von 10 Jahren (1998 bis 2007) quantitativ und qualitativ in den Blick genommen. Dazu werden mit der FIS Bildung Literaturdatenbank, der entsprechenden Fachsystematik in der Hochschulschriften-Reihe der Deutschen Nationalbibliothek und der jahrlich in der Zeitschrift fur Padagogik publizierten Meldungen von Qualifizierungsschriften aus Universitaten des deutschen Sprachraums die umfassendsten Informationsquellen zusammengefuhrt und ihre unterschiedlichen Informationsinhalte homogenisiert. Analyseergebnisse werden zu Standorten, bearbeiteten Themenfeldern, zum digitalen Publizieren und zu genderspezifischen Aspekten prasentiert. (DIPF/Autor)

Der Beitrag untersucht die fur den Zeitraum 1998 bis 2007 in der FIS Bildung Literaturdatenbank nachgewiesenen Publikationen von im Bereich Bildungsforschung tatigen Wissenschaftlern. Analysiert wurden die strukturellen Merkmale der Publikationskultur (Publikationstypen und -sprachen), die Themen der Veroffentlichungen, der Publikations-Output verschiedener Gruppen von Autoren (Professoren und wissenschaftliche Mitarbeiter) sowie Unterschiede zwischen den Bundeslandern hinsichtlich ihres Publikations-Outputs. (DIPF/Autor)

Der Beitrag stellt Ziele und erste Ergebnisse des DFG-Projekts Innovative bibliometrische Verfahren zur kontinuierlichen Beobachtung der sozialwissenschaftlichen Forschungsproduktion vor. Eine Analyse des Publikationsverhaltens von Erziehungswissenschaftlern zeigt die grose Bedeutung des Publikationstyps Sammelwerksbeitrag und der Publikationssprache Deutsch, aber auch eine ausgepragte Heterogenitat in der Publikationspraxis von erziehungswissenschaftlichen Institutionen. Skizziert wird schlieslich der Vorschlag fur einen neuen, dieser Publikationspraxis angemessenen, bibliometrischen Indikator. (DIPF/Autor)

This paper reports on a project sponsored by the German Research Foundation (DFG) aimed at developing new methodological approaches to evaluate the relevance and quality of educational research publications and at examining the potential of the German Education Index (FIS Bildung) as a tool to monitor and map educational research. The project is exploratory and its objective is to develop a methodology for constructing research performance indicators, not to assess or compare research performance of individual scholars, research groups or university departments. The paper gives an outline of the project, presents results of its first part, the analysis of the publication behaviour of exemplary educational research institutions, and finally illustrates the development of a new multidimensional quality indicator.

This paper reports on a project sponsored by the German Research Foundation (DFG) aimed at developing new methodological approaches to evaluate the relevance and quality of educational research publications and at examining the potential of the German Education Index (FIS Bildung) as a tool to monitor and map educational research. The project is exploratory and its objective is to develop a methodology for constructing research performance indicators, not to assess or compare research performance of individual scholars, research groups or university departments. The paper gives an outline of the project, presents results of its first part, the analysis of the publication behaviour of exemplary educational research institutions, and finally illustrates the development of a new multidimensional quality indicator.