Top

Published in:

2020 | OriginalPaper | Chapter

12. Innovative Forschungsmethoden in der Evaluation – Text Mining und Data Analytics zur Erfolgsmessung und Wirksamkeitsanalyse

Author : Cathleen M. Stützer

Published in: Marktforschung für die Smart Data World

Publisher: Springer Fachmedien Wiesbaden

Activate our intelligent search to find suitable subject content or patents.

search-config

AI-assisted search

Off

Zusammenfassung

Dieser Beitrag befasst sich mit der Bedeutung von (innovativen) digital-gestützten Erhebungs- und Auswertungsverfahren in der Evaluation. Am Beispiel von Text Mining und Data Analytics werden Potenziale und Herausforderungen zur automatisierten Leistungsbewertung, Qualitätsanalyse und Wirksamkeitsmessung im Kontext der Evaluationsforschung näher beleuchtet. Es werden Analogien zur Marktforschung aufgezeigt, Einblicke in den aktuellen Status quo gegeben sowie Möglichkeiten einer (übergreifenden) Implementierung bzw. einer Übertragbarkeit auf die Marktforschung am Fallbeispiel diskutiert.

Dont have a licence yet? Then find out more about our products and how to get one now:

Springer Professional "Wirtschaft+Technik"

Online-Abonnement

Mit Springer Professional "Wirtschaft+Technik" erhalten Sie Zugriff auf:

über 102.000 Bücher
über 537 Zeitschriften

aus folgenden Fachgebieten:

Automobil + Motoren
Bauwesen + Immobilien
Business IT + Informatik
Elektrotechnik + Elektronik
Energie + Nachhaltigkeit
Finance + Banking
Management + Führung
Marketing + Vertrieb
Maschinenbau + Werkstoffe
Versicherung + Risiko

Jetzt Wissensvorsprung sichern!

inform now

Springer Professional "Wirtschaft"

Online-Abonnement

Mit Springer Professional "Wirtschaft" erhalten Sie Zugriff auf:

über 67.000 Bücher
über 340 Zeitschriften

aus folgenden Fachgebieten:

Bauwesen + Immobilien
Business IT + Informatik
Finance + Banking
Management + Führung
Marketing + Vertrieb
Versicherung + Risiko

Jetzt Wissensvorsprung sichern!

inform now

previous chapter Bias in Machine Learning und Konsequenzen für die Anwendung in der Marktforschung

next chapter Herausforderungen der Messe-Marktforschung in Zeiten von Big Data

Evaluation und Evaluationsforschung werden im Folgenden synonym verwendet.

Dies gilt sowohl für interne (In-House) wie auch externe Evaluationen (z. B. durch externe Agenturen, Institutionen etc.).

Vgl. Arbeitskreis „Forschungsmethoden in der Evaluation“ der Deutschen Gesellschaft für Evaluation (DeGEval) via https://www.degeval.org/degeval-standards/standards-fuer-evaluation/ (Stand: 20.04.2019) in Anlehnung an „Joint Committee on Standards for Educational Evaluation“ (JCSEE).

Analog zum ICC/ESOMAR-Kodex aus der Marktforschung.

Vgl. ICC/ESOMAR-Kodex unter: https://www.esomar.org/uploads/public/knowledge-and-standards/codes-and-guidelines/ICCESOMAR_Code_German_.pdf (Stand: 20.05.2019).

Learning Analytics beziehen sich auf die Erhebung und Auswertung lehr- und lernbezogener Daten innerhalb von digitalen Lehr- und Lernräumen und zielen auf eine datenzentrierte Lernerfolgsmessung auf Indiviudalebene (vgl. Gaaw und Stützer 2017).

Zu den sich daraus resultierenden Rechtsunsicherheiten befinden sich die beteiligten Akteure (Hochschulleitungen, Administratoren, Datenschutzbeauftragte, Evaluatoren etc.) im Austausch.

Die Automatisierung dessen befindet sich aktuell noch in der Umsetzung.

Aktuell ist dieser Prozess technisch noch nicht realisiert. Zukünftig sollen die zusammengeführten Bewertungen des Inhalts in einem Dashboard grafisch dargestellt werden, um ohne Programmierkenntnisse nach speziellen Informationen (Verteilung und Art der Bewertung – positiv, neutral, negativ –, Hot Topics, GoI vs.GoR etc.) filtern zu können.

Code Snippets sind hier als einzelne Code-Bausteine zu verstehen, die sich je nach Verwendung in den einzelnen Ebenen während der Bearbeitung hinzufügen/löschen lassen.

Eine Workbench ist eine einheitliche Arbeitsumgebung und dabei visuelles Werkzeug für Entwickler und Anwender zugleich.

BMBF (2017) Bekanntmachung vom 31. Juli 2017. Richtlinie zur Förderung von Forschung zur digitalen Hochschulbildung – Innovationspotenziale Digitaler Hochschulbildung – Bundesanzeiger vom 15.08.2017. https://www.bmbf.de/foerderungen/bekanntmachung-1393.html. Zugegriffen: 30. Apr. 2019

Bortz J, Döring N (2005) Forschungsmethoden und Evaluation für Human- und Sozialwissenschaftler. Springer, Berlin

Chen T, Xu R, He Y, Wang X (2017) Improving sentiment analysis via sentence type classification using BiLSTM-CRF and CNN. Expert Systems with Applications 72:221–230. https://doi.org/10.1016/j.eswa.2016.10.065. Zugegriffen: 17. Apr. 2019

Diesner J, Carley KM (2010) Extraktion relationaler Daten aus Texten Handbuch Netzwerkforschung. VS Verlag, Wiesbaden, S 507–521CrossRef

Diesner J, Carley KM (2011) Semantic networks. In: Barnett G (Hrsg) Encyclopedia of social networking. Sage Publications, London, S 767–769

Döring N, Bortz J (2016) Forschungsmethoden und Evaluation in den Sozial- und Humanwissenschaften. Springer, BerlinCrossRef

Gaaw S, Stützer CM (2017) Learning und Academic Analytics in Lernmanagementsystemen (LMS). Herausforderungen und Handlungsfelder im nationalen Hochschulkontext. In: Köhler T, Schoop E, Kahnwald N (Hrsg) Wissensgemeinschaften in Wirtschaft, Wissenschaft und öffentlicher Verwaltung. TUDpress, Dresden, S 145–161. http://nbn-resolving.de/urn:nbn:de:bsz:14-qucosa-234425. Zugegriffen: 17. Dez 2018

Greven Medien (2017). Pressmitteilung vom 08. Februar 2017. Kundenbewertungen ausschlaggebend für Kaufentscheidungen. https://www.greven.de/images/Pressemitteilungen_/2017/170208_Greven_GfK_Studie_Bewertungen.pdf. Zugegriffen: 30. Apr. 2019

Hochschulforum Digitalisierung (2015) Diskussionspapier – 20 Thesen zur Digitalisierung der Hochschulbildung. Zur Halbzeitkonferenz des Hochschulforums Digitalisierung. Arbeitspapier Nr. 14., Hochschulforum Digitalisierung, Berlin

Kelle U (2018) “Mixed Methods” in der Evaluationsforschung – mit den Möglichkeiten und Beschränkungen quantitativer und qualitativer Methoden arbeiten. Zeitschrift für Evaluation, 17. Jahrgang 1(2018):25–52

Kerres M (2003) Wirkungen und Wirksamkeit neuer Medien in der Bildung. In: Keil-Slawik R, Kerres M (Hrsg) Education Quality Forum 2002. Wirkungen und Wirksamkeit neuer Medien. Waxmann, Münster

Kromrey H (2001) Evaluation – ein vielschichtiges Konzept: Begriff und Methodik von Evaluierung und Evaluationsforschung. Empfehlungen für die Praxis. Sozialwissenschaften und Berufspraxis 24(2):105–131. https://nbn-resolving.org/urn:nbn:de:0168-ssoar-37648. Zugegriffen: 17. Apr. 2019

Manning C, Schütze H (1999) Foundations of statistical natural language processing. MIT Press, Cambridge

Mayring P (2010) Qualitative Inhaltsanalyse: Grundlagen und Techniken. Beltz Verlag, Weinheim

McCoy J (2018) 10 Conversion copy tips every SEO writer needs to know. Search engine Journal.com. https://www.searchenginejournal.com/seo-writer-conversion-copy-tips/265005. Zugegriffen: 27. Apr. 2019

Medhat W, Hassan A, Korashy H (2014) Sentiment analysis algorithms and applications: a survey. Ain Shams Engineering Journal 5(4):1093–1113. https://doi.org/10.1016/j.asej.2014.04.011. Zugegriffen: 17. Apr. 2019

Stockmann, R. (2000). Evaluation in Deutschland. In: Stockmann R (Hrsg) Evaluationsforschung Sozialwissenschaftliche Evaluationsforschung, Bd. 1. VS Verlag, Wiesbaden, S 11–40

Stockmann R, Meyer W (2014) Evaluation: Eine Einführung. UTB GmbH, Stuttgart

Stuetzer CM, Welker M, Egger M (2018) Computational social science in the age of big data, Bd 15. Halem, Köln

Stützer CM, Gaaw S (2018) Zur Leistungsfähigkeit von Blended Learning im Zeitalter der Digitalisierung. In: Köhler T, Schoop E, Kahnwald N (Hrsg) Wissensgemeinschaften in Wirtschaft, Wissenschaft und öffentlicher Verwaltung. TUDpress, Dresden, S 53–61. http://nbn-resolving.de/urn:nbn:de:bsz:14-qucosa2-336567. Zugegriffen: 17. Apr. 2019

Stützer CM, Wachenfeld-Schell A, Oglesby S (2019) (Intelligentes) Text Mining in der Marktforschung. DGOF –Kompendium der Online-Forschung, Bd. 1. Deutsche Gesellschaft für Online-Forschung e. V. (DGOF), Köln. https://www.dgof.de/kompendium-der-online-forschung/. Zugegriffen: 9. Sept. 2019

Thielsch M, Weltzin S (2012) Online-Umfragen und Online-Mitarbeiterbefragungen. In: Thielsch MT, Brandenburger T (Hrsg) Praxis der Wirtschaftspsychologie II. MV-Wissenschaft, Münster, S 109–127

Title: Innovative Forschungsmethoden in der Evaluation – Text Mining und Data Analytics zur Erfolgsmessung und Wirksamkeitsanalyse
Author: Cathleen M. Stützer
Publisher: Springer Fachmedien Wiesbaden
Book: Marktforschung für die Smart Data World
Print ISBN: 978-3-658-28663-7

Electronic ISBN: 978-3-658-28664-4

Copyright Year: 2020
DOI: https://doi.org/10.1007/978-3-658-28664-4_12