Grundlagen wissenschaftlichen Arbeitens¶

Leitfragen

Was ist wissenschaftliches Arbeiten?
Was zeichnet wissenschaftliches Arbeiten aus?
Welche Rolle spielt wissenschaftliches Arbeiten in der Abschlussarbeit?
Wo wird wissenschaftliches Arbeiten in der Abschlussarbeit sichtbar?
Was ist der Unterschied zwischen Forschung und Wissenschaft?
Welche Forschung muss ich in der Abschlussarbeit betreiben?
Wie formuliere ich Forschungsfragen richtig?
Wie erhebe und validiere ich Anforderungen korrekt?
Was ist der Unterschied zwischen wissenschaftlichem Schreiben und wissenschaftlichem Arbeiten?
Wissenschaftliches Arbeiten versus wissenschaftliches Schreiben
Was kennzeichnet eine gute Evaluierung?
Welche wissenschaftlichen Gütekriterien gibt es?
Welche Rolle spielen die wissenschaftlichen Gütekriterien?

Allgemeines¶

Wissenschaftliches Arbeiten bedeutet, eine klar abgegrenzte Frage systematisch, auf Grundlage vorhandenen Wissens und mit geeigneten Methoden zu bearbeiten. Entscheidend ist die Nachvollziehbarkeit: Andere müssen verstehen und prüfen können, wie eine Aussage zustande gekommen ist, worauf sie sich stützt und wo ihre Grenzen liegen. Wissenschaftliches Arbeiten betrifft deshalb den gesamten Erkenntnisprozess – nicht erst das Schreiben und Zitieren.

Die folgenden Antworten sind auf Bachelorarbeiten in der Informatik zugeschnitten. Ein durchgängiges, fiktives Beispiel veranschaulicht die Zusammenhänge: die Entwicklung und Untersuchung einer Suchfunktion für ein hochschulinternes Dokumentenportal. Beispielhafte Zahlen und Anforderungen sind dabei keine allgemeinen Vorgaben.

Was ist wissenschaftliches Arbeiten?¶

Wissenschaftliches Arbeiten ist ein methodisch kontrolliertes Vorgehen, mit dem Fragen beantwortet, Probleme untersucht und begründete Erkenntnisse gewonnen werden. Dazu gehören die Auseinandersetzung mit vorhandenem Wissen, die Auswahl geeigneter Methoden, die Dokumentation des Vorgehens und die kritische Bewertung der Ergebnisse. Gute wissenschaftliche Praxis verlangt außerdem einen ehrlichen Umgang mit Quellen, Daten und Befunden – auch dann, wenn diese die eigenen Erwartungen nicht bestätigen.

Für die Lehre lässt sich das als zusammenhängender Prozess darstellen:

Problem verstehen → vorhandenes Wissen einordnen → Frage formulieren → Methode begründen → Untersuchung durchführen → Ergebnisse auswerten → Frage beantworten und Grenzen benennen.

Dieser Prozess ist nicht zwingend linear. Neue Erkenntnisse können beispielsweise dazu führen, eine Forschungsfrage einzugrenzen oder ein Untersuchungsdesign zu überarbeiten. Solche Änderungen müssen begründet und dokumentiert werden. Die DFG betont ausdrücklich die Qualitätssicherung über die verschiedenen Phasen des Forschungsprozesses hinweg.

Was zeichnet wissenschaftliches Arbeiten aus?¶

Merkmal	Bedeutung für die Bachelorarbeit
Klare Fragestellung	Es ist erkennbar, was untersucht wird und was außerhalb des Arbeitsumfangs liegt.
Bezug zum Wissensstand	Vorhandene Ansätze werden recherchiert, eingeordnet und bei der eigenen Arbeit berücksichtigt.
Methodisches Vorgehen	Methoden werden passend zur Frage ausgewählt und begründet.
Begründete Entscheidungen	Die Auswahl von Verfahren, Daten, Kriterien und Werkzeugen wird fachlich erklärt.
Überprüfbare Aussagen	Aussagen stützen sich auf geeignete Quellen, Daten, Analysen oder Beweise.
Transparente Dokumentation	Wesentliche Arbeitsschritte, Einstellungen und Auswertungen sind nachvollziehbar.
Kritische Reflexion	Unsicherheiten, alternative Erklärungen und Grenzen werden offengelegt.
Wissenschaftliche Redlichkeit	Fremde Leistungen werden kenntlich gemacht; Ergebnisse werden weder erfunden noch selektiv passend dargestellt.

Diese Merkmale konkretisieren die Anforderungen des DFG-Kodex an Forschungsdesign, Methoden, Qualitätssicherung und Dokumentation.

Im Suchportal-Beispiel wäre „Ich habe eine semantische Suche implementiert“ zunächst eine Beschreibung einer Entwicklungsleistung. Wissenschaftlich interessant wird die Arbeit durch eine untersuchbare Frage, etwa:

„Wie unterscheidet sich die Suchqualität einer semantischen Suche von einer bestehenden Volltextsuche bei deutschsprachigen Modulbeschreibungen?“

Welche Rolle spielt wissenschaftliches Arbeiten in der Abschlussarbeit?¶

Die Abschlussarbeit soll nicht nur zeigen, dass ein technisches Ergebnis hergestellt werden kann. Sie soll auch erkennen lassen, dass eine fachliche Frage mit wissenschaftlichen Methoden bearbeitet, das Vorgehen begründet und das Ergebnis kritisch eingeordnet werden kann. Der Hochschulqualifikationsrahmen nennt auf Bachelorebene ausdrücklich das Ableiten und Definieren von Forschungsfragen, die begründete Operationalisierung, die Anwendung von Forschungsmethoden sowie die Darlegung und Erläuterung von Forschungsergebnissen.

Für eine entwicklungsorientierte Informatikarbeit bedeutet das:

Das Softwareartefakt ist ein mögliches Ergebnis der Arbeit.
Die wissenschaftliche Leistung umfasst darüber hinaus die Problemklärung, die begründete Gestaltung der Lösung und die Untersuchung ihrer Eigenschaften.
Die Erkenntnis kann beispielsweise darin bestehen, unter welchen Bedingungen ein Ansatz geeignet ist und welche Zielkonflikte auftreten. Für die Bewertung solcher Aussagen braucht es ein zur Frage passendes Untersuchungsdesign.

Eine hilfreiche Leitfrage lautet daher:

„Was wissen wir nach dieser Arbeit besser – und wodurch ist dieses Wissen begründet?“

Welche konkreten Leistungen in einer bestimmten Bachelorarbeit verlangt werden, ist zusätzlich anhand der einschlägigen Prüfungsordnung, Modulbeschreibung und Betreuungsvereinbarung zu klären. Der Hochschulqualifikationsrahmen beschreibt das allgemeine Qualifikationsniveau, nicht die konkrete Aufgabenstellung einer einzelnen Arbeit.

Wo wird wissenschaftliches Arbeiten in der Abschlussarbeit sichtbar?¶

Wissenschaftliches Arbeiten zeigt sich nicht nur im Literaturverzeichnis oder in einem eigenen Methodenkapitel. Es sollte die gesamte Argumentation tragen. Die folgende Zuordnung ist eine Orientierung, keine verbindliche Kapitelstruktur.

Bereich der Arbeit	Woran wissenschaftliches Arbeiten sichtbar wird
Einleitung	Das Problem, seine Relevanz, das Erkenntnisziel und die Abgrenzung werden erläutert.
Grundlagen und verwandte Arbeiten	Begriffe werden geklärt; bestehende Lösungen werden nicht nur aufgezählt, sondern verglichen und eingeordnet.
Methodik	Das Vorgehen wird so beschrieben und begründet, dass seine Eignung beurteilt werden kann.
Anforderungsanalyse	Anforderungen haben erkennbare Quellen und werden nachvollziehbar geprüft.
Konzeption	Alternativen und Zielkonflikte werden diskutiert; Entwurfsentscheidungen sind begründet.
Implementierung	Erkenntnisrelevante technische Entscheidungen, Versionen und Abweichungen vom Entwurf werden dokumentiert.
Evaluierung	Daten, Aufgaben, Vergleichsverfahren und Auswertung passen zu den Forschungsfragen.
Diskussion	Befunde werden interpretiert und gegenüber alternativen Erklärungen sowie Gültigkeitsgrenzen abgegrenzt.
Fazit	Die Forschungsfragen werden auf Grundlage der Ergebnisse beantwortet.

Auch ergänzende Materialien können zur Nachvollziehbarkeit beitragen: etwa Quellcode, Interviewleitfäden, anonymisierte Daten, Konfigurationsdateien und Auswertungsskripte. Eine Bereitstellung muss rechtliche, ethische und vertragliche Einschränkungen berücksichtigen; nicht alles darf öffentlich zugänglich gemacht werden.

Was ist der Unterschied zwischen Forschung und Wissenschaft?¶

Als begriffliche Orientierung lässt sich unterscheiden:

Wissenschaft bezeichnet den umfassenderen Zusammenhang aus methodisch begründetem Wissen, Regeln der Erkenntnisgewinnung und den Institutionen und Gemeinschaften, die dieses Wissen entwickeln, prüfen und vermitteln.
Forschung bezeichnet darin die gezielte Tätigkeit, mit der Fragen untersucht und Erkenntnisse gewonnen, überprüft oder weiterentwickelt werden.

Diese Unterscheidung ist eine didaktische Einordnung, keine trennscharfe Definition für alle Fachtraditionen. Auch der Hochschulqualifikationsrahmen unterscheidet zwischen der reflektierten Anwendung wissenschaftlicher Erkenntnisse und der Generierung von Wissen mit wissenschaftlichen Methoden.

Für Studierende ist vor allem die Konsequenz wichtig: Wissenschaftliches Arbeiten ist nicht auf die Entdeckung völlig neuer Theorien beschränkt. Auch die systematische Anwendung, Überprüfung oder vergleichende Untersuchung bestehender Ansätze kann wissenschaftliche Kompetenzen sichtbar machen.

Im Beispiel wäre die bloße Verwendung einer bekannten Suchbibliothek noch keine ausreichende Untersuchung. Der kontrollierte Vergleich zweier Suchansätze anhand begründeter Kriterien kann dagegen einen Erkenntnisbeitrag liefern.

Welche Forschung muss ich in der Abschlussarbeit betreiben?¶

Es gibt keine einzelne Forschungsmethode, die zu jeder Informatik-Bachelorarbeit passt. Die Methode richtet sich nach der Fragestellung. Die empirischen Standards der ACM SIGSOFT unterscheiden entsprechend verschiedene Untersuchungsarten und deren Qualitätsanforderungen.

Art der Arbeit	Möglicher Erkenntnisbeitrag	Beispiel
Entwicklungs- oder gestaltungsorientiert	Einen Lösungsansatz entwickeln und seine Eignung untersuchen	Suchprototyp konzipieren und gegen eine bestehende Suche evaluieren
Experimentell	Unterschiede oder Wirkungen unter kontrollierten Bedingungen untersuchen	Laufzeit und Ergebnisqualität verschiedener Verfahren vergleichen
Qualitativ-empirisch	Bedürfnisse, Erfahrungen oder Entscheidungsprozesse erschließen	Schwierigkeiten bei der Dokumentensuche durch Interviews untersuchen
Fallstudienorientiert	Ein Phänomen in seinem konkreten Anwendungskontext untersuchen	Einführung einer Suchlösung in einem Hochschulbereich analysieren
Literaturbasiert	Vorhandene Erkenntnisse systematisch zusammenführen	Suchansätze anhand dokumentierter Such- und Auswahlkriterien vergleichen
Theoretisch oder formal	Eigenschaften mit formalen Mitteln herleiten oder nachweisen	Korrektheit oder Komplexität eines Verfahrens untersuchen

Die Beispiele illustrieren mögliche Zuschnitte; sie sind keine Vorgabe, dass jede Bachelorarbeit alle diese Bestandteile enthalten müsste. Entscheidend ist die begründete Verbindung zwischen Frage, Methode und Ergebnis.

Der angemessene Anspruch lautet nicht:

„Ich muss die Informatik revolutionieren.“

Er lautet vielmehr:

„Ich bearbeite eine sinnvoll abgegrenzte Frage methodisch sauber und kann meine Antwort belegen.“

Das entspricht dem im Hochschulqualifikationsrahmen beschriebenen Kompetenzanspruch auf Bachelorebene.

Wie formuliere ich Forschungsfragen richtig?¶

Eine Forschungsfrage macht deutlich, welche Erkenntnis die Arbeit gewinnen soll. Sie muss so eingegrenzt sein, dass eine geeignete Untersuchung tatsächlich eine Antwort liefern kann. Dazu gehört die Operationalisierung: Abstrakte Begriffe wie „besser“, „benutzerfreundlich“ oder „effizient“ werden in untersuchbare Merkmale übersetzt. Diese Verbindung von Forschungsfrage, Operationalisierung und Methode gehört ausdrücklich zu den wissenschaftlichen Kompetenzen auf Bachelorebene.

Von der Themenidee zur Forschungsfrage¶

Für das Suchportal könnte die Konkretisierung so aussehen:

Stufe	Beispiel
Themengebiet	Semantische Suche
Problem	Unterschiedliche Formulierungen erschweren das Auffinden passender Modulbeschreibungen.
Ziel	Die Eignung einer semantischen Suche für dieses Dokumentenportal untersuchen.
Forschungsfrage	Wie unterscheidet sich die Ergebnisqualität einer semantischen Suche von einer Volltextsuche bei natürlichsprachlichen Suchanfragen zu deutschsprachigen Modulbeschreibungen?
Operationalisierung	Ergebnisqualität beispielsweise über fachlich bewertete Relevanz der ersten zehn Treffer bestimmen.
Methode	Beide Verfahren mit demselben dokumentierten Dokumentbestand und denselben Suchanfragen vergleichen.

Merkmale einer tragfähigen Forschungsfrage¶

Als praktische Prüfliste lassen sich aus der notwendigen Verbindung von Forschungsfrage und Untersuchungsdesign folgende Kriterien ableiten:

Sie ist verständlich: Zentrale Begriffe sind geklärt.
Sie ist abgegrenzt: Gegenstand und Kontext sind erkennbar.
Sie ist beantwortbar: Benötigte Daten, Methoden und Ressourcen sind verfügbar.
Sie ist ergebnisoffen: Das gewünschte Ergebnis wird nicht vorweggenommen.
Sie ist relevant: Es wird deutlich, warum die Antwort fachlich oder praktisch interessant ist.
Sie passt zum Zeitrahmen: Die Untersuchung lässt sich im Umfang der Bachelorarbeit durchführen.

Ungünstige und bessere Formulierungen¶

Ungünstig	Warum problematisch?	Besser eingegrenzt
„Ist semantische Suche besser?“	Vergleich, Kontext und Bedeutung von „besser“ fehlen.	„Wie unterscheiden sich semantische Suche und Volltextsuche hinsichtlich der Relevanz der ersten zehn Treffer im untersuchten Dokumentbestand?“
„Warum ist unsere neue Suche überlegen?“	Die Überlegenheit wird bereits vorausgesetzt.	„Welche Unterschiede zeigen sich zwischen der neuen und der bestehenden Suche hinsichtlich Ergebnisqualität und Antwortzeit?“
„Wie implementiere ich eine Suchfunktion?“	Zunächst eine Entwicklungsaufgabe ohne klaren Erkenntnisanspruch.	„Wie lässt sich eine Suchfunktion unter den vorgegebenen Datenschutz- und Laufzeitbedingungen gestalten, und inwieweit erfüllt der entwickelte Ansatz diese Bedingungen?“

Eine Forschungsfrage muss nicht zwingend eine statistische Hypothese enthalten. Untersuchungsformen und ihre Qualitätskriterien unterscheiden sich; eine qualitative Untersuchung, ein Benchmark und ein formaler Nachweis benötigen unterschiedliche Vorgehensweisen.

Wie erhebe und validiere ich Anforderungen korrekt?¶

Anforderungen sollten nicht lediglich als persönliche Wunschliste der entwickelnden Person entstehen. Sie brauchen nachvollziehbare Quellen und müssen daraufhin geprüft werden, ob sie tatsächliche Bedürfnisse und Rahmenbedingungen angemessen wiedergeben. IREB hebt dafür die Identifikation von Anforderungsquellen, die situationsgerechte Wahl der Erhebungstechniken und die Validierung mit Blick auf Stakeholderbedürfnisse hervor.

Schritt 1: Kontext und Quellen bestimmen¶

Zunächst wird geklärt:

Wer nutzt das System?
Wer betreibt, administriert oder verantwortet es?
Welche vorhandenen Dokumente und Systeme enthalten relevante Informationen?
Welche technischen, organisatorischen oder rechtlichen Randbedingungen bestehen?

Die Auswahl der Quellen sollte dokumentiert werden. Dazu gehört auch, relevante Perspektiven zu benennen, die nicht berücksichtigt werden konnten.

Schritt 2: Geeignete Erhebungstechniken auswählen¶

Für das Suchportal kommen beispielsweise folgende Techniken infrage:

Technik	Möglicher Zweck
Interviews	Suchprobleme und Informationsbedürfnisse verstehen
Beobachtung	Tatsächliche Suchabläufe und Umgehungslösungen erkennen
Dokumentenanalyse	Vorgaben und bestehende Funktionsbeschreibungen erschließen
Workshop	Unterschiedliche Bedürfnisse und Prioritäten abstimmen
Prototypbesprechung	Unklare Vorstellungen anhand eines konkreten Entwurfs klären

Die Auswahl sollte zur Projektsituation und zur benötigten Information passen. Ein Interview ist beispielsweise nicht allein deshalb die richtige Methode, weil es leicht zu organisieren ist.

Schritt 3: Anforderungen präzise dokumentieren¶

IREB nennt unter anderem Angemessenheit, Notwendigkeit, Eindeutigkeit, Verständlichkeit, Vollständigkeit und Prüfbarkeit als Qualitätsmerkmale einzelner Anforderungen. Für Anforderungsmengen kommen beispielsweise Konsistenz und Rückverfolgbarkeit hinzu.

Ein fiktives Beispiel:

Feld	Inhalt
ID	A-07
Anforderung	Das System soll unter dem vereinbarten Lastprofil mindestens 95% der Suchanfragen innerhalb von zwei Sekunden beantworten.
Quelle	Abgestimmte Anforderung aus einem Stakeholderworkshop
Begründung	Die Suche soll den interaktiven Arbeitsablauf nicht wesentlich unterbrechen.
Prüfmethode	Lasttest mit festgelegtem Datenbestand, Testumgebung und Lastprofil

Die Zwei-Sekunden-Grenze ist hier nur ein Beispiel. In einer tatsächlichen Arbeit müsste ihre Herkunft begründet werden; eine frei gewählte Zahl wird durch ihre Messbarkeit noch nicht zu einer sachlich gerechtfertigten Anforderung.

Schritt 4: Anforderungen validieren¶

Validierung fragt:

„Beschreiben diese Anforderungen tatsächlich das, was benötigt wird?“

Sie umfasst deshalb nicht nur sprachliche Korrekturen, sondern auch die Prüfung von Inhalt und Abstimmung. Geeignete Verfahren sind beispielsweise Reviews, gemeinsame Durchsprachen und die Diskussion von Szenarien oder Prototypen.

Zu prüfen ist insbesondere: - Entspricht die Anforderung einem tatsächlichen Bedarf? - Ist sie eindeutig und verständlich? - Ist sie notwendig und im betrachteten Umfang vollständig? - Widerspricht sie anderen Anforderungen? - Ist ihre Erfüllung prüfbar? - Sind Konflikte und Prioritäten geklärt?

Schritt 5: Rückverfolgbarkeit herstellen¶

Eine einfache Nachweiskette lautet:

Quelle → Anforderung → Entwurfsentscheidung → Implementierung → Prüfung.

Damit lässt sich sowohl die Herkunft einer Anforderung als auch ihre Umsetzung und Überprüfung nachvollziehen. Rückverfolgbarkeit umfasst ausdrücklich Beziehungen zurück zu Quellen und vorwärts zu nachfolgenden Arbeitsergebnissen.

Wichtig ist die Unterscheidung: Eine Anforderungsvalidierung prüft die Angemessenheit der Anforderungen. Ein späterer Systemtest prüft dagegen beispielsweise, ob die implementierte Lösung diese Anforderungen erfüllt. Ein bestandener Test belegt nicht automatisch, dass die ursprüngliche Anforderung sinnvoll war.

Was ist der Unterschied zwischen wissenschaftlichem Schreiben und wissenschaftlichem Arbeiten?¶

Die beiden nahezu gleichlautenden Fragen zum Schreiben lassen sich gemeinsam beantworten:

Wissenschaftliches Arbeiten umfasst den gesamten Erkenntnisprozess.
Wissenschaftliches Schreiben ist die sprachliche und argumentative Darstellung dieses Prozesses und seiner Ergebnisse. Dokumentation ist damit ein wesentlicher Bestandteil wissenschaftlichen Arbeitens, aber nicht dessen Ersatz.

Wissenschaftliches Arbeiten	Wissenschaftliches Schreiben
Eine Frage entwickeln und eingrenzen	Frage und Abgrenzung verständlich darstellen
Literatur recherchieren und kritisch bewerten	Quellen korrekt wiedergeben und in die Argumentation einordnen
Methoden auswählen und anwenden	Methodenauswahl erläutern und begründen
Daten erheben und analysieren	Vorgehen und Ergebnisse präzise berichten
Entscheidungen fachlich treffen	Entscheidungen und Alternativen nachvollziehbar erklären
Ergebnisse kritisch prüfen	Befunde, Interpretation und Grenzen klar unterscheiden

Die Gegenüberstellung verdeutlicht zugleich die Verbindung: Eine gute Darstellung macht die Qualität des Vorgehens sichtbar und überprüfbar. Die DFG verlangt eine ausreichend genaue Dokumentation der relevanten Daten, Methoden und Analyseschritte; dazu gehört ausdrücklich auch, widersprechende Einzelergebnisse nicht zu unterschlagen.

Zwei Merksätze für Studierende:

Ein formal korrekt zitierter Text ist noch kein Nachweis einer guten Untersuchung.
Eine gute Untersuchung bleibt schwer überprüfbar, wenn ihr Vorgehen nicht verständlich dokumentiert ist.

Wissenschaftliches Schreiben bedeutet deshalb nicht, möglichst kompliziert zu formulieren. Sein Zweck ist hier, Begriffe, Begründungen, Befunde und Schlussfolgerungen so präzise offenzulegen, dass andere die Untersuchung verstehen und bewerten können.

Was kennzeichnet eine gute Evaluierung?¶

Eine gute Evaluierung liefert geeignete und nachvollziehbare Evidenz zur Beantwortung der Forschungsfragen. Sie soll nicht lediglich demonstrieren, dass eine Software funktioniert, sondern untersuchen, welche Aussagen über sie tatsächlich gerechtfertigt sind. Die ACM-SIGSOFT-Standards knüpfen die Qualitätsanforderungen an die jeweilige Untersuchungsmethode und berücksichtigen unter anderem Validität, Zuverlässigkeit und Reproduzierbarkeit.

Die Evaluierung passt zur Frage¶

Unterschiedliche Fragen benötigen unterschiedliche Nachweise:

Frage	Geeigneter Zugang im Beispiel
Liefert die Suche relevantere Treffer?	Vergleich mit fachlich bewerteten Suchergebnissen
Antwortet sie schnell genug?	Laufzeitmessung unter dokumentierten Bedingungen
Können Studierende Aufgaben damit besser lösen?	Aufgabenbasierte Untersuchung mit Angehörigen der Zielgruppe
Erfüllt sie definierte funktionale Anforderungen?	Anforderungsbezogene Tests
Warum treten bestimmte Nutzungsschwierigkeiten auf?	Beispielsweise Beobachtung und qualitative Auswertung

Diese Zuordnung ist ein Beispiel für die methodische Passung: Die Untersuchung muss tatsächlich Evidenz für die betreffende Aussage liefern. Eine Laufzeitmessung beantwortet keine Frage zur Verständlichkeit der Benutzeroberfläche.

Kriterien und Auswertung werden vorab geplant¶

Bereits bei der Planung sollten festgelegt werden: - Welche Forschungsfrage wird mit welchem Untersuchungsschritt bearbeitet? - Welche Daten und Fälle werden ausgewählt? - Welche Vergleichsbasis ist erforderlich? - Welche Mess- oder Bewertungskriterien werden verwendet? - Wie werden die Ergebnisse ausgewertet?

Das verhindert nicht jede Verzerrung, macht aber das Vorgehen prüfbarer. Notwendige spätere Änderungen sollten dokumentiert und begründet werden. Die DFG fordert ausdrücklich, Dokumentation und Datenmanagement schon in der Planungsphase mitzudenken.

Vergleiche sind fair und aussagekräftig¶

Beim Vergleich zweier Suchverfahren sollten beispielsweise derselbe Dokumentbestand und dieselben Suchanfragen zugrunde liegen. Unterschiede bei Hardware, Parametern oder Konfigurationen müssen kontrolliert oder offengelegt werden. Eine Untersuchung sollte außerdem relevante schwierige Fälle berücksichtigen und nicht nur Beispiele auswählen, die die eigene Lösung besonders gut aussehen lassen. Diese Anforderungen folgen aus der methodischen Kontrolle und der vollständigen Dokumentation auch widersprechender Befunde.

Ergebnisse werden nicht mit ihrer Interpretation verwechselt¶

Ein fiktives Beispiel verdeutlicht die Trennung:

Beobachtung: „Verfahren A erreicht im untersuchten Testbestand einen höheren mittleren Relevanzwert als Verfahren B.“
Interpretation: „Dies spricht unter den untersuchten Bedingungen für eine bessere Ergebnisqualität von A.“
Unzulässige Verallgemeinerung: „Semantische Suche ist grundsätzlich besser als Volltextsuche.“

Wie weit eine Schlussfolgerung trägt, hängt unter anderem von Untersuchungsdesign, Datenauswahl, Messung und Unsicherheit ab. Genau diese Gültigkeitsfragen sind Gegenstand der empirischen Qualitätsstandards.

Gültigkeitsgrenzen werden konkret diskutiert¶

Gültigkeitsaspekt	Leitfrage	Beispiel eines Problems
Konstruktvalidität	Messen wir tatsächlich das gemeinte Merkmal?	Weniger Klicks werden ohne weitere Begründung als höhere Benutzerfreundlichkeit interpretiert.
Interne Validität	Könnten andere Einflüsse den beobachteten Unterschied erklären?	Ein Verfahren wird auf leistungsfähigerer Hardware getestet.
Externe Validität	Auf welche anderen Kontexte lassen sich die Befunde übertragen?	Ein einzelner Dokumentbestand soll Aussagen über alle Suchdomänen begründen.
Schlussfolgerungsvalidität	Tragen Daten und Analyse die gezogene Schlussfolgerung?	Ein kleiner Unterschied wird trotz großer Streuung als eindeutige Überlegenheit dargestellt.
Zuverlässigkeit und Reproduzierbarkeit	Ist das Vorgehen hinreichend stabil und nachvollziehbar?	Versionen, Parameter oder Auswertungsschritte fehlen.

Die Gewichtung dieser Aspekte hängt von der jeweiligen Methode ab; sie sind keine mechanisch identische Checkliste für jede Untersuchungsart.

Auch unerwartete oder negative Ergebnisse werden berichtet¶

Eine Evaluierung ist nicht deshalb schlecht, weil die entwickelte Lösung die Vergleichslösung nicht übertrifft. Wissenschaftlich problematisch wäre vielmehr, ungünstige Befunde zu verschweigen oder die Schlussfolgerungen nachträglich passend zu machen. Die DFG verlangt ausdrücklich die Dokumentation von Ergebnissen, die eine Forschungshypothese nicht stützen.

Für die Bachelorarbeit ist deshalb eine begrenzte, gut belegte Aussage wertvoller als ein weitreichendes Erfolgsversprechen ohne tragfähige Evidenz. Ein mögliches Ergebnis des Suchportal-Beispiels wäre:

„Die semantische Suche liefert bei umgangssprachlichen Anfragen im untersuchten Bestand relevantere Treffer, benötigt jedoch längere Antwortzeiten. Bei exakten Modulnummern bietet sie keinen erkennbaren Vorteil.“

Damit wären Nutzen, Zielkonflikt und Geltungsbereich benannt – statt lediglich festzustellen, dass der Prototyp funktioniert.