next up previous contents
Nächste Seite: 4.6 Klassifikation der Trainingsdokumente Aufwärts: 4 Experimente Vorherige Seite: 4.4 Klassifikation der Trainingsdaten   Inhalt

4.5 Klassifikation der Testdokumente in Textform (ohne XML-Tags)

Um die erwähnte Frage nach der Eignung von ,,strukturierten`` Features für die Klassifikation zu überprüfen, wird in diesem Experiment die bisher verwendete Datenbasis modifiziert. Die XML-Dokumente werden um die enthaltenen Tags reduziert, so daß lediglich die ,,rohen`` Textdaten verbleiben.

Das erste Experiment dieser Reihe wird an den so gewonnen Testdaten durchgeführt. Die Textdokumente werden auf der Basis der ,,manuellen`` Klassen-Zuordnung klassifiziert. Für die Feature-Selektion werden erneut folgende Methoden verwendet:

  1. Selektion der 1000 häufigsten Features
  2. p-Selektion von 1000 Features (p=20)
  3. Selektion von 1000 Features mit höchstem Wert für IG
  4. Selektion von 1000 Features mit höchstem Wert für MI

Abbildung 12: Einfache Feature-Selektion von 1000 Features (Testdaten Text, manuell)
\begin{figure}\centering \epsffile{data/exp5-1.eps} \end{figure}

Es zeigt sich, daß auch die Textdokumente mit sehr geringer Precision klassifiziert werden (siehe Abbildung 12), wie es bereits im Experiment mit den entsprechenden XML-Dokumenten der Fall war (siehe Abbildung 6).

In Abbbildung 13 ist ein direkter Vergleich der p-Selektion mit p=20 für die Klassifikation von Text- bzw. XML-Dokumenten zu sehen. Der Unterschied der Precision ist nur minimal und läßt keine Schlüsse zu, welche der beiden Methoden vorzuziehen ist.

Abbildung 13: Vergleich der Klassifikation von Text und XML (Testdaten, manuell)
\begin{figure}\centering \epsffile{data/exp5-2.eps} \end{figure}

Ergebnis dieses Experiments ist, daß die verwendete Datenbasis offensichtlich nicht für die Aufgabe der Klassifikation geeignet ist, da durch das Weglassen der XML-Tags eine negative Beeinflussung der Klassifikationsqualität durch die ,,strukturierten`` Features ausgeschlossen werden kann. Weiterhin zeigt sich, daß die Verwendung von ,,strukturierten`` Features in diesem Fall genauso gute bzw. schlechte Ergebnisse ermöglicht wie die Klassifikation der korrespondierenden Textdokumente.


next up previous contents
Nächste Seite: 4.6 Klassifikation der Trainingsdokumente Aufwärts: 4 Experimente Vorherige Seite: 4.4 Klassifikation der Trainingsdaten   Inhalt