Keyword-Spotting (tokenizer, keyword)

Fragestellung: Das Problem der Wiederfindung von Informationen in textueller Form wurde mit unterschiedlichsten Ansätzen zu lösen versucht. Ziel dieser Sitzung ist es, einen Überblick darüber zu geben, und einigen Begriffen wie Information Retrieval, Document Retrieval, Text Retrieval, Passage Retrieval, Information-Extraction, Antwortextraktion usw. eine genauere Bestimmung und beispielhaftes Verständnis zu geben.

Canan Salda

Glossar
Handout

Seminararbeit A. Bünzli: "IR-Eine Einführung in das Indexieren"

Fragestellung: Mit dem Begriff "Informationsextraktion aus Texten" sind engere und weiter gefasste Interpretationen verbunden. Insbesondere im Rahmen der Message Understanding Conferences (MUC) wurden klar spezifizierte Teilaufgaben (sog. Tasks), die mit Informationsextraktion verbunden sind, definiert. Es geht darum, über diese Aktivitäten, Ansätze und Anwendungen einen Überblick zu geben und die neueren Entwicklungen insbesondere in der Text Retrieval Conference (TREC) aufzuzeigen.Darüber hinaus soll Bezug zu Aufgaben und Ansätzen geliefert werden, die unter den Stichwörtern Text Mining, Text Routing, Text Filtering, Text Clustering abgehandelt werden.

Christine Surer

Fragestellung: Die Leistungsfähigkeit unserer hausgemachten Antwortextraktionssysteme ("ExtrAns" für englische UNIX-Handbuchseiten, "LUIS" für deutsche Universitätsadministrativa) soll genauer unter die Lupe genommen werden.Für die Leistungsmängel von LUIS soll eine Kategorisierung gemacht werden, um eine klare Prioritätenliste von notwendigen Verbesserungen zu erhalten. Zudem soll dabei eine Sammlung von (realistischen) Fragen bzw. Fragetypen entstehen mit den momentan gefundenen Resultaten und in Zukunft idealerweise zu findenden Resultaten.

Roberto Nespecca

Fragestellung: Der Q&A-Track (Frage-Antwort-Teilaufgabe) der 8. TREC war der erste Versuche einer grossen vergleichenden Evaluation verschiedenster Antwortextraktionssysteme. Es wurde von einfachsten stichwortbasierten Methoden bis zu aufwendigen linguistisch basierten Systeme so ziemlich alles versucht. Was sind die Lehren aus diesem ersten Wettbewerb für die Disziplin als Ganzes und für das deutschsprachige(!) LUIS insbesondere? Was brachte TREC 9 für Fortschritte?

(als zip-Archiv)

The TREC-8 Question Answering Track Report

The TREC-8 Question Answering Track Evaluation

ExtAns Evaluation Paper

Seminararbeit von C. Steinmann "Q&A-Strategien in TREC-8"

Fragestellung: Da Antwortextraktion eine durchaus andere Zielsetzung hat als Dokumentenretrieval, muss auch die Evaluationsmethodik angepasst werden. Dies war eines der Hauptprobleme bei der Durchführung des Q&A-Tracks der 8. TREC. Im Vorfeld dieser Konferenz (und im Nachgang dazu) wurden diese Fragen heiss diskutiert. Was sind gute/schlechte Antworten auf welche Arten von Fragen? Wie sollen die menschlichen Beurteiler entscheiden? Was waren die Grenzfälle? Was sind die Antworten, auf die man sich schliesslich einigte? Welche Folgerungen für TREC-9 zogen die Organisatoren daraus?

Eva Strübin

Fragestellung: Bei grossen Dokumentenmengen wird es schnell sehr aufwändig, gefundene Antworten zu evaluieren und bewerten. Eine Automatisierung wäre sehr nützlich (das nachträgliche Bewerten ist viel einfacher als das Finden). Was sind die hauptsächlichen Probleme? Wie sehen die vorgeschlagenen Lösungen aus? Wie sind die Resultate zu interpretieren? Wie zuverlässig sind diese Methoden? Und welche davon sind am ehesten im Rahmen von UIS verwendbar?

Charlotte Merz

Fragestellung: Der Erkennung und semantischen Klassifikation von sog. named entities wurde in der Informationsextraktion viel Aufmerksamkeit geschenkt. Ein Ziel dieser Sitzung ist es, die Ansätze und Leistungsfähigkeit bestehender Systeme vorzustellen — insbesondere auch Systeme für deutsche Texte. Zudem soll die Frage beantwortet werden, in welcher Form die Resultate der Identifikation und Klassifikation von named entities repräsentiert werden sollen für Antwortextraktion.

Fragestellung: Welche Art von lexikalischer Information, Repräsentation und Analyse ist für Antwortextraktion sinnvoll? Inwieweit können Wortartenbestimmungen, Lemmatisierung, Auflösung von Komposita, Auflösung von Derivationen (Stichwort Nominalisierung) für die Antwortextraktion nutzbar gemacht werden? Oft werden bei der Suche nach Antworten Thesauri verwendet. Was bringt der Einsatz von Thesauri und wie können sie den Bedürfnissen der Antwortextraktion angepasst werden?

Davina Rodgers

Fragestellung: Vollständige syntaktische Analyse muss keine Voraussetzung für erfolgreiche Informationsextraktion sein. So wurde beispielsweise im FASTUS-System vieles auf dieser relativ einfachen Ebene der syntaktischen Analyse erledigt. Unter dem Stichwort (NP-)-Chunking wurden einiges an Forschlung betrieben. Es sollen Ansätze der Phrasenerkennung fürs Deutsche vorgestellt und ihr Einsatz für die Aufgabe der Informations- und Antwortextraktion beurteilt werden.

Neumann 1997

ExtrAns Paper

Fragestellung: Im ExtrAns-Projekt wurde die link grammar für die syntaktische Analyse verwendet. Fürs Deutsche gibt es kein entsprechendes System, und es stellt sich die Frage, wie genau und robust überhaupt geparst werden muss. Es sollen grammatische Modelle vorgestellt und bezüglich ihrer Eignung für für Antwortextraktion beurteilt werden.

Seraina Forster

Fragestellung: Für wirklich leistungsfähige Antwortextraktion müssen nach unserer Meinung Teile der Bedeutung ganzer Phrasen und evtl. ganzer Sätze ermittelt und in logischer Form repräsentiert werden. Es stellt sich die Frage, wie die entsprechenden Logischen Formen aussehen sollen. Für die eher beschränkte Aufgabe der Antwortextraktion muss man nicht die gesamte Bedeutung (mit allen Modalitäten, Zeitangaben, adverbiellen Modifikationen etc.) repräsentieren. Aber welche Komponenten der Bedeutung sollte man repräsentieren? Und wie? Volles Prädikatenkalkül und syntaktische Varianten davon (z.B. volle Klausellogik) sind nicht immer verarbeitbar; `Datalog'' (in Prolog-Terminologie: Fakten) ist wohl zu wenig aussagekräftig; Horn-Klausel-Logik ist ok, aber was soll die zugrundeliegende Konzeptualisierung sein? Muss man gewisse Dinge aus der Logik höherer Stufen axiomatisieren?

Christos Bräunle