7.3
 Text-Mining

Das Problem 

Volltextsuche vs. Text-Mining

• In der Volltextsuche geht es darum, ad hoc ein Informationsbedürfnis zu stillen, indem relevante Dokumente gefunden werden, welche die Information (hoffentlich) enthalten.
• Im Text-Mining geht es darum, automatisch neue Information aus Texten zu erschliessen.

Data-Mining vs. Text-Mining

• Im Data-Mining wird mit statistischen und Methoden der künstlichen Intelligenz versucht, aus strukturierten Daten Ähnlichkeiten, Tendenzen und Zusammenhänge in grossen Datenmengen zu entdecken.
• Im Text-Mining soll dasselbe aus Text-Daten heraus geschehen – der grössten Informationsquelle überhaupt.

Literature Based Discovery [Hearst 1999]

Ein reales Beispiel aus der Medizin zur Forschungsinspiration:

“When investigating causes of migraine headaches, he [Don Swanson] extracted various pieces of evidence from titles of articles in the biomedical literature:”

Paraphrasen:

• stress is associated with migraines
• stress can lead to loss of magnesium
• calcium channel blockers prevent some migraines
• magnesium is a natural calcium channel blocker
• migraine patients have high platelet aggregability
• magnesium can suppress platelet aggregability
• …

Daraus entstand die Hypothese, dass Magnesium und Migräne in einem Zusammenhang stehen können .

Modernes biomedizinisches Text-Mining 
Unser Institutsprojekt ontogene.org hat an verschiedenen Text-Mining-Wettbewerben (shared task) teilgenommen.