NLP Academy · Lektion

Die wichtigsten Wörter finden

Begriffe nach ihrer Aussagekraft für jedes Dokument ordnen

Lektion 4 von 413 Schritte

Die wichtigsten Wörter finden ist eine kostenlose NLP Academy-Lektion auf CoddyKit. Dies ist Lektion 4 von 4. Du kannst die komplette Lektion unten kostenlos lesen – dann übst du sie direkt im Browser mit einem integrierten Code-Editor und einem KI-Tutor rund um die Uhr. Sie ist Teil des NLP Academy-Lernpfads, und dein Fortschritt wird über Web und CoddyKit-App synchronisiert. Der NLP Academy-Kurs umfasst insgesamt 4 Lektionen.

Von Werten zu Erkenntnissen

Eine TF-IDF-Matrix besteht aus vielen Zahlen, aber der eigentliche Nutzen liegt in ihrer Interpretation. Die Wörter mit den höchsten Werten zeigen, worum es in einem Dokument wirklich geht.

Eine Zeile pro Dokument

Jede Zeile der Matrix entspricht einem Dokument, jede Spalte einem Wort. Um wichtige Begriffe zu finden, durchsuchen Sie eine einzelne Zeile nach ihren höchsten Werten.

Eine Zeile herausgreifen

Greifen Sie das gewünschte Dokument heraus und wandeln Sie es in ein flaches Array um. Dieser Vektor enthält für jedes Wort im Vokabular eine TF-IDF-Gewichtung.

row = X[0].toarray().flatten()

Wörter und Werte zuordnen

Ordnen Sie mithilfe der Merkmalsnamen jedem Wert sein Wort zu. Nun gehört jeder Wert eindeutig zu dem Begriff, zu dem er tatsächlich gehört.

words = vec.get_feature_names_out()
pairs = list(zip(words, row))

Nach Gewichtung sortieren

Sortieren Sie diese Paare vom höchsten zum niedrigsten Wert. Die Wörter an der Spitze sind die charakteristischsten Begriffe dieses Dokuments.

pairs.sort(key=lambda p: p[1], reverse=True)

Die wichtigsten auswählen

Meist benötigen Sie nicht mehr als eine Handvoll. Wenn Sie die obersten Ergebnisse auswählen, erhalten Sie eine schnelle, verständliche Zusammenfassung des Dokuments. 🏆

for word, score in pairs[:5]:
    print(word, round(score, 3))

Das sind Schlüsselwörter

Diese obersten Begriffe können automatisch als Schlüsselwörter zum Verschlagworten, für die Suche oder zum Erstellen einer schnellen Themenbezeichnung dienen – ganz ohne manuellen Aufwand.

Dokumente vergleichen

Wenden Sie denselben Ansatz auf jede Zeile an, und Sie erhalten für jedes Dokument einen Fingerabdruck. Der Vergleich dieser Fingerabdrücke zeigt, welche Texte einander ähneln.

Auf unbrauchbare Begriffe achten

Wenn ungewöhnliche Tokens hohe Werte erhalten, muss Ihr Text zunächst stärker bereinigt werden. Gute Schlüsselwörter setzen eine gute Vorverarbeitung vor TF-IDF voraus.

Ein schneller Suchtrick

Die Überschneidung zwischen zwei TF-IDF-Vektoren zu messen, ermöglicht eine einfache Suche nach Ähnlichkeit. Dokumente mit vielen Wörtern hoher Gewichtung werden als ähnlich eingestuft.

Sie haben ein Mini-Tool erstellt

Mit wenigen Zeilen extrahieren Sie nun die Wörter, die ein beliebiges Dokument definieren. Dieser Schlüsselwort-Extraktor ist ein wirklich nützliches NLP-Werkzeug. ⭐

Kurze Überprüfung

Wie finden Sie anhand der TF-IDF-Zeile eines Dokuments dessen wichtigste Wörter?

Zusammenfassung

Sie haben eine TF-IDF-Zeile sortiert, Werte Wörtern zugeordnet und die wichtigsten Schlüsselwörter herausgefiltert. Dieselbe Idee ermöglicht Verschlagwortung und Ähnlichkeitssuche. ✅

Kostenlos starten

Lerne Python mit einem KI-Tutor — kostenlos

Schreibe und führe echten Code in deinem Browser aus, bekomme sofortige Hilfe von einem 24/7 KI-Tutor und setze dein Lernen im Web oder in der App fort.

Kurse
30
Lektionen
120

Häufig gestellte Fragen

Ist die Lektion „Die wichtigsten Wörter finden“ kostenlos?

Ja — der vollständige Text von „Die wichtigsten Wörter finden“ ist hier im Web kostenlos zu lesen. Um sie interaktiv zu üben (integrierter Code-Editor und 24/7 KI-Tutor) und den Rest des NLP Academy-Kurses freizuschalten, upgrade auf CoddyKit PRO. Der NLP Academy-Kurs umfasst insgesamt 4 Lektionen.

Was lerne ich in „Die wichtigsten Wörter finden“?

Begriffe nach ihrer Aussagekraft für jedes Dokument ordnen Du übst NLP Academy mit praktischem Code, den du direkt im Browser ausführst, und ein 24/7 KI-Tutor beantwortet deine Fragen während du die Lektion bearbeitest.

Brauche ich Erfahrung, um NLP Academy zu starten?

Keine Vorkenntnisse erforderlich. NLP Academy auf CoddyKit ist für Anfänger bis fortgeschrittene Lernende strukturiert, sodass du hier starten oder von Anfang an beginnen und in deinem eigenen Tempo voranschreiten kannst. Dies ist Lektion 4 von 4.

Wie lange dauert die Lektion „Die wichtigsten Wörter finden“?

Die meisten CoddyKit-Lektionen dauern etwa 5–10 Minuten. Jede ist kompakt und interaktiv, sodass du stetig Fortschritte machst und genau dort weitermachst, wo du aufgehört hast – im Web und in der App.

Kann ich in dieser NLP Academy-Lektion Code schreiben und ausführen?

Ja. Jede NLP Academy-Lektion enthält einen integrierten Code-Editor, sodass du echten Code direkt in deinem Browser schreibst und ausführst und sofort KI-Feedback erhältst — ohne lokale Einrichtung erforderlich.

Alle Lektionen in diesem Kurs

  1. Das Problem mit Rohzählungen
  2. Termhäufigkeit und inverse Dokumenthäufigkeit
  3. TF-IDF mit scikit-learn
  4. Die wichtigsten Wörter finden
← Zurück zu NLP Academy