Stoppwörter✋

Mar 02 2023
Sie fragen sich vielleicht, was diese Stoppwörter sind? Im Grunde ist dies ein Konzept im NLP und bezeichnet die am häufigsten verwendeten Wörter in einem Satz. Zum Beispiel Artikel wie A, An, The und Hilfsverben is, are, was usw.

Sie fragen sich vielleicht, was diese Stoppwörter sind?

Im Grunde ist dies ein Konzept im NLP und bezeichnet die am häufigsten verwendeten Wörter in einem Satz. Zum Beispiel Artikel wie „A“, „An“, „The“ und die Hilfsverben „ is“, „are“, „was “ usw. Es gibt viele Wörter im Englischen, bei denen wir sie häufig zum Satzbau verwenden. Auch wenn wir diese Stoppwörter aus einem Satz entfernen, können wir dennoch die Grundbedeutung des Satzes verstehen.

Lassen Sie mich Ihnen ein Beispiel zeigen,

Ursprünglicher Absatz: Ein Stoppwort ist ein häufig verwendetes Wort, das eine Suchmaschine so programmiert hat, dass sie es ignoriert, sowohl beim Indizieren von Einträgen für die Suche als auch beim Abrufen als Ergebnis einer Suchabfrage.

Lasst uns beginnen,

Zuerst benötigen wir die vordefinierten Pakete nltk und stopwords

NLTK importieren

nltk.download('Stoppwörter')

Stoppwörter aus nltk.corpus importieren

Als nächstes erstellen wir eine Liste mit Stoppwörtern

stop_words = stopwords.words('english')

Als nächstes können wir unsere eigene benutzerdefinierte Methode verwenden, um zu prüfen, ob ein Wort im ursprünglichen Absatz in der Stoppwortliste vorhanden ist oder nicht. Auf dieser Grundlage können wir Sätze ohne Stoppwörter erhalten.

Habe den Codeausschnitt angehängt.

Dieses Konzept wird verwendet, um die Grundbedeutung eines bestimmten Satzes zu ermitteln. Lassen Sie uns im nächsten Blog ein weiteres Konzept von NLP besprechen.

Bleiben Sie dran…

Wenn Sie Vorschläge oder Fragen haben, posten Sie diese in den Kommentaren.