nlp

NLP -Grundlagen

• Einführung in gemeinsame Datensätze
• Empfohlene Aktualisierungsquelle
• Erstellen Sie eine NLP -Toolbox
• So messen Modelle Klassifizierungsmodelle für maschinelles Lernen
• Tasche mit Wörtern und TFIDF -Modellen
• Word2VEC -Modell und Doc2VEC -Modell
• Do-it-yourself word2Vec Modell
• Dokumentklassifizierung mit mehrschichtiger Perzeptron
• Verwenden Sie FastText für die Dokumentenklassifizierung
• Verwenden von LDA für die Modellierung von Dokumententhemen
• Verwenden Sie Jiebeba für chinesische Annotation für einen Wörter
• Automatische Keyword -Extraktion mit Textrank und TFIDF
• Ähnlichkeit des Dokuments

NLP -Anwendungsfälle

• Führen Sie die Stimmungsanalyse von Food -Kommentaren durch

Lassen Sie die Maschine den Text verstehen

Bilder, Wörter und Geräusche sind die drei häufigsten Formen des menschlichen Kontakts und verstehen die äußere Welt, und Wörter sind die am einfachsten konservierten und ausgetauschten Formen. Eine große Anzahl menschlicher Zivilisationen wird letztendlich in Form von Wörtern erhalten; Wie können Maschinen in der Lage sein, mit Menschen zu kommunizieren, menschliche Gedanken zu verstehen und letztendlich Worte und verschiedene Ideen und Absichten wie Menschen zu verstehen? Die sogenannte NLP-Verarbeitung natürlicher Sprache ist eine wichtige unterstützende Technologie.

NLP und Sicherheit

In traditionellen Web -Straftaten und -verteidigung hat jeder eine unlösliche Verbindung zum HTTP -Protokoll gebildet. Im Bereich Sicherheitsbereich sind Web -Straftaten und -verteidigung jedoch nur eine kleine Niederlassung. Viele offensichtlich nicht verwandte Spam-E-Mails können von Menschen gesehen werden, aber Regeln basierende Spam-Gateways sind immer unbefriedigend zu verarbeiten. Immer mehr E-Commerce, Foren und sogar Video-Websites können immer offensichtliche persönliche Angriffe oder illegale Informationen sehen, aber der auf Regeln basierende Filtermechanismus wird immer umgangen. Menschen können den vierundzwanzig Wege-Schalter leicht verstehen und wissen, ob ein Apfel ein Obst oder ein Mobiltelefon ist, aber wie macht die Maschine das? Die Antwort lautet NLP.

Ein Open -Source -NLP -Buch

Dies kann das erste NLP -Einführungsbuch sein, das mit Open -Source -Ideen geschrieben wurde, und der gesamte Schreibprozess ist auf meinem GitHub.

 https://github.com/duoergun0729/nlp

Der Grund, warum ich mit der Open -Source -Idee schreiben möchte, ist hauptsächlich, dass die NLP -Technologie, insbesondere die NLP -Technologie auf der Grundlage maschineller Lernen, sehr schnell entwickelt wird. der Massenproduktion im Jahr 2017. Aber viele natürliche Sprachbücher bleiben im Rahmen der Universitätskurse, und sogar Wortvektoren sind selten involviert. Ich kann Papierbücher mit relativ umständlichen Zyklen auf GitHub schreiben und aktualisieren und auch schnell geändert werden, wenn es eine Errata gibt. Ich habe derzeit drei von ihnen abgeschlossen, und ich werde den Inhalt später weiter aktualisieren.

Lizenz

© 2018 ~ 2020 Bruder Dou.

Diese Arbeit ist im Rahmen der Creative Commons Attribution-Noncommercial Use 4.0 International Lizenz lizenziert. Jedes kommerzielle Verhalten, das das Buch ohne meine Erlaubnis verwendet, ist illegal.

Belohnen

Das Schreiben eines Buches ist nicht einfach, insbesondere mit persönlicher Ruhezeit zu schreiben.

Wenn Sie die Form von Wissensplanet bevorzugen, können Sie sich meinem Wissensplanet anschließen, und NLP-bezogene Fragen können auch auf dem Planeten gestellt werden.