■ [Google Colaboratory] Utiliser l'analyse morphologique (janome)

Présentation de l'utilisation de l'outil d'analyse morphologique japonais ** janome **. Janome est le moteur d'analyse morphologique de Python. Le texte japonais peut être divisé en éléments morphologiques pour juger de la partie du texte ou pour le séparer (diviser en mots).

  1. Install of "janome"

!pip install janome
  1. How to use

from janome.tokenizer import Tokenizer
s = Tokenizer() # <-Créer une instance de tokenizer
t = 'Il y a un écureuil'
tt = 'Il y a deux poulets dans le jardin'
for _ in s.tokenize(t):
  print(_)
for __ in s.tokenize(tt):
  print(__)

[Output] =================================================== Ni ----- Auxiliaire, Case Assistance, Général, *, *, *, Ni, Ni, Ni Wani ----- Nomenclature, Général, *, *, *, *, Wani, Crocodile, Crocodile Wani ----- Nomenclature, Général, *, *, *, *, Wani, Crocodile, Crocodile Wa ----- Assistant, Assistant final, *, *, *, *, Wa, Wa, Wa Niwatori ----- Nomenclature, Général, *, *, *, *, Niwatori, Poulet, Poulet ----- Auxiliaire, assistant de cas, général, *, *, *, ga, ga, ga Is ----- verbe, indépendance, *, *, une étape, forme de base, is, il, il

Jardin ----- Nomenclature, Général, *, *, *, *, Jardin, Niwa, Niwa Ni ----- Auxiliaire, Case Assistance, Général, *, *, *, Ni, Ni, Ni ----- Auxiliaire, affiliation, *, *, *, *, ha, wa Deux ----- nomenclature, nombre, *, *, *, *, deux, deux, deux Ailes ----- Nomenclature, terminaisons, mots auxiliaires, *, *, *, ailes, wa, wa Poulet ----- Nomenclature, Général, *, *, *, *, Poulet, Poulet, Poulet ----- Auxiliaire, assistant de cas, général, *, *, *, ga, ga, ga Is ----- verbe, indépendance, *, *, une étape, forme de base, is, il, il [end] ======================================================

Reference

Comparaison des outils d'analyse morphologique (NLP2018)

Recommended Posts

■ [Google Colaboratory] Utiliser l'analyse morphologique (janome)
■ [Google Colaboratory] Utiliser l'analyse morphologique (MeCab)
■ [Google Colaboratory] Prétraitement du traitement du langage naturel et janome
Analyse morphologique japonaise avec Janome
Utilisez music21 sur Google Colaboratory
Comment utiliser Google Colaboratory
Collaboratoire Google
Utilisez le désassembleur métabolique sur Google Colaboratory
Utilisez cartopy avec Google Colaboratory sans souffrir de bugs
Utilisez TPU et Keras avec Google Colaboratory
Installation d'outils d'analyse morphologique (MeCab, Human ++, Janome, GiNZA)
Résumé de la configuration de Google Colaboratory
Comment utiliser le modèle japonais Spacy avec Google Colaboratory
Je ne peux pas utiliser la commande darknet dans Google Colaboratory!
Créer un environnement pour utiliser CaboCha avec Google Colaboratory
Utilisons Python Janome facilement
[Note] WordCloud à partir de l'analyse morphologique
[Python] Analyse morphologique avec MeCab
Python: texte japonais: analyse morphologique
Essayez StyleGAN avec Google Colaboratory
Étudiez Python avec Google Colaboratory
Traitement du langage naturel 1 Analyse morphologique
Analyse morphologique japonaise avec Python
Essayez OpenCV avec Google Colaboratory
Organisation de l'outil: Google Colaboratory (mise à jour 2020.2.24)
[PowerShell] Analyse morphologique avec SudachiPy
Pandas 100 coups sur Google Colaboratory
Comment utiliser Google Colaboratory et exemple d'utilisation (PyTorch × DCGAN)