Maison > développement back-end > Tutoriel Python > Comment utiliser le tokenizer IKAnalyzer pour personnaliser le dictionnaire étendu

Comment utiliser le tokenizer IKAnalyzer pour personnaliser le dictionnaire étendu

坏嘻嘻
Libérer: 2018-09-14 16:54:57
original
4799 Les gens l'ont consulté

Cet article présente principalement comment utiliser le segmenteur de mots IKAnalyzer pour personnaliser le dictionnaire étendu. J'espère que vous pourrez apprendre patiemment.

Après avoir téléchargé le package de distribution complet d'IKAnalyzer, le package d'installation d'IK Analyzer contient :
1. "Manuel d'utilisation de IKAnalyzer Chinese Word Segmenter V2012"
2. >3 . IKAnalyzer.cfg.xml (fichier de configuration de l'extension du segmenteur de mots)
4. stopword.dic (dictionnaire d'arrêt)
5. LICENSE.TXT (déclaration de droits d'auteur Apache)
Son installation et le déploiement est très simple, déployez IKAnalyzer2012.jar dans le répertoire lib du projet ;
Les fichiers IKAnalyzer.cfg.xml et stopword.dic sont placés dans le répertoire racine de la classe (pour les projets web, généralement le
WEB). -Répertoire INF/classes, le même. Les fichiers de configuration hibernate, log4j et autres sont les mêmes).

Pour étendre le dictionnaire personnalisé, ouvrez IKAnalyzer.cfg.xml

Comment utiliser le tokenizer IKAnalyzer pour personnaliser le dictionnaire étendu

et supprimez les commentaires du dictionnaire étendu.

Comment utiliser le tokenizer IKAnalyzer pour personnaliser le dictionnaire étendu

En même temps, créez un nouveau fichier ext.dic dans le répertoire racine de la classe, c'est-à-dire le dossier src. Une fois construit, ouvrez ext.dic avec le logiciel Notepad++.

Comment utiliser le tokenizer IKAnalyzer pour personnaliser le dictionnaire étendu

Recommandations associées :


Explication détaillée de la façon d'utiliser les segmenteurs de mots chinois Java open source 11 et comparaison des effets de segmentation de mots

Utilisation du serveur de mots clés Discuz pour implémenter PHP segmentation de mots chinois_PHP tutoriel

Ce qui précède est le contenu détaillé de. pour plus d'informations, suivez d'autres articles connexes sur le site Web de PHP en chinois!

Étiquettes associées:
source:php.cn
Déclaration de ce site Web
Le contenu de cet article est volontairement contribué par les internautes et les droits d'auteur appartiennent à l'auteur original. Ce site n'assume aucune responsabilité légale correspondante. Si vous trouvez un contenu suspecté de plagiat ou de contrefaçon, veuillez contacter admin@php.cn
Tutoriels populaires
Plus>
Derniers téléchargements
Plus>
effets Web
Code source du site Web
Matériel du site Web
Modèle frontal