Jongler avec les dictionnaires dans Tsearch2

Recherche :

Mot : Pseudo : Filtrer
Bas de page
Auteur	Sujet : Jongler avec les dictionnaires dans Tsearch2

Predicator

Bonjour,

J'indexe une grosse base de données d'informations historiques, seulement voilà, le seul dictionnaire existant, fr_ispell, contient peu de (voire aucune) personnalités historiques.

Je pourrais augmenter le dictionnaire, mais ça me paraît inutile, pour peu qu'on puisse tout de même trouver certains mots.

J'ai essayé avec la config standard (anglaise) et la config française. Voici les résultats sur la même phrase :

Code :

select * from ts_debug('je suis un président appelé mitterrand');
-- Version anglaise
"default";"lword";"Latin word";"je";"{en_stem}";"'je'"
"default";"lword";"Latin word";"suis";"{en_stem}";"'sui'"
"default";"lword";"Latin word";"un";"{en_stem}";"'un'"
"default";"word";"Word";"président";"{simple}";"'président'"
"default";"word";"Word";"appelé";"{simple}";"'appelé'"
"default";"lword";"Latin word";"mitterrand";"{en_stem}";"'mitterrand'"
-- Version française
"default";"lword";"Latin word";"je";"{fr_ispell}";""
"default";"lword";"Latin word";"suis";"{fr_ispell}";""
"default";"lword";"Latin word";"un";"{fr_ispell}";""
"default";"word";"Word";"président";"{fr_ispell}";"'président'"
"default";"word";"Word";"appelé";"{fr_ispell}";"'appelé'"
"default";"lword";"Latin word";"mitterrand";"{fr_ispell}";""

Dans le premier cas, il trouve tous les mots, ne sachant pas comment récupérer leur racine. Dans le second, il gère les racines (à priori) sauf pour la personnalité, pour qui il rend le mot "vide". Ce qui empêche toute recherche sur ce mot. En gros, si un mot n'est pas dans le dictionnaire, impossible de le trouver, ce qui est plutôt impossible à utiliser.

J'ai parcouru diverses docs sur le sujet, sans bien trop comprendre comment tout ça fonctionne. Notamment, j'ai vu qu'il était possible de trouver la racine des mots avec plusieurs stemmeurs :

Citation :

General rule: For each lexeme type it's possible to specify which dictionaries and in what order, will be used to process lexeme. This information is stored in table pg_ts_cfgmap. For example:

Code :

......skip.........................................
default_russian | lword | {astrosyn,en_stem}
default_russian | lpart_hword | {astrosyn,en_stem}
default_russian | lhword | {astrosyn,en_stem}

Note, that once lexeme gets recognized by one dictionary it will not pass to the next dictionary ! So, it's meaningless to specify {simple, en_stem}, or {en_stem, astrosyn}, because 'simple' and 'en_stem' recognize any lexeme by definition.

Source

J'ai essayé en configurant français puis simple, en prenant soin d'ajouter aussi pour "word" :

Code :

select * from pg_ts_cfgmap where ts_name='default' and tok_alias in ('lword', 'lpart_hword','lhword', 'word' );
"default";"word";"{fr_ispell,simple}"
"default";"lword";"{fr_ispell,simple}"
"default";"lpart_hword";"{fr_ispell,simple}"
"default";"lhword";"{fr_ispell,simple}"

On le retrouve bien à l'exécution de la première requête, mais toujours rien :

Code :

"default";"lword";"Latin word";"je";"{fr_ispell,simple}";""
"default";"lword";"Latin word";"suis";"{fr_ispell,simple}";""
"default";"lword";"Latin word";"un";"{fr_ispell,simple}";""
"default";"word";"Word";"président";"{fr_ispell,simple}";"'président'"
"default";"word";"Word";"appelé";"{fr_ispell,simple}";"'appelé'"
"default";"lword";"Latin word";"mitterrand";"{fr_ispell,simple}";""

Pire, en ne mettant que "simple", pour me rapprocher de la configuration par défaut, rien ne change :

Code :

"default";"lword";"Latin word";"je";"{simple}";""
"default";"lword";"Latin word";"suis";"{simple}";""
"default";"lword";"Latin word";"un";"{simple}";""
"default";"word";"Word";"président";"{simple}";"'président'"
"default";"word";"Word";"appelé";"{simple}";"'appelé'"
"default";"lword";"Latin word";"mitterrand";"{simple}";""

En gros, je ne sais pas comment faire. Il n'y a pas que les dictionnaires qui entrent en jeu, car dans deux conditions presque identiques (la différence étant l'intégration du dictionnaire français dans le second cas), on a deux résultats différents...

Help quoi... [:flclsd]

Publicité

FORUM HardWare.fr

Programmation

SQL/NoSQL

Jongler avec les dictionnaires dans Tsearch2

Sujets relatifs
Dictionnaires asp	[PostgreSQL - Tsearch2] Configuration du dictionnaire
recherche interactive comme dans les dictionnaires en VBA
Plus de sujets relatifs à : Jongler avec les dictionnaires dans Tsearch2

Page générée en 0.059 secondes