Je veux dire que s'il avait une liste de phrases avec leur segmentation correcte (le segmenteur peut se tromper, il faut qu'un humain vérifie que c'est correct), je pourrais voir à quel point mon segmenteur produit des segmentations correctes.
Quant au fichier que tu as mis en lien, je n'ai pas très bien compris pourquoi tu me l'envoyais. Du reste, je ne sais pas non pus quel encodage c'est, mais probablement pas de l'UTF8.
Et merci pour les liens, en effet, les Penn treebanks ça doit faire l'affaire, je vais regarder ça d'un peu plus près.
[^] # Re: Autre segmenteur
Posté par vermillon . En réponse au journal Apprendre à lire et taper en chinois avec des outils libres. Évalué à 1.
Je veux dire que s'il avait une liste de phrases avec leur segmentation correcte (le segmenteur peut se tromper, il faut qu'un humain vérifie que c'est correct), je pourrais voir à quel point mon segmenteur produit des segmentations correctes.
Quant au fichier que tu as mis en lien, je n'ai pas très bien compris pourquoi tu me l'envoyais. Du reste, je ne sais pas non pus quel encodage c'est, mais probablement pas de l'UTF8.
Et merci pour les liens, en effet, les Penn treebanks ça doit faire l'affaire, je vais regarder ça d'un peu plus près.