Bug #833
RCP: 0.7.5, Import, tokenizer parameters
Statut: | New | Début: | 23/05/2014 | |
---|---|---|---|---|
Priorité: | Normal | Echéance: | ||
Assigné à: | - | % réalisé: | 0% |
|
Catégorie: | Import | Temps passé: | - | |
Version cible: | TXM 0.X.X |
Description
1. Vertical bar should not be used inside brackets.
Replace :
[\p{Z}|\p{C}]+
with[\p{Z}\p{C}]+
[\p{Ps}|\p{Pe}|\p{Pi}|\p{Pf}|\p{Po}|\p{S}]
with[\p{Ps}\p{Pe}\p{Pi}\p{Pf}\p{Po}\p{S}]
2. Grouping with parentheses provokes endless loop in the tokenizer
Either the tokenizer code must be changed or unescaped parentheses not allowed in the tokenizer parameters
Historique
#1 Mis à jour par Matthieu Decorde il y a environ 11 ans
- Catégorie mis à Import
#2 Mis à jour par Sebastien Jacquot il y a presque 11 ans
- Version cible changé de TXM 0.7.7 à TXM 0.7.8
#3 Mis à jour par Matthieu Decorde il y a environ 10 ans
- Version cible changé de TXM 0.7.8 à TXM 0.8.0a (split/restructuration)
#4 Mis à jour par Sebastien Jacquot il y a plus de 7 ans
- Version cible changé de TXM 0.8.0a (split/restructuration) à TXM 0.8.0
#5 Mis à jour par Matthieu Decorde il y a plus de 6 ans
- Version cible changé de TXM 0.8.0 à TXM 0.X.X