cpdetector

projet cpdetector est un petit cadre encore intelligent pour la détection de page de codes.
cpdetector est un cadre petit mais intelligent pour la détection de code qui intègre différentes stratégies. Il peut être utilisé comme une bibliothèque pour un logiciel tiers qui accède à des données textuelles sur le réseau.
Il comprend également une mise en œuvre des meilleures pratiques sous la forme d'un outil de ligne de commande qui permet le tri et la transformation de grandes collections de documents en fonction de leur page de code.
Stratégies disponibles incluent: jchardet (exclusion, l'analyse de la fréquence et de devinettes), la détection de la propriété charset HTML, et la détection de la déclaration de codage XML.
Qu'est-ce qu'une page de code?
Dans un premier temps, un document textuel est rien de plus que des séquences de bits. Un ordinateur doit décider, comment il peut afficher ces données sous forme de caractères (qui sont identifiés par l'ordinateur sous forme de nombres).
Une page de code - qui est également connu comme l'encodage des caractères - cartes les données brutes d'un document textuel à des personnages. La page de code ASCII original pour exemple ne utilise que 7 bits d'un octet (octet) pour décider du caractère qui est représenté permettant ainsi que de cartographier 128 personnages différents. Dans la mémoire passé était cher et les ordinateurs le plus souvent seulement eu registres et bus pour 8 bits.
Quand un ordinateur central a été conçu il devait être décidé, quels caractères il devrait soutenir. Les médecins et les mathématiciens par exemple nécessaires caractères spéciaux pour les équations. En conséquence, un ordinateur souvent livré avec une page de codes particulière

Quoi de neuf dans cette version:.

• Ce bugfix majeure version corrige deux problèmes en mode batch de ligne de commande.
• Le commutateur de sauter mobiles documents non détectées travaille maintenant à nouveau.
• Aucune tentative ne sera faite pour transcoder documents non détectés (celui-ci a causé flux de programme exceptionnel).

Ce qui est nouveau dans la version 1.0.8:

• Cette version est une version de la stabilité et fixe l'octet commander détection de marque et d'incompatibilité avec OpenJDK. Elle exige également Java 1.5 maintenant.