Converion UTF8 ISO-8859-1
Denis
Je dois traiter des fichiers encod�s en UTF 8 avec des outils qui ne savent
pas traiter cet encodage. J'ai donc besoin d'une conversion pr�liminaire.
Je pr�cise qu eje suis sous Windows et que je cherche quelque chose qui me
permette, grossi�rement de prendre le fichier UTF-8 en entr�e et me restitue
le fichier ISO 8859 en sortie.
On m'a parl� de recode ou iconv mais je ne parviens pas � trouver les outils
qui me permette de les utiliser.
Merci pour votre aide,
Denis.
Alexandre Bacquart
> Bonjour,
>
> Je dois traiter des fichiers encod�s en UTF 8 avec des outils qui ne savent
> pas traiter cet encodage. J'ai donc besoin d'une conversion pr�liminaire.
>
> Je pr�cise qu eje suis sous Windows et que je cherche quelque chose qui me
> permette, grossi�rement de prendre le fichier UTF-8 en entr�e et me restitue
> le fichier ISO 8859 en sortie.
Rien � voir avec le C. Sinon, il y a un outil mortel sous Windows pour
le faire, �a s'appelle Notepad je crois ("Save As" -> encoding ANSI).
--
Alex
Marc Espie
Mais si, mais si, ca peut avoir a voir avec le C.
Par exemple, avec setlocale(3) ou fgetws(3).
Bon, bien sur, c'est pas totalement sur que ca va faire quelque chose de tres
raisonnable si on jongle avec setlocale(3) pour changer d'etat alors qu'on est
en train de lire d'un fichier et ecrire sur un autre... mais bon, c'est le
lot commun du C, avec tout son etat global qui est souvent un tantinet chiant
a gerer.
Si le posteur ne dedaigne pas a regarder du cote du C++, les facets devraient
lui donner une solution bien plus acceptable. ;-)
Mickaël Wolff
>
> On m'a parl� de recode ou iconv mais je ne parviens pas � trouver les outils
> qui me permette de les utiliser.
>
iconv + API m'a dpnn� en premier r�sultat le lien suivant
<http://publib.boulder.ibm.com/iseries/v5r1/ic2924/index.htm?info/apis/iconv.htm>
--
Micka�l Wolff aka Lupus Michaelis
http://lupusmic.org
Antoine Leca
> Je dois traiter des fichiers encodï¿œs en UTF 8 avec des outils qui ne savent
> pas traiter cet encodage. J'ai donc besoin d'une conversion prï¿œliminaire.
La conversion ￜ idiote ￜ UTF-8 vers ISO/CEI 8859-1 est trￜs simple, il
n'y a que trois cas actifs distincts (code ￜcrit d'une traite, non testￜ) :
unsigned char c=*p++;
if( c<=0x7F ) donne(c);
else if( /*c>=0x80 &&*/ c<=0xC1 ) ERREUR_ENCODAGE();
else if( c==0xC2 ) donne(*p++);
else if( c==0xC3 ) donne(0x40+*p++);
else if( /*c>=0xC4 &&*/ c<=0xDF ) p+=1, donne(SUB);
else if( /*c>=0xE0 &&*/ c<=0xEF ) p+=2, donne(SUB);
else if( /*c>=0xF0 &&*/ c<=0xF7 ) p+=3, donne(SUB);
else if( /*c>=0xF8 &&*/ c<=0xFB ) p+=4, donne(SUB);
else if( /*c>=0xFC &&*/ c<=0xFD ) p+=5, donne(SUB);
else/*if( c>=0xFE && c<=0xFF)*/ ERREUR_ENCODAGE();
SUB est le caractï¿œre de bourrage pour remplacer des caractï¿œres inconnus.
ï¿œvidemment, tu peux^W dois ï¿œtre plus strict dans ta conversion, et gï¿œrer
correctement les lectures en avant (le p+=X au-dessus peut aller au-delￜ
de la fin du tampon, ce n'est pas contrￜlￜ, c'est MAL) ; voire ￜtre plus
restrictif sur les donnï¿œes en entrï¿œe, par exemple vï¿œrifier que les
donnï¿œes aprï¿œs le premier "c" sont bien dans la gamme 0x80..0xBF. Et
officiellement les caractￜres de U+0080/0x80 ("\xC2\x80") ￜ U+009F/0x9F
("\xC2\x9F") ne sont pas des caractï¿œres autorisï¿œs, ceci n'est pas non
plus filtrￜ.
Il faut bien voir que ce code ne traite QUE les caractï¿œres du jeu
iso-8859-1, au sens strict; ainsi ￜ, ￜ ou ￜ ne seront pas convertis du
tout, mï¿œme pas remplacï¿œs par Y dans le dernier cas, ou par le symbole
ￜquivalent en forme de soleil pour le symbole ￜ. Idem pour les
caractï¿œres Windows comme les apostrophes courbes...
> Je prï¿œcise qu eje suis sous Windows et que je cherche quelque chose qui me
> permette, grossiï¿œrement de prendre le fichier UTF-8 en entrï¿œe et me restitue
> le fichier ISO 8859 en sortie.
>
> On m'a parlￜ de recode ou iconv mais je ne parviens pas ￜ trouver les outils
> qui me permette de les utiliser.
iconv remplace recode, donc tu peux oublier ce premier.
iconv reprￜsente deux choses, d'une part une _fonction_ de conversion (ￜ
utiliser en C, donc), d'autre part un utilitaire qui convertit des
fichiers ￜ la volￜe. Si c'est le second qui t'intￜresse, comme ton
message peux le laisser ￜ penser, tu t'es largement trompￜ de groupe !
Si c'est bien le premier, comme dit Mickaï¿œl une recherche Google te
donne une myriade de solutions ; pour ma part, j'utilise avec grand
succï¿œs "win32" comme ï¿œlï¿œment de recherche pour trouver les portages
Windows des bibliothï¿œques qui m'intï¿œressent ; et ï¿œvidemment le premier
rï¿œsultat Google est exactement ce qu'il faut. Mais bon, ce n'est pas non
plus un groupe dￜdiￜ ￜ l'utilisation de Google...
Antoine