MySQL 5 - conversione charset su db popolato

[Marvellous]

Ho un database composto da 100 tabelle avente set di caratteri Latin1,
tutte le tabella sono create con CHARSET=latin1,
tutti i campi testuali ereditano il charset della tabella quindi latin1
Il database è già popolato da molti testi in lingua italiana.

La mia nuova necessità è gestire nello stesso DB anche testi in cirillico, quindi:
- nel db ho creato nuovi campi con CHARSET = UTF-8
- nel mio profilo odbc ho settato Character Set = UTF8
- nelle pagina web dinamiche ho inserto il tag: <meta http-equiv="Content-Type" content="text/html; charset=utf-8">

Il problema è che nella stessa pagina devo visualizzare sia testi in cirillico che in italiano, quindi presumo debba convertire tutti i campi che ospitato testi in italiano da charset=latin1 a charset=utf8

Esempio:

a) ALTER TABLE `Pippo` CHANGE COLUMN `p_ita` ` p_ita` VARCHAR(250) CHARACTER SET 'utf8';
b) ALTER TABLE `Pluto` CHANGE COLUMN `desc_ita` ` Desc _ita` TEXT CHARACTER SET 'utf8' ;
c) ALTER TABLE Paperino CHANGE COLUMN ... TEXT CHARACTER SET 'utf8' ;
... 

domande:
- le istruzioni (a),(B) , (C), ... producono una conversione automatica e corretta di tutti i caratteri già contenuti nei relativi campi ?
- esiste una un’istruzione unica che mi converte tutto il DB in utf8 senza dovero fare l'Alter su ogni campo?

Grazie a tutti

[piero.mac]

Esempio:

a) ALTER TABLE `Pippo` CHANGE COLUMN `p_ita` ` p_ita` VARCHAR(250) CHARACTER SET 'utf8';
b) ALTER TABLE `Pluto` CHANGE COLUMN `desc_ita` ` Desc _ita` TEXT CHARACTER SET 'utf8' ;
c) ALTER TABLE Paperino CHANGE COLUMN ... TEXT CHARACTER SET 'utf8' ;
... 

domande:
- le istruzioni (a),(B) , (C), ... producono una conversione automatica e corretta di tutti i caratteri già contenuti nei relativi campi ?
- esiste una un’istruzione unica che mi converte tutto il DB in utf8 senza dovero fare l'Alter su ogni campo?

Nessuna conversione automatica tra un charset single byte ed uno multi byte. Comunque basta provare su una copia della tabella per vedere cosa succede. Utf8 non saprebbe distinguere tra un carattere single byte ed uno che per lui dovrebbe essere multi. Sarebbe preveggenza. Mentre da 2 byte potresti ricavarne uno da uno non puoi sapere quale sarebbe il secondo o terzo.

Con un db di nomi di autori di tutto il mondo per mettere correttamente gli accenti al loro posto ho dovuto eseguire un dump, portare su editor in ansi, modificare il tipo di charset, settare la connessione con il nuovo charset ed eseguire il restore su una tabella di prova. Alla fine per ottenere proprio tutti gli accenti ho dovuto utilizzare questi caratteri convertiti in entita' html.

Il caracter set e' settato sul server, sul db, sui campi. In piu' sulla connessione al client ed anche il client. Vanno modificati singolarmente.

Quindi la mia esperienza e' stata: backup del latin1 e salvaguardato come storico, copia del db in altro di prova ed esecuzione di tutte le prova possibili, ottenuto un backup corretto inserimento online della variazione con la correzione dei meta ecc..

Questo e' il mio 2 cents di supporto al riguardo.

[Marvellous]

Molto chiaro Piero.mac, grazie mille.
Di seguito link ad articolo interessante relativo a quanto in oggetto:
http://docs.moodle.org/23/en/Convert...tabase_to_UTF8

[Marvellous]

Qual'ora mantenga questa situazione:

Ho un database composto da 100 tabelle avente set di caratteri Latin1,
tutte le tabella sono create con CHARSET=latin1,
tutti i campi testuali ereditano il charset della tabella quindi latin1
Il database è già popolato da molti testi in lingua italiana.

La mia nuova necessità è gestire nello stesso DB anche testi in cirillico, quindi:
- nel db ho creato nuovi campi con CHARSET = UTF-8

Quindi nella stessa tabella ho campi in latin1 e campi in utf-8,
potrei avere problemi con le fasi di DUMP e import del DB?

[piero.mac]

sinceramente uniformerei tutto il charset a partire dal db -> tabelle -> campi

[Marvellous]

sinceramente uniformerei tutto il charset a partire dal db -> tabelle -> campi

sto cercando di evitarlo per non dover convertire tutti i caratteri speciali (es: lettere accentate) in entita' html; ci impiegherei una vita.

Ho letto alcuni articoli, tra cui
http://www.bothernomore.com/2008/12/...encoding-hell/
che propongono quanto segue:
- convertire i campi di testo da latin1 in blob (binario),
- poi cambiare charset al DB,
- infine riconvertire i campi di testo da blob a UTF8

Chissa se funziona!

[Marvellous]

il medoto sopra citato funziona se nei campi latin NON sono memorizzate lettere accentate, viceversa durante la conversione da blob a varchar utf8 mysql visualizza il seguente errore:

[16:18:03] Maurizio Mangherini: ERROR 1366: Incorrect string value: '\xE0'