Onderwerp: Mysql en UTF-8 problemen

Hallo,

Ik ben momenteel bezig met een migratie van een Ruby On Rails applicatie van één server naar de andere. Nu ben ik op een vervelend probleem gebotst dat ik niet kan oplossen.

Het is een franse website en bijvoorbeeld het woord "Précieux" wordt op de oude server correct weergegeven maar op de nieuwe server wordt het weergeven als "Pr?cieux".

Ik ben eens in de database gaan kijken op de oude server en daar staat dit record ook als volgt in de database "Pr?cieux", dus het wordt wel goed weergegeven op de oude server maar staat wel fout in de database. De database is een mysql database.

Ik gebruik net dezelfde code en database op de nieuwe server.

Hier vind je een bewijs van mysql rijen + de instellingen :

http://pastie.org/1687438

Hier ook de antwoordheaders :

http://pastie.org/1687517

Iemand die mij kan helpen?

Groetjes,
Dries

The Absolute Minimum Every Software Developer Absolutely, Positively Must Know About Unicode and Character Sets (No Excuses!)

Oorspronkelijk geplaatst door ilnee

The Absolute Minimum Every Software Developer Absolutely, Positively Must Know About Unicode and Character Sets (No Excuses!)

Denkt u dat daarmee het probleem opgelost zal worden? De dingen die ze aangeven zijn allemaal reeds toegepast, dit zou je ook zien in de headers...

Ik zie aan de headers dat dat niet het geval is. Content-Type wordt veel te laat gespecificeerd.

Oorspronkelijk geplaatst door ilnee

Ik zie aan de headers dat dat niet het geval is. Content-Type wordt veel te laat gespecificeerd.

Ok sorry, ik dacht dat het genoeg was dat deze er tussen stond. Hoe kan ik deze dan vroeger laden?

Direct na het maken van de MySQL connectie:

PHP Code:

$mysqli -> set_charset('utf8'); 


kan ook helpen.
De clue is dat het overal UTF-8 is, heel consequent doorvoeren.
De tabellen, de connectie, de html, de header.

Oorspronkelijk geplaatst door ebhosting

Direct na het maken van de MySQL connectie:

PHP Code:

$mysqli -> set_charset('utf8'); 


kan ook helpen.
De clue is dat het overal UTF-8 is, heel consequent doorvoeren.
De tabellen, de connectie, de html, de header.

Het is niet op niveau van de applicatie want ik gebruik dezelfde code en database op beide servers...

Doe nou maar gewoon...

Oorspronkelijk geplaatst door Freakingme

Doe nou maar gewoon...

Zoals ik in mijn startpost al aangaf is het een Ruby On Rails applicatie en daar is utf8 ingesteld as encoding bij beide applicaties als het gaat om connectie te maken met de database.

Als het nu fout staat in de database, dan kun je dat beter eerst herstellen. Of een testje mee doen in elk geval. Aanpassen in de database en controleren op de site. Dan kun je uitsluiten, dat het in scripts of instellingen fout staat/gaat.

Staat in de tabellen zelf de Collatie ingesteld op utf8_general_ci?
Je mysql server kan wel utf-8 ingesteld staan, maar de tabellen moeten dat ook zijn.

OK, ik heb het probleem beter kunnen situeren. Het probleem is het volgende:

1. Op de oude server wanneer ik naar records ga kijken zie ik een ? ipv é
2. Als ik een mysql dump doe op de oude server dan staan in de dump de é ook als é
3. Als ik import op de nieuwe server dan staat é terug als ?, maar wordt deze op applicatieniveau niet geconverteerd

Hoe kan ik dit gewoon als é in de database importen?

Dit is hoe een create_table eruitziet in de dump :

http://pastie.org/1689163
en bovenaan
http://pastie.org/1689191

En als je de dump via PHP importeert? Beetje extra werk, maar dan kun je de utf-8 beter managen. Dat moet zeker goed gaan.

Oorspronkelijk geplaatst door ebhosting

En als je de dump via PHP importeert? Beetje extra werk, maar dan kun je de utf-8 beter managen. Dat moet zeker goed gaan.

Ik heb geen PHP geïnstalleerd op de server want dit is een RubyOnRails server...

Kijk ff naar charset van mysql staat Wass op latin

bij het dumpen gaat het prima zoals je aangaf, als je bij het inlezen:
mysql --default-character-set=utf-8 < export.sql doet dan zal de import ook als UTF-8 gedaan worden.
Je kunt in de export.sql ook dit toevoegen: SET NAMES utf8;
Indien je tabel een andere codering heeft zal mysql dit zelf omzetten welke voor die tabel ingesteld staat.