Der WaschbärIrgendwie passt das bei mir nicht zusammen …
Eigentlich wollte ich mich um meine Bremsen am Fahrrad kümmern, nötig ist es allemal.- Aber erst schnell noch die MySQL-Datenbank auf UTF-8 umstellen.
Tagsüber hatte ich ja zu diesem Thema schon auf „Tobis Couch“ gelegen. Diverse Anleitungen findet man dazu auch im Internet – es sollte also schnell gehen.
Soweit die Theorie.
Irgendwann vor einem guten Jahr hatte ich das allerdings schon mal versucht und aufgegeben. Damals funktionierten danach ein paar Plug-ins nicht mehr und ein Auskommentieren der define(„DB_CHARSET“, „utf8“);-Zeile und weiter benutzen der alten Datenbank half damals auch…

Heute wollte ich es also noch mal angehen. Schon weil mich diese ständige Es existiert eine automatische Speicherung dieses Artikels, die aktueller ist als die Version unten. Automatische Speicherung ansehen.-Zeile nervt. Wenn man dann nachsieht, was er neues hat, sind es (fast) immer nur die Sonderzeichen, die auf der einen Seite lesbar und auf der anderen Seite als Fragezeichen vorhanden sind – Nerv –

Die passendste Anleitung fand ich übrigens in einem Typo3-Blog: Türchen 10: TYPO3-Installation auf UTF-8 umstellen im Adventskalender von Tobrkyoiasrkyorkyo Liegl. Danke!

  • Als Erstes sollte man dem Apache „sagen“, dass jetzt UTF-8 der Standard ist: 
    AddDefaultCharset UTF-8
#AddDefaultCharset  ISO-8859-1
  • Für den Export der Datenbanken hatte ich mir dann schon einen Script geschrieben:
    • Start: 
      #!/bin/bash
#suf="_"
myUser="User"
datum_kurz=$(date '+%Y-%m-%d')
ff="wordpress${suf}-${datum_kurz}.dump"
    • Einen Dump der Datenbank machen: 
      mysqldump --compatible=mysql40 --default-character-set=latin1 -B wordpress${suf} -u $myUser -p > $ff
    • Erst mal die Zeilen umbrechen: 
      perl -pi  -e 's%\),\(%),\n  (%g;' $ff
    • Das „Charset“ umstellen: 
      perl -pi  -e 's%CHARSET=latin1%CHARSET=utf8%g; \
s%(\`)wordpress(\`)%$1wp_test$2%g; \
s%DEFAULT CHARACTER SET latin1 COLLATE latin1_german1_ci%DEFAULT CHARACTER SET utf8 COLLATE utf8_unicode_ci%g;' $ff

      Außerdem wurde hier gerade jedes Vorkommen der Datenbank ‚wordpress‘ in ‚wp_test‘ geändert. Torkyobirkyorkyo hatte mich nämlich auf die Idee gebracht, doch einfach die Daten in eine neue Datenbank zu schreiben und den Eintrag in der ‚config.php‘ zu ändern.

    • Wahlweise oder besser in verschiedenen Konstellationen, habe ich das Dump-File dann noch umgewandelt. Man kann bei „recode“ ja auch verschiedene Paare kombinieren, zum Beispiel „UTF-8..ISO-8859-1,HTML_4.0..ISO-8859-1„: 
      cat $ff | repre --force UTF-8..ISO-8859-1 >> $ff.latin1

      und tatsächlich stellt „file“ auch Unterschiede fest:

      # file wordpress-2008-12-11.dump*
  wordpress-2008-12-11.dump:        UTF-8 Unipre text, with very long lines
  wordpress-2008-12-11.dump.latin1: ISO-8859 text, with very long lines
    • Also wieder zurück damit in die Datenbank: 
      # mysql --default-character-set=latin1 -h localhost -u User -p < wordpress-2008-12-11.dump.latin1
Enter password:
ERROR 1071 (42000) at line 12211: Specified key was too long; max key length is 1000 bytes
    • Der Fehler kam aus einer Tabelle von OpenID: 
      # vi wordpress-2008-12-12.dump.latin1 +12211
....
CREATE TABLE up9che_openid_associations (
 server_url VARCHAR(255) NOT NULL DEFAULT '',
 handle VARCHAR(255) NOT NULL DEFAULT '',
 secret BLOB,
 issued INT(11) DEFAULT NULL,
 lifetime INT(11) DEFAULT NULL,
 assoc_type VARCHAR(64) DEFAULT NULL,
 PRIMARY KEY  (server_url(235), handle)
 ) TYPE=MyISAM;
...

      Das OpenID-Plug-in nutze ich ohnehin nicht, also gar nicht weiter darüber nachgedacht und einfach das Plug-in deaktiviert und die zugehörigen Tabellen entfernt. Zur Not kann man das Plug-in ja hinterher wieder installieren.

      DROP TABLE wp_openid_associations, wp_openid_identities, wp_openid_nonces;
    • Und alles noch mal: 
      ...
mysql --default-character-set=latin1 -h localhost -u $myUser -p < $ff.latin1
    • Nun funktionierte zwar das Einlesen der Daten, aber das Blog war nicht mehr nutzbar: 
      Warning: array_keys() [function.array-keys]: The first argument should be an array in /usr/share/wordpress/wp-includes/widgets.php on line 1044
    • Scheinbar werden die Optionen nicht mehr vernünftig aus der Tabelle „wp_options“ bezogen.
  • Den restlichen Abend habe ich dann damit verbracht, alle möglich Varianten auszutesten:
    Nachtrag: Wer jetzt an einem Auszug der ganzen Irrwege interessieren ist, liest einfach unmittelbar weiter, alle Anderen können ganz geschmeidig bei der anderen Idee weiter lesen.

    • erster Versuch
      • Einlesen der nicht umgewandelten Dump-Datei 
        mysql --default-character-set=utf8 -h localhost -u uwe -p < wordpress-2008-12-12.dump

        Danach endeten die Posts am ersten Umlaut

      • dasselbe ohne utf8: 
        mysql -h localhost -u uwe -p < wordpress-2008-12-12.dump

        brachte eine erste Besserung, das Plug-in myGallery fand plötzlich wieder die Fotos, die Artikel waren auch vollständig, allerdings waren da zahlreiche Fragezeichen im Text…

      • Bei dem folgenden Befehl fehlten die Sonderzeichen gleich ganz: 
        mysql -h localhost -u uwe -p < wordpress-2008-12-12.dump.latin1
    • Dann hatte ich noch eine andere Idee:
      • Offensichtlich ist ja nur die Tabelle „wp_options“ das Problem. Also noch mal die gesamte Datenbank neu einlesen und dann kann ich ja die Tabelle „wp_options“ per MySql-Befehl aus der alten Datenbank kopieren. Also Datenbank löschen und dann wieder neu füllen: 
        mysql --default-character-set=utf8 -h localhost -u uwe -p < wordpress-2008-12-12.dump.latin1
      • Dann die Tabelle „wp_options“ in Tabelle „wp_options_1“ „umbenennen“: 
        CREATE TABLE up9che_test.wp_options_1 (
  option_id BIGINT( 20 ) NOT NULL AUTO_INCREMENT,
  blog_id INT( 11 ) NOT NULL DEFAULT '0',
  option_name VARCHAR( 64 ) COLLATE utf8_unicode_ci NOT NULL DEFAULT '',
  option_value longtext COLLATE utf8_unicode_ci NOT NULL,
  autoload VARCHAR( 20 ) COLLATE utf8_unicode_ci NOT NULL DEFAULT 'yes',
  PRIMARY KEY ( option_id, blog_id, option_name),
  KEY option_name ( option_name )
  ) ENGINE = MYISAM DEFAULT CHARSET = utf8 COLLATE = utf8_unicode_ci AUTO_INCREMENT =107463;
INSERT INTO up9che_test.wp_options_1
  SELECT *
   FROM wp_test.wp_options;
      • Anschließend versuche ich doch mal, die Tabelle „wp_options“ aus der noch originalen „wordpress“-Datenbank in die Tabelle „wp_options“ in der Datenbank „wp_test“ zu kopieren: 
        CREATE TABLE up9che_test.wp_options (
  option_id BIGINT( 20 ) NOT NULL AUTO_INCREMENT,
  blog_id INT( 11 ) NOT NULL DEFAULT '0',
  option_name VARCHAR( 64 ) NOT NULL DEFAULT '',
  option_value longtext NOT NULL,
  autoload VARCHAR( 20 ) NOT NULL DEFAULT 'yes',
  PRIMARY KEY ( option_id, blog_id, option_name ),
  KEY option_name ( option_name )
  ) ENGINE = MYISAM DEFAULT CHARSET = latin1;
 INSERT INTO up9che_test.wp_options
  SELECT *
  FROM wordpress.wp_options;
      • Und dann das CharSet noch ändern: 
        DROP TABLE up9che_test.wp_options;
ALTER TABLE up9che_options  DEFAULT CHARACTER SET utf8 COLLATE utf8_unicode_ci;
      • Im Test ging es dann damit.
        Produktiv werde ich damit wohl noch warten, bis ich etwas mehr Zeit habe.

Deutlich nach 23 Uhr hatte ich dann plötzlich keine Lust mehr, noch nach den Bremsen zu sehen – soviel zum mal schnell umstellen.

Mit dem Fahrrad war ich übrigens heute auch unterwegs. Erst zur Arbeit und dann auch wieder Hearkyotherkyorrkyorkyo von der Kita abholen. Auf dem Rückweg nach Hause haben wir nun endlich mal den letzten Chip für das Karussell auf dem CentrO-Weihnachtsmarkt abgefahren.
Uwes Tachodaten

  • Gesamtstrecke: 18,43 km
  • reine Fahrzeit: 0:53:13 h
  • Durchschnitt: 20,78 km/h
  • Maximal: 38,3 km/h

Nachtrag:
Gerade (viel später) habe ich mal wieder ein anderes UTF8-Problem und stieß auf einen guten der Tipp, der mir half erst mal alles zu zerschießen, dann aber auch einen Schritt weiterzukommen…