「文字化けに関するトラブルシューティング」

文字コード

ちょっと前の話ですが、こんなツイートを見かけました。

職業柄文字化けデータを見ると復元せずにはいられないので、文字化けデータを私に見せるのはやめて欲しいです。

文字化け業界に長くいると、経験上パッと見てなんで文字化けしたのかだいたいわかるようになります。 今回のは、本来 EUC-JP なのにシフトJISとして表示しちゃってる感じです。

半角カナが多い場合はだいたいこのパターンです。

% ruby -e 'puts "日本語にほんごニホンゴ".encode("EUC-JP").force_encoding("SHIFT_JIS").encode("UTF-8", undef: :replace, invalid: :replace, replace: "?")'
ﾆ?ﾜｸ?ﾋ､ﾛ､?ｴ･ﾋ･ﾛ･?ｴ

画数の多い漢字の中に半角カナが少々混じるのは、UTF-8 をシフトJISとして表示しています。

% ruby -e 'puts "日本語にほんごニホンゴ".encode("UTF-8").force_encoding("SHIFT_JIS").encode("UTF-8", undef: :replace, invalid: :replace, replace: "?")'
譌･譛ｬ隱槭↓縺ｻ繧薙＃繝九?繝ｳ繧ｴ

$ や % が１文字置きに現れるのは ISO-2022-JP の ESC が落ちたか、EUC-JP の 8bit目が落ちた場合です。 ISO-2022-JP の場合は $B や (B が現れます。

% ruby -e 'puts "日本語にほんごニホンゴ".encode("ISO-2022-JP").force_encoding("ASCII-8BIT").gsub(/\e/n,"?")'
?$BF|K\8l$K$[$s$4%K%[%s%4?(B
% ruby -e 'puts "日本語にほんごニホンゴ".encode("EUC-JP").force_encoding("ASCII-8BIT").bytes.map{|b| b & 0x7F}.pack("c*")'
F|K\8l$K$[$s$4%K%[%s%4

ということで、変換に伴って欠落してしまうデータはあるものの、元の文字コードが何だったのかがわかってしまえば、文字化けしたデータから元データを復元するのはそんなに難しくありません。

ですが、今回のは画像だし、フォントサイズも小さいので画数の多い字は潰れてしまって判別できなくて難易度高いです。

とりあえず文字を拾って見ます。「・」は変換できなかった文字(「･」の一部も)で、「？」は変換できたものの画像から判別できなかった文字です。

ｻﾄﾇｰ､ﾊ､ｬ､鮑ｽ･ﾐ｡ｼ･ｸ･逾・ﾎ｣ﾗ｣？？茱・・・ﾇ､ﾏ
ﾊｸｻ？ｽ､ｱ､・ﾊ､ｪ､ｹ､ｳ､ﾈ､ﾏｽﾐﾍ？ﾞ､ｻ､・｣
｣ｲ｣ｰ｣ｲ｣ｵﾇｯﾈｯﾇ莽ｽﾄ熙ﾎ｣ﾗ｣？？茱・・・ﾇ､ﾏﾂﾐｱ･､ｷ､ﾞ､ｹ｡｣
､ｳ､ﾎ･ﾈ･？ﾖ･・ｷ･蝪ｼ･ﾆ･｣･・ｰ､ﾇ､ﾏ｡｢
､ｳ､ﾎ､？ｦ､ﾊﾌ萃熙ﾎｸｶｰ・・ﾍ､ｭｻﾞ､癸｢
ﾌ萃熙・・？ｹ､・・？・ｨ､ｷ､ﾞ､ｹ｡｣
ｼﾁﾌ荀ﾎﾅ妤ｨ､・ｯ･・ﾃ･ｯ､ｷ､ﾆ､ｯ､ﾀ､ｵ､､｡｣
ｼ・遉ﾋｽｾ､ﾃ､ﾆｿﾊ､ﾟ､ﾊ､ｬ､？萃熙・・？ﾇ､ｭ､ﾞ､ｹ｡｣

､ﾉ､ｦ､ｷ､ﾞ､ｹ､ｫ｡ｩ

ｻﾅﾊ･､ｬ､ﾊ､､､ｫ､？ﾖ･ﾀ･､･｢･？ｰ､ﾇﾍｷ､ﾜ､ｦ｡ﾗ､・ﾜﾍ・｣
｡ﾖﾅﾏﾉ・ｷ･・､･ﾁ､ﾎ｣ﾄ｣螢凜癸？・・｡｣ﾗ｣ﾏ｣ﾒ｣ﾌ｣ﾄ｡ﾗ､・ﾜﾍ・｣

これを単純に変換すると

残念ながら現バージョ??E裡廝?H?H筍?E?E?E任?
文??H修韻?E覆?垢海箸禄侏?H泙擦?E?
２０２５年発売予定のＷ??H?H筍?E?E?E任和弍イ靴泙后?
このト??H屮?E轡紂璽謄??E阿任蓮?
この??HΔ別簑蠅慮彊?E?E佑?泙瓠?
問題??E?E?H垢?E?E?H?E┐靴泙后?
質問の答え??E??E奪?靴討?世気ぁ?
??E腓暴召辰匿覆澆覆??H簑蠅?E?E?H任?泙后?

どうしますか？

仕淵がないか??H屮瀬ぅ▲?H阿罵靴椶Α廚?E寨?E?
「渡??E轡?Eぅ舛裡庁紕蝪瓠?H?E?E。廝錬劭味帖廚?E寨?E?

となりました。なんだかわかりませんね。 「・」は変換できなかった文字ですが、ここで文字境界がずれてしまっています。適当に1バイトの「ｱ」とかに置き換えてから変換してみます。

残念ながら現バージョケ裡廝?H?H筍臼映は
文??H修韻永おすことは出??H泙擦隠
２０２５年発売予定のＷ??H?H筍臼映は対吋します。
このト??H屮鰻ューティケ阿任蓮?
この??HΔ別簑蠅慮彊臼佑?泙瓠?
問題け??H垢臼?H烏します。
質問の答えけ?叡クしてください。
識腓暴召辰匿覆澆覆??H簑蠅臼?H任?泙后?

どうしますか？

仕淵がないか??H屮瀬ぅ▲?H阿罵靴椶Α廚閲猶?
「渡姫轡韻チのＤｅｊａ??H臼。廝錬劭味帖廚閲猶?

さっきよりはマシになった気がします。

あとは、前後の文脈から判断して、文字を埋めて逆変換して元の画像の文字と合うかどうかを確認していくという地道な作業を行います。「現バージョケ」は恐らく「現バージョン」だろうとか、そういう感じで。

復元した結果がこれです。

残念ながら現バージョンのＷｉｎｄｏｗｓでは
文字化けをなおすことは出来ません。
２０２５年発売予定のＷｉｎｄｏｗｓでは対応します。
このトラブルシューティングでは、
このような問題の原因を突き止め、
問題を解決する手順を示します。
質問の答えをクリックしてください。
手順に従って進みながら問題を解決できます。

どうしますか？

仕方がないから「ダイアログで遊ぼう」を閲覧。
「渡部シンイチのＤｅｊａｖｕ　ＷＯＲＬＤ」を閲覧。

内容が意味不明でちょっと怖いんですけど…。

[追記]

はてブのコメントで知ったのですが、どうやら元ネタは、「ダイアログで遊ぼう」というサイトに投稿されたネタ画像のようです。 「渡部シンイチのDeja=vu WORLD（デジャ＝ヴ・ワールド）」で製作者のコメントを見ることができます。