UTF-8(BOM付)で意図しない文字列が表示される対応メモ

Posted on 2013-01-22

ソースに意図してない ? が入ってハマった対応。

環境

OS: Ubuntu 12.04 64bit
Ruby: ruby 1.8.7 (2012-02-08 patchlevel 358) [x86_64-linux]
rvm: rvm 1.14.3 (stable)
Ruby on Rails: 3.2.6

? がソースに勝手に入る

問題のソース。

app/views/layouts/application.html.erb

<html>
<head>
  <title>hoge</title>
</head>
<body>
  <%= yield %>
</body>
</html>

app/views/hoge/index.html.erb

1	Hello Hoge!!

app/controllers/hoge_controller.rb

class HogeController < ApplicationController
  def index

  end
end

出力結果。

/hoge/index

<html>
<head>
  <title>hoge</title>
</head>
<body>
  ?
  Hello Hoge!!
</body>
</html>

yield 部分に勝手に ? が入ってる。
もちろんブラウザで見ても同位置に ? が表示される。

試しに yield を tapp してみる。

app/views/layouts/application.html.erb

<html>
<head>
  <title>hoge</title>
</head>
<body>
  <%= yield.tapp %>
</body>
</html>

出力結果。

Terminal

   (1.7ms)  COMMIT
Completed 200 OK in 45ms (Views: 22.2ms | ActiveRecord: 2.7ms)
"\n
  Hello Hoge!!"

ログには出ないが、コピペしてみると謎の文字列 <feff> が出現。

原因

<feff> を調べてみると BOM であることがわかった。

バイトオーダーマーク

バイトオーダーマーク (byte order mark) あるいはバイト順マーク（バイトじゅんマーク）は通称BOM（ボム）といわれる、Unicodeの符号化形式で符号化したテキストの先頭につける数バイトのデータのことである。このデータを元にUnicodeで符号化されていることおよび符号化の種類の判別に使用する。

そこで、 vim でファイルを開くときに -b のBOM表示オプションをつけて開いてみる。

Terminal