控制器 I18n 编码

Question

在 Rails 控制器中，我想计算要发送到前端的 i18n 消息。我进行如下操作：

flash[:notice] = I18n.t 'programs.update.program_saved'

在我的翻译文件 (fr.yml) 中，翻译如下：'Programme sauvegardé'。

在这一行设置断点，然后在我的控制台中键入它时，我遇到了编码问题：

0> I18n.t 'programs.update.program_saved'
=> "Programme sauvegardé"

我已经实现了AJAX pattern 来处理flash 消息，并且在前端，我可以看到相同的编码问题。

除此之外，当我在 rails console 中输入相同的内容时，我没有编码问题。

我在Ruby 2.4.4 和Rails 5.2.1。

什么会导致这个编码问题，以及如何摆脱它？

编辑：添加更多详细信息

我使用RubyMine 2018.2 进行开发。我的 Rails 服务器在 WSL (Windows Subsystem for Linux) 和 Ubuntu 16 下运行。我从Windows 一侧的RubyMine 运行我的rails 服务器。使用的rails SDK 是Linux。 rails server 在Linux 一侧运行。

当显示 HTTP 请求响应中设置的 flash 消息时，我的问题的根源是浏览器中的编码问题。这些 flash 消息按说明计算，即：I18n.t 'programs.update.program_saved'。

当我从 RubyMine 或直接从 Linux 终端启动 Rails 服务器时，问题也是一样的。

为了进行调查，我想调试并使用 RubyMine 控制台。从 RubyMine 调试器控制台执行此命令时，仍然存在编码问题：I18n.t 'programs.update.program_saved'。从rails console 在Linux 或Windows（在RubyMine 中，rails 控制台在Linux 一侧执行）执行此操作时，我没有编码问题。

此外，在 Heroku 实例上运行应用程序时问题仍然存在，所以我想知道这是否与我的本地配置有关。

Answer 1

很明显，您的字符串被解释为“ISO-8859-1”，尽管它实际上是“UTF-8”。 您可以在 irb 或 Rails 控制台中使用以下代码 sn-p 检查事实：

s=[0x64,0xc3,0xa9].pack('c*')  # => "d\xC3\xA9" ("dé" if UTF-8)
s.encoding    # => #<Encoding:ASCII-8BIT>
s.encode "UTF-8", "UTF-8"      # => "dé"  ("de'")
s.encode "UTF-8", "ISO-8859-1" # => "dé" ("d~A(c)")

对于出错的原因，我可以想到两种可能性。

案例一

运行 Rails 控制台的终端要么无法解释 UTF-8 字符串，要么设置错误。

试试下面的代码 sn-p (nb.，它可以被任何人运行，即使翻译未定义)：

s2 = I18n.t('programs.update.program_saved', :default => nil)
s2 ||= [0x64,0xc3,0xa9].pack('c*').encode("UTF-8", "UTF-8")  # => "dé"  ("de'")
p s2[-2,2].bytes  # => [100, 195, 169]  if the object is in UTF-8
                  # => [100, 233]       if the object is in ISO-8859-1

你可以看到 String 对象的（内部）编码是怎样的。 如果它是[100, 195, 169]，那么编码是UTF-8，因此Ruby 和Rails 都将翻译后的String 对象正确地视为UTF-8，所以问题出在你的终端上。您的终端错误地将它从 Rails 收到的字节字符串 [100, 195, 169] 解释为 ISO-8859-1 并选择相应的字符和字体来显示。

在终端上的 Rails consolei 中，你可以试试这个；如果终端兼容 UTF-8，它应该正确显示字符：

[0x64,0xc3,0xa9].pack('c*').force_encoding('UTF-8')
  # => "dé" ("de'") should be displayed.

看看你的终端确实能够显示 UTF-8 字符串（大多数现代终端应该能够，但旧的可能不行）。 另外，检查您的终端设置。这个answer to "How to input Unicode character in Rails console?" 可能会有所帮助。

案例 2

Ruby 将输入字符串解释为“ISO-8859-1”并在内部将其转换为“UTF-8”（尽管在默认设置中不应该发生这种情况）。 在这种情况下，您的 yml 文件可能包含一些看起来像“ISO-8859-1”的字符；那么 Rails 可能会将整个文件解释为“ISO-8859-1”（尽管不太可能）。

您可以检查您读取的文件 (config/locales/fr.yml) 是否确实是 UTF-8 格式，如下所示：

fn = 'config/locales/fr.yml'
IO.binread(fn).force_encoding('UTF-8').valid_encoding?  # => should be true
IO.binread(fn).force_encoding('ISO-8859-1').valid_encoding?  # => false

不幸的是，有一点缺陷。一些 UTF-8 字符可以合法地解释为 ISO-8859-1，在这种情况下，代码（Rails）如何解释它可能会有所不同。如果您怀疑是这种情况，您可以查看上述命令的输出，如IO.binread(fn).force_encoding('UTF-8')，看看每个字符是否都符合预期。

如果文件包含一些非 UTF-8 字符，请修复它，希望一切都会好起来。

或者，在您的特定情况下，您也许可以将其修复为像这样的拙劣工作

I18n.t('programs.update.program_saved').encode('UTF-8', 'ISO-8859-1')

注意

只要您想将 Rails 设为默认为 UTF-8（强烈建议），请确保您的应用的默认编码为 UTF-8。通过

查看

MyApp::Application.config.encoding  # => #<Encoding:UTF-8>

（参考：Configuring Rails Applications）

另外，如果您使用 Heroku，请将默认字符集设置为 UTF-8。请参阅answer to "Set UTF-8 as default string encoding in Heroku"。

---

请注意，在 2018 年 11 月 5 日进行了重大更新以添加案例 1。

Answer 2

确保您以 utf-8 格式打开 fr.yml 文件，以便您写入的内容正确保存在 utf-8 中。这可能是您的浏览器正在使用的编码。

您可以转到 Linux 控制台并通过查看 LANG 变量的值来查找当前配置。我有例如LANG="ca_ES.UTF-8"。也许您还可以检查终端窗口的编码属性。

还要检查您正在查看您的网站的编码。例如，在 Firefox 中，检查查看/编码选项。

最后，您需要以与保存内容相同的编码查看内容。