【发布时间】:2010-10-05 05:54:14
【问题描述】:
我有一个 Java 应用程序,它可以读取在 Excel 中创建的 CSV 文件(例如 2007 年)。有谁知道 MS Excel 使用什么字符集来保存这些文件?
我也猜到了:
- windows-1255 (Cp1255)
- ISO-8859-1
- UTF8
但我无法使用这些字符集类型中的任何一种解码扩展字符(例如法语重音字母)。
【问题讨论】:
标签: excel encoding character-encoding
我有一个 Java 应用程序,它可以读取在 Excel 中创建的 CSV 文件(例如 2007 年)。有谁知道 MS Excel 使用什么字符集来保存这些文件?
我也猜到了:
但我无法使用这些字符集类型中的任何一种解码扩展字符(例如法语重音字母)。
【问题讨论】:
标签: excel encoding character-encoding
从内存中,Excel 使用机器特定的 ANSI 编码。因此,对于 EN-US 安装,这将是 Windows-1252,对于俄语安装是 1251,等等。
【讨论】:
CSV 文件可以是任何格式,具体取决于在从 Excel 导出期间指定的编码选项:(保存对话框、工具按钮、Web 选项项、编码选项卡)
更新:Excel(包括 Office 2013)实际上并不尊重在“另存为...”对话框中选择的 Web 选项,因此这是某种错误。我现在只是使用 OpenOffice Calc 打开我的 XLSX 文件并将它们导出为 CSV 文件(编辑过滤器设置,选择 UTF-8 编码)。
【讨论】:
唤醒这个旧线程......我们现在是 2017 年。而且 Excel 仍然无法在保留原始编码的同时将简单的电子表格保存为 CSV 格式......真是太棒了。
幸运的是,Google 文档生活在正确的世纪。我的解决方案是使用 Google Docs 打开电子表格,而不是将其下载为 CSV。结果是一个正确编码的 CSV 文件(所有字符串都以 UTF8 编码)。
【讨论】:
上周我遇到了类似的问题。我收到了许多不同编码的 CSV 文件。在导入数据库之前,我使用chardet libary 自动检测出正确的编码。
Chardet 是 Mozilla 字符检测引擎的一个端口,如果样本量足够大(一个重音字符不行),效果会非常好。
【讨论】:
Russian Edition 提供CSV、CSV (Macintosh) 和CSV (DOS)。
当以纯CSV 保存时,它使用windows-1251。
我只是尝试将法语单词Résumé 与俄语文本一起保存,它保存在HEX 中,例如52 3F 73 75 6D 3F,3F 是ASCII 的question mark 代码。
当我打开 CSV 文件时,这个词当然变得不可读了 (R?sum?)
【讨论】:
如果您选择 File > Save As > Unicode Text (.txt),Excel 2010 会保存一个 UTF-16/UCS-2 TSV 文件。它是(强制)后缀“.txt”,您可以将其更改为“.tsv”。
如果您需要 CSV,您可以在 Notepad++、Ultra Edit、Crimson Editor 等文本编辑器中转换 TSV 文件,将制表符替换为分号、逗号等。请注意,例如对于读取数据库表,TSV 通常已经可以正常工作(而且手动读取通常更容易)。
如果您需要 UTF-8 等不同的代码页,请使用上述编辑器之一进行转换。
【讨论】:
cp1250 广泛用于 Microsoft Office 文档,包括 Word 和 Excel 2003。
http://en.wikipedia.org/wiki/Windows-1250
确认这一点的简单方法是:
perl 脚本示例:
#!perl
use strict;
use Spreadsheet::ParseExcel::Simple;
use Encode qw( decode );
my $file = "my_spreadsheet.xls";
my $xls = Spreadsheet::ParseExcel::Simple->read( $file );
my $sheet = [ $xls->sheets ]->[0];
while ($sheet->has_data) {
my @data = $sheet->next_row;
for my $datum ( @data ) {
print decode( 'cp1250', $datum );
}
}
【讨论】:
虽然将包含特殊字符的 excel 文件导出到 csv 确实很麻烦,但是有一个简单的解决方法:只需将单元格复制/粘贴到 google 文档中,然后从那里保存。
【讨论】:
iconv 命令传递文档即可。简单易行。存在用于 Windows 的iconv 端口。见fileformat.info/tip/linux/iconv.htm
您可以使用此 Visual Studio VB.Net 代码来获取编码:
Dim strEncryptionType As String = String.Empty
Dim myStreamRdr As System.IO.StreamReader = New System.IO.StreamReader(myFileName, True)
Dim myString As String = myStreamRdr.ReadToEnd()
strEncryptionType = myStreamRdr.CurrentEncoding.EncodingName
【讨论】:
StreamReader 没有检测到编码,它是defaults to UTF-8。所以这将始终返回 UTF-8。
您可以使用编码 UTF8 + BOM (https://en.wikipedia.org/wiki/Byte_order_mark) 创建 CSV 文件。
前三个字节是 BOM (0xEF,0xBB,0xBF),然后是 UTF8 内容。
【讨论】:
OOXML 根据维基百科的说法,来自 Excel 2007 的文件以 UTF-8 编码。我不知道 CSV 文件,但按道理它会使用相同的格式...
【讨论】: