【发布时间】：2011-02-04 16:31:35
【问题描述】：
我正在读取一个 Unicode 流，并且不想通过正则表达式传递整个字符串。是否有一个简单（可靠）的字符可以用来跨语言分词？
我的字节数组可能基于 UTF-16 或 UTF-8
【问题讨论】：
标签： c# regex unicode utf-8 internationalization
【发布时间】：2011-02-04 16:31:35
【问题描述】：
如果您使用的是 Java，那么您可以使用 BreakIterator。
【讨论】：