获取字符串流令牌的起始位置

Question

有没有办法找到istringstream::operator >>提取的token的起始位置？

例如，我当前检查tellg() (run online) 的尝试失败：

string test = "   first     \"  in \\\"quotes \"  last";
istringstream strm(test);

while (!strm.eof()) {

    string token;
    auto startpos = strm.tellg();
    strm >> quoted(token);
    auto endpos = strm.tellg();
    if (endpos == -1) endpos = test.length();

    cout << token << ": " << startpos << " " << endpos << endl;

}

所以上面程序的输出是：

first: 0 8
  in "quotes : 8 29
last: 29 35

结束位置很好，但开始位置是通向标记的空白的开始。我想要的输出是这样的：

first: 3 8
  in "quotes : 13 29
last: 31 35

这是带有位置的测试字符串供参考：

          1111111111222222222233333
01234567890123456789012345678901234  the end is -1

   first     "  in \"quotes "  last

        ^--------------------^-----^ the end positions i get and want
^-------^--------------------^------ the start positions i get
   ^---------^-----------------^---- the start positions i *want*

在使用istringstream时，是否有任何直接的方法可以检索此信息？

Answer 1

首先，见Why is iostream::eof inside a loop condition (i.e. `while (!stream.eof())`) considered wrong?

其次，您可以使用std::ws 流操作符在读取下一个token 值之前吞下空格，然后tellg() 将报告您要查找的起始位置，例如：

#include <string>
#include <sstream>
#include <iomanip>
using namespace std;

...

string test = "   first     \"  in \\\"quotes \"  last";
istringstream strm(test);

while (strm >> ws) {

    string token;
    auto startpos = strm.tellg();
    if (!(strm >> quoted(token)) break;
    auto endpos = strm.tellg();
    if (endpos == -1) endpos = test.length();

    cout << token << ": " << startpos << " " << endpos << endl;
}

Online Demo