目录

介绍

容器和迭代器

• 标记器

• 标记迭代器

令牌函数概念

令牌函数模型

• 字符分隔符（_S）

• 转义列表分隔符

• 偏移分隔器

• 不推荐： 字符限定符分隔符

致谢

我想感谢助推邮件列表的成员，他们的评论，开发和正式审查期间的赞扬和批评帮助使Tokenizer库成为现在的样子。我特别感谢Aleksey Gurtovoy提出了使用一对迭代器来指定输入，而不是字符串。我还要感谢Jeremy Siek的想法为令牌迭代器和简化TokenizerFunctions的模板参数。他和Daryle Walker还强调了将界面和实施。加里·鲍威尔引发了使用isspace和ispunt作为char_delimiters_separator的默认值。杰夫·加兰德提供了有关如何更改中模板参数的顺序的想法以使标记器更容易声明。多亏了道格拉斯·格雷戈担任评审经理，并在晋升名单上提供了许多见解以及如何完善标记器。最后，感谢集成最终版本的Beman Dawes到增压分配中。

修订过的252006年12月

版权所有©2000 Jeremy Siek
版权所有©2001 John R.Bandela

根据Boost软件许可证1.0版进行分发。（请参见随附文件许可证_1_0.txt或复制于http://www.boost.org/LICENSE_1_0.txt)