当前位置：文江博客话题详情

如何使用 StreamTokenizer 确保特定标记之间有空格？

发布于 2024-10-28 01:07:34 字数 187 浏览 1 评论 0原文

我正在使用 StreamTokenizer 来解析文本，我需要确保某些标记之间有空格。例如，“5+5”是非法的，但“5 + 5”是有效的。

我真的不太了解 StreamTokenizer；我阅读了 API，但找不到任何可以帮助我的东西。我该怎么做？

原文

分享到QQ

分享到微博

如果你对这篇内容有疑问，欢迎到本站社区发帖提问参与讨论，获取更多帮助，或者扫码二维码加入 Web 技术交流群。

发布评论

需要登录才能够评论，你可以免费注册一个本站的账号。

治碍 2024-11-04 01:07:34

您必须将空格设置为“普通字符”。这意味着它们将作为代币单独返回，但不会折叠到其他代币中。示例：

StreamTokenizer st = new StreamTokenizer(new StringReader("5 + 5"));
st.ordinaryChar(32);
int tt = st.nextToken();  // tt = TT_NUMBER, st.nval = 5
tt = st.nextToken();      // tt = 32 (' ')
tt = st.nextToken();      // tt = 43 ('+')
tt = st.nextToken();      // tt = 32 (' ')
tt = st.nextToken();      // tt = TT_NUMBER, st.nval = 5
tt = st.nextToken();      // tt = TT_EOF

不幸的是，您必须在解析器中处理空白标记。我建议滚动你自己的标记器。除非您正在做一些快速而肮脏的事情，否则 StreamTokenizer 几乎总是错误的选择。

You'll have to set spaces as "ordinary characters". This means that they'll be returned as tokens on their own, but not folded into other tokens. Example:

StreamTokenizer st = new StreamTokenizer(new StringReader("5 + 5"));
st.ordinaryChar(32);
int tt = st.nextToken();  // tt = TT_NUMBER, st.nval = 5
tt = st.nextToken();      // tt = 32 (' ')
tt = st.nextToken();      // tt = 43 ('+')
tt = st.nextToken();      // tt = 32 (' ')
tt = st.nextToken();      // tt = TT_NUMBER, st.nval = 5
tt = st.nextToken();      // tt = TT_EOF

Unfortunately, you'll have to deal with whitespace tokens in your parser. I'd recommend rolling your own tokenizer. Unless you're doing something quick and dirty, StreamTokenizer is almost always the wrong choice.

回复收藏 0 原文

猥琐帝 2024-11-04 01:07:34

此后考虑使用扫描仪。例如：

String input = "5 + 5";
Scanner scanner = new Scanner(input).useDelimiter(" ");
int num1 = scanner.nextInt();
String op = scanner.next();
int num2 = scanner.nextInt();

这是一个简化的示例，假设输入如 "5+5" 或 "5 + 5"。您应该随时检查 scanner.hasNext() ，也许在 where 循环中检查以处理更复杂的输入。

Consider using Scanner instead since. E.g.:

String input = "5 + 5";
Scanner scanner = new Scanner(input).useDelimiter(" ");
int num1 = scanner.nextInt();
String op = scanner.next();
int num2 = scanner.nextInt();

This is a simplified example that assumes an input like "5+5" or "5 + 5". You should be checking scanner.hasNext() as you go, perhaps in a where loop to process more complicated inputs.

回复收藏 0 原文

~没有更多了~