tokenize

tokenize

文章 0 浏览 4

对 SIC 汇编器源代码进行标记

我已经基本完成了系统编程课程的 SIC 汇编程序的编写,但我对标记化部分感到困惑。 例如,采用这行源代码: 格式(自由格式)为: {LABEL} OPCODE {OP…

携君以终年 2024-07-22 04:45:29 8 0

标记化并转换为猪拉丁语

这看起来像是家庭作业,但请放心,这不是家庭作业。 只是我们在 C++ 课程中使用的书中的一个练习,我正在尝试提前阅读指针。 书中的练习告诉我将一个…

情何以堪。 2024-07-21 06:48:50 9 0

标记化错误:java.util.regex.PatternSyntaxException,悬空元字符 '*'

我正在使用 split() 来标记以 * 分隔的字符串,遵循以下格式: name*lastName*ID*school*age % name*lastName*ID*school*age % name*lastName*ID*scho…

我的痛♀有谁懂 2024-07-21 04:20:18 6 0

标记化模块

请帮忙 模块 tokenize 中有很多标记,如 STRING、BACKQUOTE、AMPEREQUAL 等。 >>> import cStringIO >>> import tokenize >>> source = "{'test':'123…

草莓酥 2024-07-20 04:26:10 8 0

需要为 C# 代码构建 XML 表示

我需要将 C# 代码转换为等效的 XML 表示形式。 我计划将 C# 代码(C# 2.0 代码片段,无泛型或可为空类型)转换为 AST,然后将 AST 转换为 XML。 正在…

杯别 2024-07-19 13:32:23 9 0

如何在 Java 中逐字符读取输入?

我习惯了c风格的getchar(),但对于java来说似乎没有什么可比的。 我正在构建一个词法分析器,我需要逐个字符地读入输入。 我知道我可以使用扫描仪扫描…

缘字诀 2024-07-19 04:00:24 8 0

将字符串修剪为忽略 HTML 的长度

这个问题是一个具有挑战性的问题。 我们的应用程序允许用户在主页上发布新闻。 该新闻是通过允许 HTML 的富文本编辑器输入的。 在主页上,我们只想显…

疯了 2024-07-17 09:36:26 9 0

如何在 Ruby 中标记该字符串?

我有这个字符串: %{Children^10 Health "sanitation management"^5} 我想将其转换为将其标记为哈希数组: [{:keywords=>"children", :boost=>10}, {:…

古镇旧梦 2024-07-17 01:08:21 8 0

基于格式字符串的智能变量扩展

我有一个守护进程,它读取配置文件以便知道在哪里写入内容。 在配置文件中,存在这样的一行: output = /tmp/foo/%d/%s/output 或者,它可能看起来像…

萌化 2024-07-16 13:39:32 8 0

实现分词器的 Pythonic 方式

Closed. This question is opinion-based. It is not currently accepting answers. 想要改进这个问题?更新问题,以便可以通过编辑这篇文章用事实和…

下壹個目標 2024-07-16 11:25:11 11 0

Scanner vs. StringTokenizer vs. String.Split

我刚刚了解了 Java 的 Scanner 类,现在我想知道它如何与 StringTokenizer 和 String.Split 进行比较/竞争。 我知道 StringTokenizer 和 String.Split…

吹梦到西洲 2024-07-16 03:30:56 10 0

您是否曾在实际应用中有效地使用过词法分析器/解析器?

Closed. This question is opinion-based. It is not currently accepting answers. 想要改进这个问题?更新问题,以便可以通过编辑这篇文章用事实和…

喵星人汪星人 2024-07-14 14:34:04 13 0

使用 XPath 查找变量时,仅获取该变量的一部分

我是 XPath 新手。 我正在编写一个代码来从页面中获取所有 3 位数字。 它们不是恒定的,在 105、515 和 320 之间变化。我希望两个能够将这些数字标记…

话少情深 2024-07-13 18:48:49 9 0

jquery wordCount 中允许特殊字符和空格

我使用 jquery DynaCloud 和 wordCount 来创建动态标签云。 我有特定的术语要包含在云中(尽管每个用户的频率不同),并且某些术语是多个单词,或者具…

孤者何惧 2024-07-13 14:50:19 8 0

使用带有不同参数的 Boost Tokenizer escaped_list_separator

你好,我一直在尝试使用 boost 库 tokenizer 类让 tokenizer 工作。 我在 boost 文档中找到了本教程: http://www .boost.org/doc/libs/1 _36 _0/libs…

孤寂小茶 2024-07-13 09:25:26 9 0
更多

推荐作者

苍风燃霜

文章 0 评论 0

悸初

文章 0 评论 0

撧情箌佬

文章 0 评论 0

森罗

文章 0 评论 0

lyn1245

文章 0 评论 0

    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
    原文