将字符串拆分为标记并在 Perl 中存储分隔符

Question

我有一个像这样的字符串：

a  b   c       d

我像这样处理我的字符串：

   chomp $line;
    my @tokens = split /\s+/, $line;
    my @new_tokens;
    foreach my $token (@tokens) {    
        push @new_tokens, some_complex_function( $token );
    }
    my $new_str = join ' ', @tokens;

我想用原始空格重新连接该字符串。有什么方法可以存储拆分后的空白并在以后重新使用它吗？或者这将是一个巨大的痛苦？它主要是装饰性的，但我想保留输入字符串中的原始空格。

Answer 1

如果您使用带有捕获括号的正则表达式进行拆分，则拆分模式将包含在结果列表中（请参阅 perldoc -f 分割):

my @list = split /(\s+)/, 'a  b   c       d';
print Data::Dumper::Dumper(\@list);

VAR1 = [
          'a',
          '  ',
          'b',
          '   ',
          'c',
          '       ',
          'd'
        ];

Answer 2

只需在单词边界上进行拆分：

split /\b/, $line;

对于您的示例，这将给出：

('a','  ','b','   ','c','       ','d')

编辑： 正如 brian d foy 指出的那样， \b 使用了错误的字符类，遵循我最初的想法，我想出了使用环视断言。不过，这看起来比 Ether 的答案要复杂得多：

split /(?:(?<=\S)(?=\s)|(?<=\s)(?=\S))/, $line;

Answer 3

你为什么不简单地这样做： my $new_str = uc( $line ); ？

更新 - 原来的 uc() 只是“更复杂的函数”的简写。

嗯，一般来说你还可以：

$line =~ s/(\S+)/more_complex_function($1)/ge;