生成 PHP 代码（从解析器令牌）

Question

是否有任何可用的解决方案用于从 解析器令牌（重新）生成 PHP 代码由 token_get_all 返回？也欢迎其他用于生成 PHP 代码的解决方案，最好带有相关的词法分析器/解析器（如果有）。

Answer 1

在“其他解决方案”类别中，您可以尝试PHP Parser。

解析器将 PHP 源代码转换为抽象语法树......此外，您还可以将语法树转换回 PHP 代码。

Answer 2

从我的评论来看：

有人发现潜在的问题吗？
如果我只是写一个大开关
将令牌转换回的语句
他们的字符串表示（即
T_DO 到“do”），将其映射到
标记，用空格连接，然后查找
某种 PHP 代码的漂亮打印
解决方案？

经过一番寻找，我在 this 问题，实际上使用了 PHP Tokenizer 接口，以及一些更可配置的 PHP 代码格式化工具（但需要如上所述的解决方案）。

这些可用于快速实现解决方案。当我有时间做这个时，我会发回这里。

---

PHP_Beautifier 的解决方案

这是我制定的快速解决方案，我将把它留在这里作为问题的一部分。请注意，它要求您通过将 private 更改为 protected 的所有内容（可能不是所有内容，但这更容易）来打开 PHP_Beautifier 类，以允许您实际上使用 PHP_Beautifier 的内部工作原理（否则不可能在不重新实现一半代码的情况下重用 PHP_Beautifier 的功能）。

该类的示例用法如下：

file: main.php

<?php
// read some PHP code (the file itself will do)
$phpCode = file_get_contents(__FILE__);

// create a new instance of PHP2PHP
$php2php = new PHP2PHP();

// tokenize the code (forwards to token_get_all)
$phpCode = $php2php->php2token($phpCode);

// print the tokens, in some way
echo join(' ', array_map(function($token) {
  return (is_array($token))
    ? ($token[0] === T_WHITESPACE)
      ? ($token[1] === "\n")
        ? "\n"
        : ''
      : token_name($token[0])
    : $token;
}, $phpCode));

// transform the tokens back into legible PHP code
$phpCode = $php2php->token2php($phpCode);
?>

由于 PHP2PHP 扩展了 PHP_Beautifier，它允许在 PHP_Beautifier 使用的同一 API 下进行相同的微调。该类本身是：

文件：PHP2PHP.php

class PHP2PHP extends PHP_Beautifier {

  function php2token($phpCode) {
    return token_get_all($phpCode);
  }

  function token2php(array $phpToken) {

    // prepare properties
    $this->resetProperties();
    $this->aTokens = $phpToken;
    $iTotal        = count($this->aTokens);
    $iPrevAssoc    = false;

    // send a signal to the filter, announcing the init of the processing of a file
    foreach($this->aFilters as $oFilter)
      $oFilter->preProcess();

    for ($this->iCount = 0;
         $this->iCount < $iTotal;
         $this->iCount++) {
      $aCurrentToken = $this->aTokens[$this->iCount];
      if (is_string($aCurrentToken))
        $aCurrentToken = array(
          0 => $aCurrentToken,
          1 => $aCurrentToken
        );

      // ArrayNested->off();
      $sTextLog = PHP_Beautifier_Common::wsToString($aCurrentToken[1]);

      // ArrayNested->on();
      $sTokenName = (is_numeric($aCurrentToken[0])) ? token_name($aCurrentToken[0]) : '';
      $this->oLog->log("Token:" . $sTokenName . "[" . $sTextLog . "]", PEAR_LOG_DEBUG);
      $this->controlToken($aCurrentToken);
      $iFirstOut           = count($this->aOut); //5
      $bError              = false;
      $this->aCurrentToken = $aCurrentToken;
      if ($this->bBeautify) {
        foreach($this->aFilters as $oFilter) {
          $bError = true;
          if ($oFilter->handleToken($this->aCurrentToken) !== FALSE) {
            $this->oLog->log('Filter:' . $oFilter->getName() , PEAR_LOG_DEBUG);
            $bError = false;
            break;
          }
        }
      } else {
        $this->add($aCurrentToken[1]);
      }
      $this->controlTokenPost($aCurrentToken);
      $iLastOut = count($this->aOut);
      // set the assoc
      if (($iLastOut-$iFirstOut) > 0) {
        $this->aAssocs[$this->iCount] = array(
          'offset' => $iFirstOut
        );
        if ($iPrevAssoc !== FALSE)
          $this->aAssocs[$iPrevAssoc]['length'] = $iFirstOut-$this->aAssocs[$iPrevAssoc]['offset'];
        $iPrevAssoc = $this->iCount;
      }
      if ($bError)
        throw new Exception("Can'process token: " . var_dump($aCurrentToken));
    } // ~for

    // generate the last assoc
    if (count($this->aOut) == 0)
        throw new Exception("Nothing on output!");

    $this->aAssocs[$iPrevAssoc]['length'] = (count($this->aOut) -1) - $this->aAssocs[$iPrevAssoc]['offset'];

    // post-processing
    foreach($this->aFilters as $oFilter)
      $oFilter->postProcess();
    return $this->get();
  }
}
?>

Answer 3

如果我没记错的话 http://pear.php.net/package/PHP_Beautifier 使用 token_get_all ()，然后重写流。它使用诸如 t_else 和 t_close_brace 之类的大量方法来输出每个标记。也许您可以为了简单起见而劫持它。

Answer 4

请参阅我们的 PHP 前端。它是一个完整的 PHP 解析器，自动构建 AST，以及一个匹配的漂亮打印机，可以重新生成带有原始注释的可编译 PHP 代码。 （编辑 12/2011：
请参阅此 SO 答案，了解有关从 AST 进行漂亮打印所需的更多详细信息，AST 只是令牌的组织版本：https:// stackoverflow.com/a/5834775/120163）

前端构建在我们的 DMS 软件再工程工具包，支持 PHP AST 的分析和转换（然后通过 PrettyPrinter 代码）。