在命令提示 / Windows PowerShell（Windows 10）中使用UTF-8编码（CHCP 65001）

Question

我一直在命令提示和Windows PowerShell中强制使用 CHCP 65001 ，但根据Q＆amp; so和其他几个社区的帖子来判断

我个人我一直在使用 CHCP 949 用于韩国角色支持，但是Backslash \ 的怪异显示以及在多种应用程序（例如Neovim）中的不正确/难以理解的显示器（例如Neovim）由于不是通过 949 不支持韩语的字符似乎最近成为一个问题。

Answer 1

注意：

• 此答案显示了如何切换字符编码 Windows consoles（端子）（终端）到（BOM-less） UTF-8 系统范围 （代码页 65001 ），因此 shells ，例如 cmd.exe 代码>和powerShell与 exterme（Console）程序与完整的Unicode支持以及在编码和解码字符（文本） > cmd.exe 也用于文件I/O。 ^[1]

• ，相反，您担心的是 unicode targe 渲染的限制的单独方面 在控制台窗口中，请参见
  

---

Microsoft是否提供了CHCP 65001的改进 /完整替代方案，可以永久保存而无需手动更改注册表？< / p>

截至（至少） Windows 10 ，版本1903，您可以选择设置 system locale （ for non-nicode程序语言）to utf-8 ，但功能仍然是beta ，从本文开始和和。 。

激活它：

• 运行 intl.cpl （在控制面板中打开区域设置）
• 遵循下面屏幕截图中的说明。

区域>管理“>

• 此 sets 系统的活动OEM 和 ANSI代码页到 65001 ，UTF-8代码页，因此（a）使所有未来的 console windows 使用 oem 代码页，默认为utf-8 （好像 CHCP 65001 已在 cmd.exe 窗口中执行），并且（b）也使遗产non-unicode gui subsystem使用 ansi 代码页的应用程序，使用UTF-8。

  • 警告：

    • 如果您使用的 Windows PowerShell ，这也将使 get-content 和 set-content < /strong>以及Windows PowerShell默认值的其他上下文，因此系统的Active ANSI代码页面，特别是读取源代码来自Bom-less Files ，默认为UTF-8 （powershell core （v6+）总是这样做的）。这意味着，在没有编码参数的情况下，将被ANSI编码的bom-bom-bom-bom-never文件（历史上是常见的）将被误读，并且使用 set-content创建的文件将是UTF-8而不是ANSI编码。

      • 类似地，遗产（非unicode）非console应用程序 s将误解ANSI-INSI编码的文件。

    • 选择一个TT（truetype）字体，但即使它们通常仅支持所有字符的 subset ，因此您可能必须使用特定字体进行实验查看您是否关心的所有字符表示表示 - 请参阅此答案有关详细信息，该详细信息还讨论了替代游戏机（终端）应用程序拥有更好的Unicode渲染支持。

    • AS eryksun 将仅限于仅ASCII输入，并且在尝试在（7位）ASCII范围之外输出字符 时会产生不正确的输出。 （在过时的Windows 7及以下，程序甚至可能 crash ）。
      如果运行的遗留控制台应用程序对您很重要，请参见评论中的Eryksun的建议。

    
    

  
  

  
  

• 然而，对于 Windows PowerShell ， 不够：

  ：

  • 您还必须另外设置 $ outputEncoding to utf-8 的偏好变量： $ outputEncoding = [System.Text.utf8Encoding] :: new（new） ） ^[2] ;将该命令添加到您的 $ profile （仅当前用户）或 $ profile.alluserscurrentost （所有用户）文件。

  最简单。

  • 幸运的是，这在PowerShell core 中不再需要，该 在内部始终默认为Bom-bom-bom-utf-8。

---

如果将系统语言环境设置为UTF-8是不是环境中的选项，请使用 startup commands ：

注意：上面提到的警告Re legacy Console应用程序在此处同样适用。如果运行旧版控制台应用程序对您很重要，请在评论中查看Eryksun的建议。

• 对于powershell （两个版本），将以下行添加到您的 $ profile （仅当前用户）或 $ profile.alluserscurrentost （所有用户）文件，相当于 chcp 65001 ，并补充了设置首选项变量 $ outputEncoding ，以指示PowerShell通过UTF-8中的管道将数据发送到外部程序：

  • 请注意，运行 CHCP 65001 来自 incem powershell会话是 not 效率不知道以 chcp 进行的以后更改；此外，如前所述， Windows PowerShell 需要 $ outputEncoding 要设置 - 请参见答案有关详细信息。

  
  

  
  

$OutputEncoding = [console]::InputEncoding = [console]::OutputEncoding = New-Object System.Text.UTF8Encoding

• 例如，这是一种快速及时的方法，将此行添加到 $ profile 以编程方式：

'$OutputEncoding = [console]::InputEncoding = [console]::OutputEncoding = New-Object System.Text.UTF8Encoding' + [Environment]::Newline + (Get-Content -Raw $PROFILE -ErrorAction SilentlyContinue) | Set-Content -Encoding utf8 $PROFILE

• cmd.exe ，定义通过注册表中的自动运行命令，在值 autorun hkey_current_user \ software \ software \ microsoft \ microsoft \ command processor （仅当前用户）或 hkey_local_machine \ Microsoft \ microsoft \ microsoft \ Microsoft \命令处理器（所有用户）：

  • 例如，您可以使用PowerShell为您创建此值：

# Auto-execute `chcp 65001` whenever the current user opens a `cmd.exe` console
# window (including when running a batch file):
Set-ItemProperty 'HKCU:\Software\Microsoft\Command Processor' AutoRun 'chcp 65001 >NUL'

---

可选读数：为什么使用Windows PowerShell ise 是 不明智的：

虽然ISE确实比控制台具有更好的unicode 渲染支持支持糟糕的选择：

• 首先， ISE是过时的 ：它不支持 powershell（core）7+ ，所有未来的开发都会去的地方，并且它不是跨平台powershell Editions， Visual Studio Code ，它已经用PowerShell默认为powershell core 可以配置为Windows PowerShell。

  
  

• ISE通常是开发脚本的环境，而不是在生产中运行 它们将在 console /in Windows terminal 中运行;值得注意的是，关于运行代码，ISE的行为不是不是与常规控制台/Windows终端的行为相同：：

  
  

  
  

  • 对运行外部程序的支持不佳 ，不仅是由于缺乏支持 Interactive （请参阅下一点），而且还有关：

    • 字符编码：

      • ISE错误地假设外部程序默认使用 ansi 代码页面，而实际上是 oem 代码页。例如，默认情况下，此简单命令试图简单地传递从 cmd.exe 通过，故障的字符串（请参见下文）：
        CMD /CECHOHü|写出

        
        

      • $ outputEncoding 偏好变量默认为utf-8而不是传统OEM代码页（如常规控制台）和不合适的 prepent a utf-8 bom to（第一个）字符串被管道到外部程序 - 参见此答案。。 /p>

      
      

    
    

    • 作为powershell错误的stderr输出不适当渲染：请参阅这个答案。

  • ISE dot-sources script-file起诉，而不是在儿童范围 中运行它们（后者是发生的情况在常规控制台窗口 / Windows终端中）；也就是说，在ISE 重复中，在中运行的范围非常相同。这可能会导致微妙的错误，其中以前运行的定义会影响后续错误。

    
    

  • ISE预紧额额外的.NET组件未在常规的PowerShell控制台Windows/wt（Windows terminal）选项卡中预加载，尤其是 system.windows.windows.forms 。因此，在没有显式汇编加载命令（ add-Type -AssemblyName 或）的情况下，在ISE中运行良好的脚本可能会在常规控制台/wt中打破。 >）。

    


  • as eryksun 指出， ISE不支持运行 Interactive /em>外部控制台程序，即需要用户输入的程序：

    
    

    • 问题是它隐藏了控制台，并将过程输出（但不是输入）重定向到管道。当文件是管道时，大多数控制台应用程序切换到完整缓冲。同样，交互式应用程序需要从隐藏的控制台窗口中读取STDIN的读数。 （可以通过 showwindow 毫不掩饰，但是一个单独的输入窗口很笨拙。）

    • 如果您愿意以这种限制进行互动，将活动代码页面切换到 65001 （UTF-8）进行与外部程序进行正确的通信需要尴尬的解决方法：< /p>

      
      

      • 您必须首先通过运行内置控制台的任何外部程序来强制创建隐藏的控制台窗口游戏机窗口短暂闪光。

      • 唯一然后您可以设置 [console] :: outputEncoding （和 $ outputEncoding ），如图所示以上（如果尚未创建隐藏的控制台，您将获得 handle是无效的错误）。

  


  


---

^{[1]在PowerShell中，如果您从不调用外部程序，则不必担心系统语言环境（活动代码页）：PowerShell-native命令和.NET呼叫始终通过UTF进行通信-16字符串（本机.NET字符串）和文件I/O应用独立于系统语言环境的默认编码。同样，由于Windows API函数的 Unicode 版本用于从控制台打印和读取，因此非ASCII字符总是正确打印（在控制台的渲染限制内）。}

。
相比之下，在 cmd.exe 中，系统语言环境对文件I/O（带有＆lt; and and ＆gt; 重定向，但尤其包括包括要为批处理文件源代码进行编码的编码），而不仅仅是与内存中的外部程序进行通信（例如，读取程序以/f loop读取程序输出时）。

^{[2]在powershell v4-中，其中静态 :: new（）方法不可用，请使用 $ outputEncoding =（new-object system.text.utf8encododing）.psobject。 baseObject 。参见 github问题＃5763 为什么为什么 .psobignt.baseobject.baseobject.baseobject 需要部分。}

Answer 2

您可以将命令 CHCP 65001 放在PowerShell配置文件中，当您打开PowerShell时，它将自动运行它。但是，这对cmd.exe不会有任何作用。

Microsoft目前正在研究一个将提供全部Unicode支持的改进终端。它是开放源，如果您使用的是Windows 10版本1903或更高版本，则可以已经下载

另外，您可以使用第三方终端模拟器，例如 terminus 。

Answer 3

可以使用编辑注册表。这是在 cmd /？< /code>中记录的正确方法：

如果在命令行上未指定 /d，则当cmd.exe启动时，
它寻找以下reg_sz/reg_expand_sz注册表变量，
如果存在或两个都存在，则首先执行。

  HKEY_LOCAL_MACHINE \ SOFTWORT \ MICROSOFT \命令处理器\ Autorun

    和/或

hkey_current_user \ software \ microsoft \命令处理器\ autorun
 

现在是2023年，好消息。使用Windows终端，不需要编辑注册表或创建其他批处理文件。在Windows终端，Go 设置＆gt;配置文件并找到命令提示System32 \ cmd.exe /k“ CHCP 65001” < /code>。很简单。

*添加：如果您使用powerShell代替命令提示符，将其添加到命令行设置： -noexit -command“ CHCP 65001” 。在我的情况下，默认值为：

％SystemRoot％\ System32 \ WindowsPowersHell \ V1.0 \ PowerShell.exe

然后更改为：

％SystemRoot％\ System32 \ WindowsPowersHell \ v1.0 \ powerShell。 exe -noexit -command“ CHCP 65001”

Answer 4

Powershell iSe表现出韩国的表现非常好。这是在UTF8中编码的示例文本文件，它可以使用：

PS C:\Users\js> cat .\korean.txt

The Korean language (South Korean: 한국어/韓國語 Hangugeo; North 
Korean: 조선말/朝鮮말 Chosŏnmal) is an East Asian language
spoken by about 77 million people.[3]

由于ISE随附Windows 10的每个版本，所以我认为它并不过时。我不同意谁删除了我的原始答案。

ISE有一些局限性，但是可以使用外部命令来完成一些脚本：

echo 'list volume' | diskpart # as admin
cmd /c echo hi

编辑：

如果您有Windows 10 1903，则可以从Microsoft Store下载Windows terminal https://devblogs.microsoft.com/commandline/introducing-windows-terminal/ ，而韩国文本将在其中使用。 PowerShell 5将需要文本格式为带有BOM或UTF16的UTF8。

Edit2：

对于粘贴字符和输出，似乎理想是Windows terminal + PowerShell 7或Vscode + PowerShell 7。

EDIT3：

即使在Edit2情况下，也无法粘贴某些Unicode字符，例如 （U+21c6）或 unicode空间。 OSX中只有PS7可以起作用。