CMD管道与Powershell管道不同? 可选阅读:方便功能Invoke-WithEncoding和诊断功能Debug-NativeInOutput,用于临时编码需求/诊断:

如何解决CMD管道与Powershell管道不同? 可选阅读:方便功能Invoke-WithEncoding和诊断功能Debug-NativeInOutput,用于临时编码需求/诊断:

我正在尝试将 Node.js 输出通过管道传输到 preatty-pino

node .\dist\GameNode.js | pino-pretty

在 CMD 中运行它我得到了我的格式化输出,但是在 powershell 中运行它我什么也得不到。 我读到 Powershell 在管道中使用对象,所以我尝试了

node .\dist\GameNode.js | Out-String -Stream | pino-pretty

但这也不起作用。

为什么它在 CMD 中有效,而在 Powershell 中无效? 谢谢:)

解决方法

注意:问题中描述的具体 pino-pretty 问题通过以下信息解决。 Lukas(OP)已提交错误报告 here

令人惊讶的是,您什么都没有,但根本区别是:

  • cmd.exe 的管道处理原始数据,即字节流(给定程序接收数据可能会也可能不会本身解释为文本)。

  • PowerShell 的管道在与外部程序通信时,只传输文本(字符串),这有两个含义: >

    • 在管道数据外部程序时,文本必须编码,这是基于存储在preference variable $OutputEncoding

    • 从外部程序接收数据时,必须对数据进行解码,这是根据存储在[Console]::OutputEncoding,默认情况下是系统的 OEM 代码页,反映在 chcp 中。

      • 这种解码总是发生,无论数据是在 PowerShell 中进一步处理还是传递给另一个外部程序 .

        • 即使在两个外部程序之间也无法通过 PowerShell 的管道发送原始数据,有时会出现问题在this answer中进行了讨论。
      • 唯一的例外是如果外部程序输出既没有被捕获,也没有通过管道发送,也没有重定向到文件:在这种情况下,数据直接打印到控制台(终端),但仅在本地控制台中(当使用 PowerShell 远程处理与远程机器交互时,再次总是涉及解码)。

        • 这种直接显示的打印有时可以隐藏编码问题,因为某些程序,特别是python,在这种情况下在特定情况下使用完整的 Unicode 支持;也就是说,输出可能打印很好,但是当您尝试进一步处理时,可能会出现编码问题。
        • 一种强制解码的简单方法将调用括在(...)中;例如,
          python -c "print('eé')" 打印很好,但是
          (python -c "print('eé'))" 出现编码问题;请参阅底部以了解更多信息

虽然控制台应用程序传统上使用活动 OEM 代码页进行字符编码和解码,但 Node.js 始终使用 UTF-8

因此,为了让 PowerShell 与 Node.js 程序正常通信,您必须(暂时)先设置以下内容:

$OutputEncoding = [Console]::OutputEncoding = [System.Text.UTF8Encoding]::new()

如果您想从根本上切换到 UTF-8,无论是系统范围的(具有深远的影响)还是仅适用于 PowerShell 控制台窗口,请参阅{{ 3}}。


顺便说一句:中继外部程序的输出永远不需要中间的 Out-String -Stream 管道段 - 它是有效的(昂贵的)无操作,因为逐行流式传输 stdout 输出是 PowerShell 默认所做的.换句话说:它对您的情况没有影响也就不足为奇了。


可选阅读:方便功能Invoke-WithEncoding和诊断功能Debug-NativeInOutput,用于临时编码需求/诊断:

如果将所有 PowerShell 控制台切换到 UTF-8 不是一个选项和/或您需要处理使用 UTF-8 或活动 OEM 代码页以外的特定编码的“流氓”程序,您可以安装:

  • 函数Invoke-WithEncoding,它在调用外部程序时临时切换到给定的编码,直接来自this answer,如下(我可以保证您认为这样做是安全的,但您应该始终检查):
# Download and define advanced function Invoke-WithEncoding in the current session.
irm https://gist.github.com/mklement0/ef57aea441ea8bd43387a7d7edfc6c19/raw/Invoke-WithEncoding.ps1 | iex
  • 函数Debug-NativeInOutput,它帮助诊断外部程序的编码问题,直接来自this Gist,如下(同样,您应该先检查) :
# Download and define advanced function Debug-NativeInOutput in the current session.
irm https://gist.github.com/mklement0/eac1f18fbe0fc2798b214229b747e5dd/raw/Debug-NativeInOutput.ps1 | iex

以下是使用 python 命令打印重音字符的示例命令

与 Node.js 一样,Python 的行为是非标准的,虽然它不使用 UTF-8,但系统的活动 ANSI(!) 代码页(而不是预期的 OEM 代码页)。

也就是说,即使您将 PowerShell 控制台切换为 UTF-8,默认情况下与 Python 脚本的通信也无法正常工作,除非做出额外的努力,Invoke-WithEncoding 可以为您封装:

注意:我在这里使用 Python 作为示例,以说明函数的工作原理。 可以让 Python 使用 UTF-8,即通过将环境变量 PYTHONUTF8 设置为 1 或 - 在 v3.7+ 中 - 通过传递参数 {{1} }(大小写准确)。


-X utf8 示例:

Invoke-WithEncoding
  • 请注意,# Outputs *already-decoded* output,so if the output *prints* fine,# then *decoding* worked fine too. PS> Invoke-WithEncoding { python -c "print('eé')" } -Encoding Ansi -WindowsOnly eé 确保对 .NET 字符串的实际解码发生在它输出之前,因此编码问题不会被 direct-在 Windows 上显示输出似乎是正确的(更多信息见下文)。

  • Invoke-WithEncoding 用于跨平台兼容性,并确保在这种情况下编码仅适用于 Windows(在 Unix 上,Python 使用 UTF-8)。


-WindowsOnly 示例:

默认使用 PowerShell 控制台,使用系统的 OEM 代码页,您将看到以下输出,使用相同的 Python 命令,从 PowerShell (Core) 7.1 调用:

Debug-NativeInOutput

this Gist

  • 注意 PS> Debug-NativeInOutput { python -c "print('eé')" } 属性,显示基于将 Python 的输出解释为 错误解码的结果 >OEM- 而不是 ANSI 编码:DecodedOutput。 ('eΘ' 属性为空,因为该命令不涉及将数据传送到 Python 脚本。)

  • 相比之下,直接显示打印输出打印很好(因为 Python 那时 - 并且只有那时 - 使用 Unicode),隐藏问题,但是一旦您想以编程方式处理输出 - 在变量中捕获,发送到管道中的另一个命令,重定向到文件 - 编码问题就会浮出水面.

  • Input* 一样,Invoke-WithEncoding 支持 Debug-NativeInOutput 参数,所以如果你将 -Encoding 传递给上面的调用,你会看到 Python 的输出被解码正确。

  • 输出反映了这样一个事实:在 PowerShell (Core) 中,-Encoding Ansi 默认为 UTF-8,而在 Windows PowerShell 中,它默认为 ASCII(!)。这种与实际编码的不匹配是有问题的,Debug-NativeInOutput 提出了一种在未来解决此问题的方法(仅适用于 PowerShell (Core))。

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。

相关推荐


使用本地python环境可以成功执行 import pandas as pd import matplotlib.pyplot as plt # 设置字体 plt.rcParams['font.sans-serif'] = ['SimHei'] # 能正确显示负号 p
错误1:Request method ‘DELETE‘ not supported 错误还原:controller层有一个接口,访问该接口时报错:Request method ‘DELETE‘ not supported 错误原因:没有接收到前端传入的参数,修改为如下 参考 错误2:cannot r
错误1:启动docker镜像时报错:Error response from daemon: driver failed programming external connectivity on endpoint quirky_allen 解决方法:重启docker -> systemctl r
错误1:private field ‘xxx‘ is never assigned 按Altʾnter快捷键,选择第2项 参考:https://blog.csdn.net/shi_hong_fei_hei/article/details/88814070 错误2:启动时报错,不能找到主启动类 #
报错如下,通过源不能下载,最后警告pip需升级版本 Requirement already satisfied: pip in c:\users\ychen\appdata\local\programs\python\python310\lib\site-packages (22.0.4) Coll
错误1:maven打包报错 错误还原:使用maven打包项目时报错如下 [ERROR] Failed to execute goal org.apache.maven.plugins:maven-resources-plugin:3.2.0:resources (default-resources)
错误1:服务调用时报错 服务消费者模块assess通过openFeign调用服务提供者模块hires 如下为服务提供者模块hires的控制层接口 @RestController @RequestMapping("/hires") public class FeignControl
错误1:运行项目后报如下错误 解决方案 报错2:Failed to execute goal org.apache.maven.plugins:maven-compiler-plugin:3.8.1:compile (default-compile) on project sb 解决方案:在pom.
参考 错误原因 过滤器或拦截器在生效时,redisTemplate还没有注入 解决方案:在注入容器时就生效 @Component //项目运行时就注入Spring容器 public class RedisBean { @Resource private RedisTemplate<String
使用vite构建项目报错 C:\Users\ychen\work>npm init @vitejs/app @vitejs/create-app is deprecated, use npm init vite instead C:\Users\ychen\AppData\Local\npm-
参考1 参考2 解决方案 # 点击安装源 协议选择 http:// 路径填写 mirrors.aliyun.com/centos/8.3.2011/BaseOS/x86_64/os URL类型 软件库URL 其他路径 # 版本 7 mirrors.aliyun.com/centos/7/os/x86
报错1 [root@slave1 data_mocker]# kafka-console-consumer.sh --bootstrap-server slave1:9092 --topic topic_db [2023-12-19 18:31:12,770] WARN [Consumer clie
错误1 # 重写数据 hive (edu)> insert overwrite table dwd_trade_cart_add_inc > select data.id, > data.user_id, > data.course_id, > date_format(
错误1 hive (edu)> insert into huanhuan values(1,'haoge'); Query ID = root_20240110071417_fe1517ad-3607-41f4-bdcf-d00b98ac443e Total jobs = 1
报错1:执行到如下就不执行了,没有显示Successfully registered new MBean. [root@slave1 bin]# /usr/local/software/flume-1.9.0/bin/flume-ng agent -n a1 -c /usr/local/softwa
虚拟及没有启动任何服务器查看jps会显示jps,如果没有显示任何东西 [root@slave2 ~]# jps 9647 Jps 解决方案 # 进入/tmp查看 [root@slave1 dfs]# cd /tmp [root@slave1 tmp]# ll 总用量 48 drwxr-xr-x. 2
报错1 hive> show databases; OK Failed with exception java.io.IOException:java.lang.RuntimeException: Error in configuring object Time taken: 0.474 se
报错1 [root@localhost ~]# vim -bash: vim: 未找到命令 安装vim yum -y install vim* # 查看是否安装成功 [root@hadoop01 hadoop]# rpm -qa |grep vim vim-X11-7.4.629-8.el7_9.x
修改hadoop配置 vi /usr/local/software/hadoop-2.9.2/etc/hadoop/yarn-site.xml # 添加如下 <configuration> <property> <name>yarn.nodemanager.res