有没有办法捕获不符合匹配标准的 Linux“选择”命令的输出? 背景问题

如何解决有没有办法捕获不符合匹配标准的 Linux“选择”命令的输出? 背景问题

“选择”命令是指执行过滤的命令,例如 0 1 2 c1 a NaN 4.5 5.5 grep 等。

背景

至少有几种不同的 IBM 大型机环境支持管道处理(例如,CMS Pipelines)。它不像在 Bash 中那样是一个 shell 结构,而是通常一个专用的 find 命令,它有自己的内置子命令(阶段)来执行过滤和数据处理。

在我看来,更酷的功能之一是执行某种过滤的“选择阶段”通常支持多个输出流。那些符合选择标准的数据行被传递到主要输出流,如果指定,那些不符合选择标准的数据行被传递到次要输出流,在那里它们可以经历完全不同的处理序列。

以上面链接的维基百科页面为例,它可能出现在 REXX 程序中:

PIPE

第二次出现的标签 'PIPE (END ?) < INPUT TXT',/* read contents of file INPUT TXT */ '|A: LOCATE /Hello/',/* find all lines containing "Hello" */ '|INSERT / World!/ AFTER',/* give those to INSERT to append " World!" */ '|B: FANINANY',/* pass to FANINANY,accepts multiple input streams */ '|> NEWFILE TXT A',/* write all contents to file NEWFILE TXT A */ '?A:',/* end this pipeline,2nd output of LOCATE goes here */ '|XLATE UPPER',/* translate text to uppercase */ '|B:' /* feed back into FANINANY stage above */ 连接了 A: 的第二个输出流(在本例中,输入文件中 匹配 LOCATE) 到 "Hello" 的输入流,它将数据转换为大写并将其传递回第一个 XLATE 标签 (B:)。 FANINANY 接受多个输入流,并将同时从所有连接的输入流中读取数据,保持数据的顺序。

在这个例子中问号 FANINANY 作为结束字符,它告诉命令处理器“这是第一个管道的结尾”,以便后面的任何内容都可以用来独立地将另一个管道连接到其他标记的管道阶段,允许您在一个命令中指定整个管道。

示例 ? 文件:

INPUT TXT

在此 foo Hello bar Hello baz Hello 之后,PIPE 文件将包含:

NEWFILE TXT A

问题

我的主要问题是:是否有可能在 Bash 中实现这样的功能?

我认为该框架具有命名管道(FOO Hello World! BAR Hello World! BAZ Hello World! 等)和进程替换(我对这两者都很熟悉)。

但是,这个难题的关键部分是:我假设 Linux/UNIX 命令是否会将其所有输出回显到不同的位置取决于单个命令以及它是否是为此编写的。如果没有,我怀疑必须修改代码,然后我可以想象使用 Bash 构造来实现这种事情。

解决方法

您可以使用 GNU sed 的否定匹配运算符在单个命令中轻松完成两种转换:

$ cd "$(mktemp --directory)"
$ cat > input.txt <<'EOF'
foo
Hello
bar
Hello
baz
Hello
EOF
$ sed '/Hello/! s/\(.*\)/\U\1/;s/\(Hello\)/\1 World!/;' input.txt
FOO
Hello World!
BAR
Hello World!
BAZ
Hello World!

我认为没有一种有效的方法可以将部分标准输入发送到一个命令,并将其一部分发送到另一个命令(相关问题 1,2) ,因为任何过滤标准输入的命令也必然会消耗所有这些。类似的东西

while IFS= read -r line
do
    if [[ "$line" == 'Hello' ]]
    then
        echo "${line} World!"
    else
        echo "${line^^}"
    fi
done < input.txt

不幸的是非常慢。

作为替代方案,您可以使用 COMMAND < input.txt 3< input.txt 将同一文件发送到两个不同的输入流。

,

Unix (/Linux) 程序通常不支持多个输出流,尽管使用 awkperl 之类的程序,您当然可以编写将输出发送到多个位置的脚本。这是一个简单的 awk 脚本,它将匹配的行发送到 stdout,将不匹配的行发送到命名管道:

awk -v nomatch="/path/to/pipe" '{if ($0 ~ /Hello/) {print} else {print $0 > nomatch}}'

但听起来您想以连贯的方式重新组合流(即保持行序),并且没有好的方法可以做到这一点,因为数据独立地流过每个流(可能以不同的速度,具有独立的缓冲等)。

但听起来您真正想要的只是一个以不同方式转换不同行的程序,并且有许多 unix 程序可以做到这一点。按照功能和灵活性(和复杂性)的大致递增顺序,标准的有 sedawkperl,但您几乎可以使用任何东西(甚至 bash 本身!)。以下是 awk 中的示例:

awk '{if ($0 ~ /Hello/) {print $0 " World!"} else {print toupper($0)}}' input.txt >newfile.txt

这是 bash 本身的等价物:

while IFS= read -r line; do
    if [[ "$line" =~ Hello ]]; then
        printf '%s World!\n' "$line"
    else
        tr "[:lower:]" "[:upper:]" <<<"$line"
    fi
done <input.txt >newfile.txt

(使用较新版本的 bash,您可以仅用 tr 替换该 printf '%s\n' "${line^^}" 命令)

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。

相关推荐


使用本地python环境可以成功执行 import pandas as pd import matplotlib.pyplot as plt # 设置字体 plt.rcParams[&#39;font.sans-serif&#39;] = [&#39;SimHei&#39;] # 能正确显示负号 p
错误1:Request method ‘DELETE‘ not supported 错误还原:controller层有一个接口,访问该接口时报错:Request method ‘DELETE‘ not supported 错误原因:没有接收到前端传入的参数,修改为如下 参考 错误2:cannot r
错误1:启动docker镜像时报错:Error response from daemon: driver failed programming external connectivity on endpoint quirky_allen 解决方法:重启docker -&gt; systemctl r
错误1:private field ‘xxx‘ is never assigned 按Altʾnter快捷键,选择第2项 参考:https://blog.csdn.net/shi_hong_fei_hei/article/details/88814070 错误2:启动时报错,不能找到主启动类 #
报错如下,通过源不能下载,最后警告pip需升级版本 Requirement already satisfied: pip in c:\users\ychen\appdata\local\programs\python\python310\lib\site-packages (22.0.4) Coll
错误1:maven打包报错 错误还原:使用maven打包项目时报错如下 [ERROR] Failed to execute goal org.apache.maven.plugins:maven-resources-plugin:3.2.0:resources (default-resources)
错误1:服务调用时报错 服务消费者模块assess通过openFeign调用服务提供者模块hires 如下为服务提供者模块hires的控制层接口 @RestController @RequestMapping(&quot;/hires&quot;) public class FeignControl
错误1:运行项目后报如下错误 解决方案 报错2:Failed to execute goal org.apache.maven.plugins:maven-compiler-plugin:3.8.1:compile (default-compile) on project sb 解决方案:在pom.
参考 错误原因 过滤器或拦截器在生效时,redisTemplate还没有注入 解决方案:在注入容器时就生效 @Component //项目运行时就注入Spring容器 public class RedisBean { @Resource private RedisTemplate&lt;String
使用vite构建项目报错 C:\Users\ychen\work&gt;npm init @vitejs/app @vitejs/create-app is deprecated, use npm init vite instead C:\Users\ychen\AppData\Local\npm-
参考1 参考2 解决方案 # 点击安装源 协议选择 http:// 路径填写 mirrors.aliyun.com/centos/8.3.2011/BaseOS/x86_64/os URL类型 软件库URL 其他路径 # 版本 7 mirrors.aliyun.com/centos/7/os/x86
报错1 [root@slave1 data_mocker]# kafka-console-consumer.sh --bootstrap-server slave1:9092 --topic topic_db [2023-12-19 18:31:12,770] WARN [Consumer clie
错误1 # 重写数据 hive (edu)&gt; insert overwrite table dwd_trade_cart_add_inc &gt; select data.id, &gt; data.user_id, &gt; data.course_id, &gt; date_format(
错误1 hive (edu)&gt; insert into huanhuan values(1,&#39;haoge&#39;); Query ID = root_20240110071417_fe1517ad-3607-41f4-bdcf-d00b98ac443e Total jobs = 1
报错1:执行到如下就不执行了,没有显示Successfully registered new MBean. [root@slave1 bin]# /usr/local/software/flume-1.9.0/bin/flume-ng agent -n a1 -c /usr/local/softwa
虚拟及没有启动任何服务器查看jps会显示jps,如果没有显示任何东西 [root@slave2 ~]# jps 9647 Jps 解决方案 # 进入/tmp查看 [root@slave1 dfs]# cd /tmp [root@slave1 tmp]# ll 总用量 48 drwxr-xr-x. 2
报错1 hive&gt; show databases; OK Failed with exception java.io.IOException:java.lang.RuntimeException: Error in configuring object Time taken: 0.474 se
报错1 [root@localhost ~]# vim -bash: vim: 未找到命令 安装vim yum -y install vim* # 查看是否安装成功 [root@hadoop01 hadoop]# rpm -qa |grep vim vim-X11-7.4.629-8.el7_9.x
修改hadoop配置 vi /usr/local/software/hadoop-2.9.2/etc/hadoop/yarn-site.xml # 添加如下 &lt;configuration&gt; &lt;property&gt; &lt;name&gt;yarn.nodemanager.res