标签[unix-text-processing] - 堆栈内存溢出

删除忽略特定列的重复项 - Remove duplicates ignoring specific columns

我想从文件中删除所有重复项但忽略前两列，我的意思是不要比较这些列。这是我的示例输入：我想要这个 output：我试过这个波纹管，但它只比较第三列并忽略该行的 rest： ...

使用 Linux bash 根据行值对 output 进行排序 - Sorting output based on row value with Linux bash

我需要打印基于“驻留集大小”值排序的整个 output。进程：wccpd Memory（字节）总虚拟大小 29.5 居民集大小 4.0 过程：回写 Memory（字节）总虚拟大小 0 居民集大小 0 进程：zxfrd Memory（字节）总虚拟大小 71.3 居民套装尺寸 3.9 ...

多个输入文件 - 遍历一个并检查第二个文件中是否包含字符串 - output 段落 - Multiple input files - loop through one and check if string contained in second file - output paragraph

我尝试根据第二个文件过滤文本文件。第一个文件包含以下段落：第二个文件包含一个字符串列表，如下所示：如果 snt 包含在第二个文件中，我现在想过滤第一个文件并只保留段落。对于上面的简短示例，output 文件将如下所示（段落由空行分隔）：因此，我尝试遍历第二个文件并使用 awk 打印出段落， ...

使用 AWK 将 github.com/*/raw/* URL 转换为 raw.githubusercontent.com URL 的问题 - Issue converting github.com/*/raw/* URLs to raw.githubusercontent.com URLS using AWK

给定以下示例 URL：网址.txt 我正在使用这个命令：awk 'BEGIN{FS=OFS="/"}{if ($6~/^raw$/){$3="raw.githubusercontent.com"; for(i=0;i<=NF;++i) if (i!=6) {printf("%s%s",$i, ...

如何创建动态 IF 条件 - How to create dynamic IF condition

我一直在编写一个脚本，它将在 while 循环中无限次运行如果满足所有条件，则只有脚本会中断并执行另一个命令我的代码：这里的问题是字段的数量可能会有所不同需要使我的脚本通用，并且如果我有 10 个字段，它也应该包含一个 if条件动态并开始执行，直到所有字段都等于A并中断以执行另一个命令 ...

如何检查所有多个关键字是否应该出现在给定的文本中 - How to check all multiple keyword should be present in given text or not

我有点坚持这个如何检查我的文本中应该存在的所有关键字如果任何一个关键字不存在，那么它应该返回我状态：1 或 0 我的代码： ...

使用 miller 将字段名称转换为小写 - Convert field names to lower case using miller

我想使用 miller (mlr) 将列名转换为小写。我得到的最接近的是使用带有正则表达式的rename动词。 \L应该改变大小写，而是列名以"\L"为前缀。我使用的是 macOS Catalina 和 miller 5.10.0 印刷但我想打印 ...

不平衡括号正则表达式 - unbalanced parenthesis regex

我试图在google collab中运行上面的代码，但它给出了以下错误： unbalanced parenthesis at position 4 我对 re 模块文档的理解告诉我'$any_expression'$'是正确的使用方式，但我仍然得到错误。因此，我尝试将'\(' + emot ...

在 awk 中处理具有多个分隔符的文本 - Processing text with multiple delims in awk

我有一个看起来像的文字 - 我想要count:1列中的数字所以1并且我希望将这些数字存储在一个数组中。nums=($(echo -n "$grepResult" | awk -F ':' '{ print $4 }' | awk -F '|' '{ print $1 }')) 这似乎非常重复且效率 ...

如何使用正则表达式和 sed 提取分支名称？ - How to extract branch name using regex and sed?

如何使用 bash 从字符串中提取分支名称？例如，我有以下命令： branch=$(git branch -a --contains $sha) 这可能会返回： * branch-1.0 （前缀始终是星号） branch-2.0 remotes/origin/branch-2.0 （这里可能 ...

如何对 Endnote Export File 格式的字段进行排序，其中 Line 在地址中包含 GRAZ 作为第一行？ - how can I sort a field form an Endnote Export File format where the Line contains GRAZ in the address as first line?

我有一个 Endote 导出文件，如下所示：以%+开头的字段包含作者地址，根据作者的作者地址（1 到 n 的关系），它可以包含更多行。每个作者地址由换行符（换行符）分隔现在我想问一下如何按 GRAZ 所在的行对该字段进行排序。 Graz 所在的这一行，它们应该是列表中的第一行。有没有办法通 ...

如何检查一个文件中的字段是否不包含 UNIX 中另一个文件中的值列表 - how to check if a field in one file does not contain list of values from another file in UNIX

我有两个文件，一个是该列的交易价值数据。假设货币代码和另一个文件具有有效/预期的货币代码。文件1： ID|col1|curr_cd 1|abc|印度卢比 2|定义|美元 3|xyz|3AB 4|tuv|ABC .... 文件 2 curr_cd 印度卢比美元计算 ...

如何从访问日志中提取文本？ - How to extract text from access log?

我对此很陌生。我正在尝试从新文件中的访问日志中提取一些文本。我的日志文件是这样的：我想在一个新文件中以以下格式提取。到目前为止，我已经设法完成了这个基本的 awk 命令：这给了我以下 output： ...

如果下一行以单词字符开头，则用空格替换新行 - replace new line with a space if next line starts with a word character

我有一个看起来像的大文本文件我想要一个像我尝试了一些奇怪的、明显有问题的正则表达式，如%s/\\w*\\n/ /g但我真的无法理解。 ...

从文件中删除括号 - remove enclosing brackets from a file

如何使用 bash 脚本（文件中第一次出现[和最后一次出现] ）从文件中有效地删除括号？所有嵌套在外括号内并可能延伸到多行的括号都应保留。可能存在前导或尾随空格。内容file1 cat file1 | magicCommand 期望的输出内容file2 cat file2 ...

如何在bash中将TXT文件格式化为结构化的CSV文件？ - How to format a TXT file into a structured CSV file in bash?

我想在我的 Linux 服务器 (OpenSuse Leap 15.2) 上获得一些有关 CPU 温度的信息。所以我写了一个脚本，每 20 秒收集一次数据并将其写入文本文件。现在我已经删除了所有不需要的垃圾数据（如“CPU Temp”等）。现在我有一个这样的文件：前两行分别是以 C 为 ...

根据其内容从文件中删除部分 - Remove section from file based on its content

如何使用 bash 删除以下文件中包含config B2的配置部分？使用sed或awk或类似的任何快速解决方案？如果有帮助，不同的部分由空行分隔。输入文件：预期输出文件： ...

Miller - 使用 -N 时忽略有效的字段名称 - Miller - Ignore valid field names when using -N

我正在使用miller来处理一些 CSV 文件，如下所示： mlr --mmap --csv --skip-comments -N cut -f 2 my.csv 它运行良好，但有些 CSV 文件包含字段名称，有些不包含，这就是我使用-N 。在具有字段名称的文件中，它们会打印在输出中。你会认 ...

提取字符串之间的子字符串 - Extract substrings between strings

我有一个带有文本的文件，如下所示：我想提取###之间的所有字符串。我想要的输出是这样的：我尝试了以下方法：这几乎有效，但似乎只抓取每行的第一个实例，所以我输出中的第一行只抓取而不是 ...

正则表达式匹配 nginx 位置块？ - Regex to match nginx location block?

我正在开发一个 bash 脚本，该脚本可以将 nginx 位置块添加到采用 URL 的文件中。为防止重复，如果该脚本已经存在，该脚本也会将其删除。为了删除一个块，如果它已经存在，我做了下面的正则表达式。 ^location\\s\\/${URLGOESHERE} {[\\s\\S]*?(?=\ ...