Shell 逐行读取文件 - Shell-Bash

在Shell-Bash中，读取文件的一种常见需求是逐行读取文件。通过Shell-Bash中提供的while循环，可以方便地逐行读取文件。

1. 逐行读取文件的基本语法

#!/bin/bash

while read line
do
    echo $line
done < file.txt

上述语法的含义是：将文件file.txt内容逐行读取，每次读取的内容都存储在变量$line中，并执行该循环中的操作（本例仅将变量$line的值输出）。

2. 逐行读取文件的高级选项

2.1 指定分隔符

在默认情况下，Shell-Bash会将每行数据的行尾作为分隔符。如果需要指定其他分隔符，则需要使用IFS变量。例如，如果需要将逗号作为分隔符，则可以使用以下语法：

#!/bin/bash

IFS=,
while read field1 field2 field3
do
    echo $field1 $field2 $field3
done < file.txt

上述语法的含义是：将文件file.txt内容逐行读取，以逗号作为分隔符，每次读取的值会依次存储在变量$field1、$field2和$field3中。

2.2 跳过注释和空白行

有时，文件中包含注释和空白行，需要跳过这些数据。可以使用grep和sed命令对文件进行处理，再进行逐行读取。例如，如果文件中包含以#开头的注释行，可以使用以下语法：

#!/bin/bash

while read line
do
    if [[ "$line" =~ ^#.* ]]; then
        continue
    fi
    echo $line
done < <(grep -v "^#" file.txt)

上述语法的含义是：将文件file.txt内容逐行读取，过滤掉以#开头的注释行，并输出其余行的内容。

2.3 处理大文件

对于大文件，逐行读取可能会导致性能问题。可以使用awk命令对文件进行处理，再针对处理后的数据进行逐行读取。例如，如果需要处理一个10GB的文件，可以使用以下语法：

#!/bin/bash

awk '{print}' file.txt | while read line
do
    echo $line
done

上述语法的含义是：将文件file.txt通过awk命令处理，再对处理后的数据进行逐行读取。

3. 总结

逐行读取文件是Shell-Bash中的常见需求。根据不同的场景，可以选择不同的处理方式。通过本文的介绍，可以更好地掌握逐行读取文件的技巧和方法。