Как найти строку в списке файлов .gz?

Вы можете использовать эту команду, чтобы узнать, появляется ли строка в некоторых файлах.gz в одной папке:

zgrep the_string  *.gz -l

Чтобы сделать это для списка папок, которые находятся в одной папке:

find. -name "*.gz" | xargs zgrep the_string -l

Например, вывод выглядит следующим образом:

./tmp/2/F.tar.gz
./tmp/2/F1.tar.gz
./tmp/1/F.tar.gz
./tmp/1/F1.tar.gz

Теперь вы получаете список файлов, содержащих эту строку.

Учитывая некоторый каталог верхнего уровня -, topdir, в котором расположены все ваши сжатые файлы, и при условии, что вы используете реализацию GNUzgrep:

zgrep -R -l -F --include='*.gz' -e 'string' topdir

Это приведет к поиску stringкак подстроки в любом изgzip-сжатых файлов в topdirи вернет пути ко всем совпадающим файлам.

Используя zgrepв системе без GNU zgrep, вы, скорее всего, не сможете использовать --include. Это может не быть проблемой, если ваш topdirсодержит только сжатые файлы, но если вы хотите искать только файл с суффиксом имени файла .gz, вы можете сделать

find topdir -type f -name '*.gz' -exec zgrep -l -F -e 'string' {} +

При этом будут найдены все обычные файлы с именами, заканчивающимися на .gz, в папке topdirи будет выполняться данная команда zgrepдля как можно большего количества файлов.

Если у вас даже нет zgrep, вы можете сделать

find topdir -type f -name '*.gz' -exec sh -c '
    for pathname do
        if gzip -dc "$pathname" | grep -q -F -e 'string'; then
            printf "%s\n" "$pathname"
        fi
    done' sh {} +

При этом каждый файл извлекается и проходит через обычный grep. Если найдена строка, содержащая заданную строку, печатается путь к файлу.

Обратите внимание, что «внутренний» сценарий оболочки представляет собой цикл, который можно легко изменить для работы со всеми*.gz-файлами в одном каталоге:

for pathname in./*.gz; do
    if gzip -dc "$pathname" | grep -q -F -e 'string'; then
        printf "%s\n" "$pathname"
    fi
done

Если вы хотите сопоставить stringкак полное слово, а не как подстроку, добавьте -wк вызовам grepвыше. Если stringнужно интерпретировать как регулярное выражение,удалить -F.

Если вы ищете повторяющиеся строки, которые не известны заранее, вот сценарий, который будет искать повторяющиеся слова в наборе файлов (слово здесь означает все, что имеет пробелы вокруг него):

#!/bin/bash

dup_words() {
    zcat $1 | tr ' ' '\n' | sed '/^$/d' | sort | uniq -c | awk '{if ($1 > 1) m=1; } END { exit(!m) } '
}

for i in *.gz
do
    dup_words $i && echo $i
done

Он будет разбивать строки при каждом появлении пробела, затем удалять пустые строки, находить и подсчитывать вхождения и, наконец, проверять наличие более одного вхождения.

Цикл просто выводит имя файла, и вы можете настроить действие после &&по своему усмотрению.

Вы можете использовать эту команду-

zgrep "foo" $(find. -name "*.gz")