grep ... &

grep -E 'foo|bar|...'

egrep 'foo|bar|xyz'

Это понятно. Как при этом выхлоп сразу складывать в разные файлы?

так, видимо, никак. через for чем не устраивает?

Можно попросить подробнее? Чувствую, что можно воспользоваться как-то ссылками на группы, но не знаю, как.

Потерей времени. Биг дата.

Как и любой фильтр, grep выводит в stdout, так что как обычно - надо парсить stdout. Если у вас каких-то особенных ключей типа -ABC и прочих бинарных данных нет, то и grep для bash не надо, считывайте файл построчно, делайте [[ «$str» =~ regex_pattern ]] и записывайте в выходные файлы.

Т.е., предлагается в конвеер поставить это сравнение и по резулльтату писать в нужный файл? Мне кажется, это адово долго.

Можно седом:

script.sed:

/foo/w foo.txt
/bar/w bar.txt
/xyz/w xyz.txt

sed -f script.sed file.txt

Где конвеер? Обычный while read str ; do parse «$str» ; done < $in_file, где в parse() нужное вам количество сравнений и при успешности - дозапись в выходные файлы. Оно, конечно, если прохачить grep на предмет добавления опций, где результат сравнения c каждым pattern бы записывался бы в разный файл было б быстро, но по сравнению с мноокрытным вызовом grep что тут предлагалось мой вариант будет быстрым.

воу! Попробую, спасибо!

т.е., вот так?

cat file.txt|while read string;do
[[ grep foo file.txt ]] && echo $string >>foo.txt
[[ grep bar file.txt ]] && echo $string >>bar.txt
[[ grep xyz file.txt ]] && echo $string >>xyz.txt
done

неплохо положить файл в память перед грепаньем.

Не, [[ - это уже вызов команды, да и ведь сказал, что grep не нужен. Получилось, впрочем, не так то просто:

#!/bin/bash

declare -a PATTERN
PATTERN=("foo" "bar" "xyz")
OUT=("foo.txt" "bar.txt" "xyz.txt")
START_FD=5

parse() {
        l=$1;
        n=$START_FD
        for ((j=0;j<${#PATTERN[@]};j++)) ; do
                [[ "$l" =~ "${PATTERN[j]}" ]] && echo "$l" 1>&$n
                n=$((n+1))
        done
}

n=$START_FD
for ((j=0;j<${#OUT[@]};j++)) ; do
        eval 'exec '$n'> "${OUT[j]}"'
        n=$((n+1))
done
for i; do
        while read l ; do
                parse "$l"
        done < "$i"
done

Работает, спасибо! С awk бы еще такое для разнообразия. Ну и на perl бы посмотреть.

мда. Ну ок, спасибо!

Да оно кажется, что сложно, там просто навороченно для унификации и скорости: количество паттернов незахоркожено, выходные файлы открываются один раз, а потом только дозапись идёт в дескрипторы.

Easy:

/foo/ { print >> "foo.txt" }
/bar/ { print >> "bar.txt" }
/baz/ { print >> "baz.txt" }

man grep

/thread

Это awk?

Покажи плз в man grep, где можно так сделать

Спасибо!

Easy:

Маленькое но - у ТСа всё-таки в оригинале очистка файлов перед первым найденным.

Perl

perl -ne 'm/(foo|bar|xyz)/ && do { open(my $fh,">>$1.txt"); print $fh $_ }' file.txt

perl -ne 'BEGIN { open ($fh{$_}, ">$_.txt") for(qw/foo bar xyz/); } /(foo|bar|xyz)/ && print {$fh{$1}} $_ ' file.txt

Потерей времени. Биг дата.

Башем бигдату ? Странно.

Спасибо!

print >>

Достаточно > , awk не shell, файл не закрывает, так что следующее срабатывание шаблона не обнулит файл.

Продолжая тему.

А как сделать то же самое, если я не знаю, что будет в поле, но хочу продолжать складывать в файл с именем равным значению поля ? Спасибо.

А если мне надо так?

$2 ~ /^whatever$/ { print $3 |"sort -bu /tmp/ > whatever.txt"}

Спасибо, работает, надо еще чуть допилить (см выше) Мне каким-то образом надо впилить еще кое-какие операции в bash до сохранения в файл.

Переспрошу по-другому. Мне нужно напечатать уникальные значения из всех значений одного столбца в файл с именем равным значению другого столбца.

Нашел, как отуникалить столбец по условию.

awk -F';' '$2=="bbb" {values[$1]++} END {for (value in values) { print value}}' text.txt