Wie kann ich den Inhalt von Dateien, die mit find gefunden wurden, in eine einzelne Datei zusammenfassen?

Ich habe es geschafft, mich dort zu fotografieren, wo es weh tut (wirklich schlimm), indem ich eine Partition neu formatiert habe, die wertvolle Daten enthielt. Natürlich war es nicht beabsichtigt, aber es ist passiert.

Es gelang mir jedoch, die meisten Daten zu verwenden testdiskund photorecwiederherzustellen. Jetzt habe ich all diese Daten auf fast 25.000 Verzeichnisse verteilt. Die meisten Dateien sind TXT-Dateien, während der Rest Bilddateien sind. In jedem Verzeichnis befinden sich mehr als 300 TXT-Dateien.

Ich kann grepoder kann findbestimmte Zeichenfolgen aus den TXT-Dateien extrahieren und in eine Datei ausgeben. In der folgenden Zeile habe ich beispielsweise überprüft, ob sich meine Daten in den wiederhergestellten Dateien befinden:

find ./recup*/ -name '*.txt' -print | xargs grep -i "searchPattern"

Ich kann "searchPattern" in eine Datei ausgeben, aber das gibt mir nur dieses Muster. Folgendes möchte ich wirklich erreichen:

Durchsuchen Sie alle Dateien und suchen Sie nach einer bestimmten Zeichenfolge. Wenn diese Zeichenfolge in einer Datei gefunden wird, ordnen Sie den gesamten Inhalt dieser Datei einer Ausgabedatei zu. Wenn das Muster in mehr als einer Datei gefunden wird, hängen Sie den Inhalt nachfolgender Dateien an diese Ausgabedatei an. Beachten Sie, dass ich nicht das gesuchte Muster ausgeben möchte, sondern den gesamten Inhalt der Datei, in der sich die Muster befinden.

Ich denke, das ist machbar, aber ich weiß einfach nicht, wie ich den gesamten Inhalt einer Datei abrufen soll, nachdem ich ein bestimmtes Muster daraus entnommen habe.

Wenn ich Ihr Ziel richtig verstehe, wird Folgendes tun, was Sie wollen:

find ./recup*/ -name '*.txt' -exec grep -qi "searchPattern" {} \; -exec cat {} \; > outputfile.txt

Dies sucht nach allen *.txtDateien in ./recup*/, testet jede auf searchPattern, wenn es mit catder Datei übereinstimmt . Die Ausgabe aller cated-Dateien wird geleitet outputfile.txt.

Wiederholen Sie dies für jedes Muster und jede Ausgabedatei.

Wenn Sie eine sehr große Anzahl übereinstimmender Verzeichnisse haben ./recup*, erhalten Sie möglicherweise eine argument list too long error. Der einfache Weg, dies zu umgehen, besteht darin, stattdessen so etwas zu tun:

find ./ -mindepth 2 -path './recup*.txt' -exec grep -qi "searchPattern" {} \; -exec cat {} \; > outputfile.txt

Dies entspricht dem vollständigen Pfad. Also ./recup01234/foo/bar.txtwird abgestimmt. Das -mindepth 2ist so, dass es nicht passt ./recup.txt, oder ./recup0.txt.

Anstatt Ihr Muster auszugeben, geben Sie den Dateinamen mit "-l" auf grep aus und verwenden Sie diesen dann als Eingabe für cat.

find ./recup*/ -name '*.txt' -print | xargs grep -li "searchPattern" | xargs cat

oder

cat $( find ./recup*/ -name '*.txt' -print | xargs grep -li "searchPattern")

Ich vermute, dass Sie die restlichen Details eintragen können. Übrigens, wenn Sie möglicherweise Leerzeichen oder andere ungerade Zeichen in den Dateinamen haben (in diesem speziellen Fall unwahrscheinlich, aber für zukünftige Zwecke), verwenden Sie -print0 für die Suche und -Z für das grep, kombiniert mit der Option -0 für die zu verwendenden xargs Null-Bytes zwischen Dateinamen und keine Zeilenumbrüche.

find ./recup*/ -name '*.txt' -print0 | xargs -0 grep -Zli "searchPattern" | xargs -0 cat

Dies ist kein optimaler Code, aber er ist sehr einfach und funktioniert einwandfrei, wenn Effizienz kein Problem darstellt. Das Problem ist, dass die Dateien mehrmals durchsucht werden, auch wenn die Zeichenfolge bereits darin gefunden wurde.

Suchen Sie zunächst nach Ihren Zeichenfolgen und schreiben Sie die passenden Dateien in eine Liste.

find ./recup*/ -name '*.txt' -execdir grep -il "searchPattern" {} >> /tmp/file_list \;

Wiederholen Sie diesen Schritt bei searchPatternBedarf. Dies erzeugt eine Liste übereinstimmender Dateien unter /tmp/file_list.

Das Problem ist, dass diese Datei möglicherweise Duplikate enthält. Daher können wir die Duplikate durch ersetzen |sort|uniq. Das sortTeil platziert die Duplikate nebeneinander, so dass uniqsie entfernt werden können. Dann können Sie catdiese Dateien zusammen mit xargs(wobei jeder Dateiname durch Zeilenumbruch getrennt ist \n). Daher,

</tmp/file_list sort | uniq | xargs -d "\n" cat > final_file.txt

Im Gegensatz zu den anderen Antworten enthält diese zwei Schritte und eine temporäre Datei. Ich würde sie daher nur empfehlen, wenn Sie mehrere Muster finden müssen.

Abhängig von Ihrer Shell und Umgebung könnten Sie so etwas (in Bash)

while IFS= read -r -d '' file; do
  if grep -qim1 'searchPattern1\|searchPattern2\|searchPattern3' "$file"; then
    cat "$file" >> some/other/file
  fi
done < <(find ./recup*/ -name '*.txt' -print0)

Wenn Sie die Ergebnisse nach Mustern trennen möchten, können Sie dies in etwa ändern

while IFS= read -r -d '' file; do
  if grep -qim1 'searchPattern1' "$file"; then
    cat "$file" >> some/other/file1
  elif grep -qim1 'searchPattern2' "$file"; then
    cat "$file" >> some/other/file2
  elif grep -qim1 'searchPattern3' "$file"; then
    cat "$file" >> some/other/file3
  fi
done < <(find ./recup*/ -name '*.txt' -print0)