Zählen Sie die Anzahl der von einem Prozess zu einem anderen weitergeleiteten Bytes

Ich führe ein Shell-Skript aus, das Daten von einem Prozess zu einem anderen leitet

process_a | process_b

Kennt jemand einen Weg, um herauszufinden, wie viele Bytes zwischen den beiden Programmen übertragen wurden? Die einzige Lösung, die ich mir im Moment vorstellen kann, wäre, ein kleines c-Programm zu schreiben, das von stdin liest, in stdout schreibt und alle übertragenen Daten zählt, wobei die Anzahl in einer Umgebungsvariablen gespeichert wird, wie:

process_a | count_bytes | process_b

Hat jemand eine ordentlichere Lösung?

Pipe through dd. Die Standardeingabe von dd ist stdin und die Standardausgabe ist stdout. Wenn stdin / stdout I / O beendet ist, wird stderr darüber informiert, wie viele Daten übertragen wurden.

Wenn Sie die Ausgabe von dd erfassen möchten und die anderen Programme bereits mit stderr sprechen, verwenden Sie einen anderen Dateideskriptor. Z.B,

$ exec 4>~/fred
$ input-command | dd 2>&4 | output-command
$ exec 4>&-

Verwendung pv das Rohr Betrachter. Es ist ein großartiges Werkzeug. Sobald Sie davon erfahren, werden Sie nie wissen, wie Sie ohne es gelebt haben.

Es kann auch einen Fortschrittsbalken und die Übertragungsgeschwindigkeit anzeigen.

process_a | tee >(process_b) | wc --byteskönnte funktionieren. Sie können dann die wcZählung dahin umleiten , wo immer Sie sie benötigen. Wenn process_birgendetwas an stdout/ stderrausgegeben wird, müssen Sie dies wahrscheinlich irgendwo umleiten, wenn nur /dev/null.

Für ein leicht erfundenes Beispiel:

filestore:~# cat document.odt | tee >(dd of=/dev/null 2>/dev/null) | wc --bytes
4295

Zur Erklärung: teeErmöglicht die direkte Ausgabe in mehrere Dateien (plus stdout) und das >()Konstrukt ist die "Prozessersetzung" von bash, wodurch ein Prozess in diesem Fall wie eine Nur-Schreib-Datei aussieht, sodass Sie sowohl zu Prozessen als auch zu Dateien umleiten können ( siehe hier , oder diese Frage + Antwort für ein Beispiel der Verwendung von teeAusgabe zu vielen Prozesse zu senden).

Ich weiß, dass ich zu spät zur Party komme, aber ich glaube, ich habe eine gute Antwort, die diesen nützlichen Thread verbessern kann.
Dies ist eine Mischung aus @Phil P und @David Spillett, aber:

• anders als bei @Phil P wird das Erstellen einer neuen Datei vermieden
• anders als bei @David Spillett wird die Pipeline-Struktur beibehalten

Die Anzahl der Bytes wird zusammen mit der Ausgabe von process_b auf stdout ausgegeben.
Sie können ein Präfix verwenden, um die Zeile zu identifizieren, die Bytes enthält, wenn Sie mit der Ausgabe arbeiten ( Bytes:im Beispiel).

exec 3>&1
process_a | tee >({ echo -n 'Bytes:'; wc -c; } >&3) | process_b
exec 3>&-

WARNUNG: Verlassen
Sie sich nicht auf die Reihenfolge der Zeilen in der Ausgabe.
Die Reihenfolge ist unvorhersehbar und kann immer unterschiedlich sein, auch wenn dasselbe Skript mit denselben Parametern aufgerufen wird!