Linux Command - find-gzip-scp

Re(4): Linux Command - find-gzip-scp

MrT2004 — Fri, 07 Feb 2020 10:30:19 GMT

Das war auch keine Kritik, sondern eher als Hinweis für den Ersteller gedacht, dass er das uU noch adaptieren muss. Für mich liest das auch eher nicht so, als ob es um Transportkomprimierung ginge, sondern darum, die PCAPs längerfristig komprimiert und einzeln aufrufbar auf einem anderen Rechner zu speichern. Kann aber nur der TE klären.

Re(3): Linux Command - find-gzip-scp

at_emp — Fri, 07 Feb 2020 09:04:44 GMT

> wird das tar.gz ja jedesmal überschrieben

Den Namen durch einen mit Datum und Uhrzeit zu ersetzen, daran wird es ja wohl nicht scheitern, falls doch: echo "jetzt ist es $(date +%F_%T)"

> Und es ist dann vermutlich ein Archiv, weiß nicht ob der Fredersteller nicht einzeln gezippte PCAPs wünscht?

Weiß ich auch nicht aber er hat es nicht spezifiziert. Die Anforderung war files finden, zippen und scp verwenden. Der Transfer von einem großen Archiv ist halt viel effizienter als der von vielen kleinen. Wie andere schon ausgeführt haben gibt es bei modifzierten specs deutlich bessere Varianten (zb mit rsync).

Re: Linux Command - find-gzip-scp

someonelikeme — Thu, 06 Feb 2020 22:36:31 GMT

Wenn man größere Mengen an Dateien auf eine andere Maschine kopieren will, ist scp nicht unbedingt das Hilfsmittel der Wahl.

Hast Du Dir mal rsync angesehen? Das kann auch Kompression und ssh-Transport.

Re: Linux Command - find-gzip-scp

frostschutz — Thu, 06 Feb 2020 14:54:58 GMT

Irgendwie so hingewurschtelt:


find irgendwas -type f -exec gzip {} + -printf "%p.gz\0" | xargs -0 -i scp {} sonstwas

Wenn es keinen guten Grund gibt, alles in eine Zeile zu quetschen, lieber mehrere Befehle machen.

Re(2): Linux Command - find-gzip-scp

MrT2004 — Thu, 06 Feb 2020 08:27:36 GMT

In der exakten Form für einen Cronjob aber AFAICS noch nicht geeignet, oder? Mit

ssh root@192.168.30.71 "cat > /Data/archive.tar.gz"

wird das tar.gz ja jedesmal überschrieben.

Re(2): Linux Command - find-gzip-scp

MrT2004 — Thu, 06 Feb 2020 08:27:36 GMT

In der exakten Form für einen Cronjob aber AFAICS noch nicht geeignet, oder? Mit

ssh root@192.168.30.71 "cat > /Data/archive.tar.gz"

wird das tar.gz ja jedesmal überschrieben. Und es ist dann vermutlich ein Archiv, weiß nicht ob der Fredersteller nicht einzeln gezippte PCAPs wünscht?

Re: Linux Command - find-gzip-scp

at_emp — Wed, 05 Feb 2020 22:32:13 GMT

> Hallo. ich würde gerne nach files such, diese dann zippen u. per scp auf einen remote host kopieren.

z.b.:

find ./ -type f -iname "*.pcap" -mmin -60 | tar -T - -czf - | ssh root@192.168.30.71 "cat > /Data/archive.tar.gz"

Linux Command - find-gzip-scp

virus — Tue, 04 Feb 2020 22:30:36 GMT

Hallo. ich würde gerne nach files such, diese dann zippen u. per scp auf einen remote host kopieren. das ganze am besten mithilfe eines cronjobs

Dieser Befehl funtioniert u. zippt alle im Ornder befindlichen pcap Files
find -type f -iname "*.pcap" -mmin -60 -exec gzip "{}" \;

Dieser Befehl funktioniert u. kopiert alle pcap Files auf die Remote Maschine
find ./ -type f -iname "*.pcap" -mmin -60 | xargs -i scp '{}' root@192.168.30.71:/Data

Wie verheirate ich beide Befehle, sodass ich die pcap Files zuerst zippe u. dann auf die Remote Maschine kopiere? Funktioniert das überhaupt oder muss ich das auf zwei Etappen machen?

Kennt jemand eine gute Seite, wo man die Anwendung solcher Befehle anhand von Beispielen nachvollziehen kann?

THX