Linux Command - find-gzip-scp

Linux Command - find-gzip-scp (8 Beiträge, 439 Mal gelesen)

Du bist nicht angemeldet. [ Login/Registrieren ]

Hallo. ich würde gerne nach files such, diese dann zippen u. per scp auf einen remote host kopieren. das ganze am besten mithilfe eines cronjobs

Dieser Befehl funtioniert u. zippt alle im Ornder befindlichen pcap Files
find -type f -iname "*.pcap" -mmin -60 -exec gzip "{}" \;

Dieser Befehl funktioniert u. kopiert alle pcap Files auf die Remote Maschine
find ./ -type f -iname "*.pcap" -mmin -60 | xargs -i scp '{}' root@192.168.30.71:/Data

Wie verheirate ich beide Befehle, sodass ich die pcap Files zuerst zippe u. dann auf die Remote Maschine kopiere? Funktioniert das überhaupt oder muss ich das auf zwei Etappen machen?

Kennt jemand eine gute Seite, wo man die Anwendung solcher Befehle anhand von Beispielen nachvollziehen kann?

THX

"schlimma geht imma"

> Hallo. ich würde gerne nach files such, diese dann zippen u. per scp auf einen remote host kopieren.

z.b.:

find ./ -type f -iname "*.pcap" -mmin -60 | tar -T - -czf - | ssh root@192.168.30.71 "cat > /Data/archive.tar.gz"

In der exakten Form für einen Cronjob aber AFAICS noch nicht geeignet, oder? Mit

ssh root@192.168.30.71 "cat > /Data/archive.tar.gz"

wird das tar.gz ja jedesmal überschrieben. Und es ist dann vermutlich ein Archiv, weiß nicht ob der Fredersteller nicht einzeln gezippte PCAPs wünscht?

06.02.2020, 09:28 Uhr - Editiert von MrT2004, alte Version: hier

> wird das tar.gz ja jedesmal überschrieben

Den Namen durch einen mit Datum und Uhrzeit zu ersetzen, daran wird es ja wohl nicht scheitern, falls doch: echo "jetzt ist es $(date +%F_%T)"

> Und es ist dann vermutlich ein Archiv, weiß nicht ob der Fredersteller nicht einzeln gezippte PCAPs wünscht?

Weiß ich auch nicht aber er hat es nicht spezifiziert. Die Anforderung war files finden, zippen und scp verwenden. Der Transfer von einem großen Archiv ist halt viel effizienter als der von vielen kleinen. Wie andere schon ausgeführt haben gibt es bei modifzierten specs deutlich bessere Varianten (zb mit rsync).

Das war auch keine Kritik, sondern eher als Hinweis für den Ersteller gedacht, dass er das uU noch adaptieren muss. Für mich liest das auch eher nicht so, als ob es um Transportkomprimierung ginge, sondern darum, die PCAPs längerfristig komprimiert und einzeln aufrufbar auf einem anderen Rechner zu speichern. Kann aber nur der TE klären.

Irgendwie so hingewurschtelt:


find irgendwas -type f -exec gzip {} + -printf "%p.gz\0" | xargs -0 -i scp {} sonstwas

Wenn es keinen guten Grund gibt, alles in eine Zeile zu quetschen, lieber mehrere Befehle machen.

Wenn man größere Mengen an Dateien auf eine andere Maschine kopieren will, ist scp nicht unbedingt das Hilfsmittel der Wahl.

Hast Du Dir mal rsync angesehen? Das kann auch Kompression und ssh-Transport.

Dieses Forum ist eine frei zugängliche Diskussionsplattform.
Der Betreiber übernimmt keine Verantwortung für den Inhalt der Beiträge und behält sich das Recht vor, Beiträge mit rechtswidrigem oder anstößigem Inhalt zu löschen.
Datenschutzerklärung