Re: RAM für ZFS deduplication mit TrueNAS/FreeNAS (128GB ausreichend?)

killerbees19 — Mon, 31 Jul 2023 14:29:47 GMT

Bist Du sicher, dass die zu speichernden Daten wirklich von Deduplizierung profitieren? Oft gibt es günstigere Methoden.

Du solltest unbedingt einmal "zdb -S" auf einem Testpool mit einigen Dateien laufen lassen. Dann siehst Du auch, wie groß die DDT sein würde.

RAM für ZFS deduplication mit TrueNAS/FreeNAS (128GB ausreichend?)

zecko — Wed, 26 Jul 2023 07:06:40 GMT

Hat jemand hier im Forum Erfahrung mit ZFS compression und deduplication (TrueNAS)? Ich will ein (deduplicated) ZFS system mit zumindest 20TB bauen. Dieses soll dann später auf 40TB erweitert werden. Angesichts der Systemanforderungen wird das aber wohl vor allem mit den RAM eng. (es sollte angeblich die ganze deduplication map in den RAM passen)

Für ZFS wird aber "5GB RAM pro TB deduplicated data" empfohlen. (20*5 = 100GB)
Für compression wird "1GB pro TB storage" vorausgesetzt. (=20GB).

Sind das die tatsächlichen Anforderungen für ein deduplicated und compressed (lz4) setup? Also müsste man wohl am besten ein AM5 System mit 192GB RAM bauen um auch für die Zukunft gesichert zu sein?