Hallo, wir haben einen Server auf dem ca. 10 virtuelle Maschinen laufen. Unter hoher Last, z.B. Kopieren der raw-files der VM's auf ein NAS, ist uns schon 2x das OCFS2-Dateisystem kaputt gegangen. Auch mit BTRFS hatten wir Probleme. Könnt Ihr mir ein stabiles FS mit snapshot-Funktionalität empfehlen ? Es muss nicht cluster-fähig sein. Danke. Bernd -- Bernd Lentes SystemAdministrator Institute of Metabolism and Cell Death Helmholtz Zentrum München Building 25 office 122 Bernd.lentes@helmholtz-munich.de +49 89 3187 1241 Helmholtz Zentrum München – Deutsches Forschungszentrum für Gesundheit und Umwelt (GmbH) Ingolstädter Landstraße 1, D-85764 Neuherberg, https://www.helmholtz-munich.de Geschäftsführung: Prof. Dr. med. Dr. h.c. Matthias H. Tschöp, Dr. Michael Frieser | Aufsichtsratsvorsitzende: MinDir’in Prof. Dr. Veronika von Messling Registergericht: Amtsgericht München HRB 6466 | USt-IdNr. DE 129521671
Am Dienstag, 19. März 2024, 11:32:29 CET schrieb Bernd Lentes:
Unter hoher Last, z.B. Kopieren der raw-files der VM's auf ein NAS, ist uns schon 2x das OCFS2-Dateisystem kaputt gegangen.
Ein Dateisystem geht aufgrund von hoher Leselast kaputt?
Könnt Ihr mir ein stabiles FS mit snapshot-Funktionalität empfehlen ?
Hast du schon mal LVM in Erwägung gezogen? Mit praktischer Erfahrung Snapshots betreffend kann ich leider auch nicht dienen. Ich werde diese auch erst in nächster Zeit sammeln. Habe mich bislang nur mit der Theorie beschäftigt und habe mal 2 Datenbank-Testserver damit eingerichtet. Jedenfalls sollte man auch konsistente MySQL-Backups aus den Snapshot wegsichern können. Grüße Richard
Am 24.03.24 um 15:40 schrieb Richard Hafenscher:
Könnt Ihr mir ein stabiles FS mit snapshot-Funktionalität empfehlen ? Hast du schon mal LVM in Erwägung gezogen?
Mit praktischer Erfahrung Snapshots betreffend kann ich leider auch nicht dienen. Ich werde diese auch erst in nächster Zeit sammeln. Habe mich bislang nur mit der Theorie beschäftigt und habe mal 2 Datenbank-Testserver damit eingerichtet. Jedenfalls sollte man auch konsistente MySQL-Backups aus den Snapshot wegsichern können.
LVM Snapshot ist eine solide Lösung, die allerdings den Nachteil hat, dass jeder Snapshot die Schreibperformance halbiert. möchte man auf einem produktiven System dann evtl. nicht haben. Viele Grüße Ulf
Am Sonntag, 24. März 2024, 20:45:04 CET schrieb Ulf Volmer:
Am 24.03.24 um 15:40 schrieb Richard Hafenscher:
Könnt Ihr mir ein stabiles FS mit snapshot-Funktionalität empfehlen ? Hast du schon mal LVM in Erwägung gezogen?
Mit praktischer Erfahrung Snapshots betreffend kann ich leider auch nicht dienen. Ich werde diese auch erst in nächster Zeit sammeln. Habe mich bislang nur mit der Theorie beschäftigt und habe mal 2 Datenbank-Testserver damit eingerichtet. Jedenfalls sollte man auch konsistente MySQL-Backups aus den Snapshot wegsichern können.
LVM Snapshot ist eine solide Lösung, die allerdings den Nachteil hat, dass jeder Snapshot die Schreibperformance halbiert.
möchte man auf einem produktiven System dann evtl. nicht haben.
Die ist aber wieder in Ordnung, wenn man den Snapshot löscht, oder? Dann könnte man diesen Nachteil ja für das Backup hinnehmen. Grüße Richard
Am 25.03.24 um 00:14 schrieb Richard Hafenscher:
Am Sonntag, 24. März 2024, 20:45:04 CET schrieb Ulf Volmer:
LVM Snapshot ist eine solide Lösung, die allerdings den Nachteil hat, dass jeder Snapshot die Schreibperformance halbiert.
möchte man auf einem produktiven System dann evtl. nicht haben.
Die ist aber wieder in Ordnung, wenn man den Snapshot löscht, oder?
Ja, das ist korrekt.
Dann könnte man diesen Nachteil ja für das Backup hinnehmen.
Ja, kann man. Kommt halt immer drauf an, was für das Szenario akzeptabel ist. Viele Grüße Ulf
Hallo, wundert mich dass es diese Frage immer noch gibt. Antwort: ZFS In diesem speziellen Fall wuerde ich einfach mal ein Proxmox-Installations-ISO runterladen. Da ist alles schon fertig drin was Deine Anwendung zu sein scheint: Virtualisierung, ZFS. LG, Stephan On Tue, 19 Mar 2024 10:32:29 +0000 Bernd Lentes <bernd.lentes@helmholtz-muenchen.de> wrote:
Hallo,
wir haben einen Server auf dem ca. 10 virtuelle Maschinen laufen. Unter hoher Last, z.B. Kopieren der raw-files der VM's auf ein NAS, ist uns schon 2x das OCFS2-Dateisystem kaputt gegangen. Auch mit BTRFS hatten wir Probleme. Könnt Ihr mir ein stabiles FS mit snapshot-Funktionalität empfehlen ? Es muss nicht cluster-fähig sein.
Danke.
Bernd
--
Bernd Lentes SystemAdministrator Institute of Metabolism and Cell Death Helmholtz Zentrum München Building 25 office 122 Bernd.lentes@helmholtz-munich.de +49 89 3187 1241
Helmholtz Zentrum München – Deutsches Forschungszentrum für Gesundheit und Umwelt (GmbH) Ingolstädter Landstraße 1, D-85764 Neuherberg, https://www.helmholtz-munich.de Geschäftsführung: Prof. Dr. med. Dr. h.c. Matthias H. Tschöp, Dr. Michael Frieser | Aufsichtsratsvorsitzende: MinDir’in Prof. Dr. Veronika von Messling Registergericht: Amtsgericht München HRB 6466 | USt-IdNr. DE 129521671
-----Original Message----- From: Stephan von Krawczynski <skraw.ml@ithnet.com> Sent: Sunday, March 24, 2024 5:16 PM To: Bernd Lentes <bernd.lentes@helmholtz-muenchen.de> Cc: opensuse-de@opensuse.org Subject: Re: Dateisystem mit snapshots
[Sie erhalten nicht häufig E-Mails von skraw.ml@ithnet.com. Weitere Informationen, warum dies wichtig ist, finden Sie unter https://aka.ms/LearnAboutSenderIdentification ]
Hallo,
wundert mich dass es diese Frage immer noch gibt. Antwort: ZFS
Servus Stephan, https://documentation.suse.com/de-de/sles/15-SP5/html/SLES-all/cha-filesyste... sagt aber: "Neither the OpenZFS nor ZFS file systems are supported by SUSE.". ??? Bernd Helmholtz Zentrum München – Deutsches Forschungszentrum für Gesundheit und Umwelt (GmbH) Ingolstädter Landstraße 1, D-85764 Neuherberg, https://www.helmholtz-munich.de Geschäftsführung: Prof. Dr. med. Dr. h.c. Matthias H. Tschöp, Dr. Michael Frieser | Aufsichtsratsvorsitzende: MinDir’in Prof. Dr. Veronika von Messling Registergericht: Amtsgericht München HRB 6466 | USt-IdNr. DE 129521671
-----Original Message----- From: Stephan von Krawczynski <skraw.ml@ithnet.com> Sent: Sunday, March 24, 2024 5:16 PM To: Bernd Lentes <bernd.lentes@helmholtz-muenchen.de> Cc: opensuse-de@opensuse.org Subject: Re: Dateisystem mit snapshots
[Sie erhalten nicht häufig E-Mails von skraw.ml@ithnet.com. Weitere Informationen, warum dies wichtig ist, finden Sie unter https://aka.ms/LearnAboutSenderIdentification ]
Hallo,
wundert mich dass es diese Frage immer noch gibt. Antwort: ZFS
In diesem speziellen Fall wuerde ich einfach mal ein Proxmox-Installations-ISO runterladen. Da ist alles schon fertig drin was Deine Anwendung zu sein scheint: Virtualisierung, ZFS.
Servus Stephan, das Proxmox sieht ja ganz interessant aus. Ich kenne das gar nicht, habe nur davon gehört. Wie gut ist das Projekt gepflegt und woher bekomme ich Support ? Community ? Muss ich das von scratch aufbauen oder kriege ich Proxmox in eine bestehende Infrastruktur (mit SLES 15 SP5) hinein ? Bernd Helmholtz Zentrum München – Deutsches Forschungszentrum für Gesundheit und Umwelt (GmbH) Ingolstädter Landstraße 1, D-85764 Neuherberg, https://www.helmholtz-munich.de Geschäftsführung: Prof. Dr. med. Dr. h.c. Matthias H. Tschöp, Dr. Michael Frieser | Aufsichtsratsvorsitzende: MinDir’in Prof. Dr. Veronika von Messling Registergericht: Amtsgericht München HRB 6466 | USt-IdNr. DE 129521671
Am 25.03.24 um 17:18 schrieb Bernd Lentes:
das Proxmox sieht ja ganz interessant aus. Ich kenne das gar nicht, habe nur davon gehört. Wie gut ist das Projekt gepflegt und woher bekomme ich Support ? Community ?
Proxmox ist ein OSS mit einem kommerziellen Service, Infos zum Support findest Du (wenig überrraschend) unter https://www.proxmox.com
Muss ich das von scratch aufbauen oder kriege ich Proxmox in eine bestehende Infrastruktur (mit SLES 15 SP5) hinein ?
Das Ganze ist Debian basiert und kommt ganz klassich mit einer ISO als Installer. Viele Grüße Ulf
Bitte bei Zfs prüfen ob das System ausreichend dimensioniert ist. Von meinem iPhone gesendet
Am 24.03.2024 um 17:16 schrieb Stephan von Krawczynski <skraw.ml@ithnet.com>:
Hallo,
wundert mich dass es diese Frage immer noch gibt. Antwort: ZFS
In diesem speziellen Fall wuerde ich einfach mal ein Proxmox-Installations-ISO runterladen. Da ist alles schon fertig drin was Deine Anwendung zu sein scheint: Virtualisierung, ZFS.
LG, Stephan
On Tue, 19 Mar 2024 10:32:29 +0000 Bernd Lentes <bernd.lentes@helmholtz-muenchen.de> wrote:
Hallo,
wir haben einen Server auf dem ca. 10 virtuelle Maschinen laufen. Unter hoher Last, z.B. Kopieren der raw-files der VM's auf ein NAS, ist uns schon 2x das OCFS2-Dateisystem kaputt gegangen. Auch mit BTRFS hatten wir Probleme. Könnt Ihr mir ein stabiles FS mit snapshot-Funktionalität empfehlen ? Es muss nicht cluster-fähig sein.
Danke.
Bernd
--
Bernd Lentes SystemAdministrator Institute of Metabolism and Cell Death Helmholtz Zentrum München Building 25 office 122 Bernd.lentes@helmholtz-munich.de +49 89 3187 1241
Helmholtz Zentrum München – Deutsches Forschungszentrum für Gesundheit und Umwelt (GmbH) Ingolstädter Landstraße 1, D-85764 Neuherberg, https://www.helmholtz-munich.de Geschäftsführung: Prof. Dr. med. Dr. h.c. Matthias H. Tschöp, Dr. Michael Frieser | Aufsichtsratsvorsitzende: MinDir’in Prof. Dr. Veronika von Messling Registergericht: Amtsgericht München HRB 6466 | USt-IdNr. DE 129521671
-----Original Message----- From: Ralf Prengel <ralf.prengel@rprengel.de> Sent: Tuesday, March 26, 2024 4:45 PM To: Stephan von Krawczynski <skraw.ml@ithnet.com> Cc: Bernd Lentes <bernd.lentes@helmholtz-muenchen.de>; opensuse- de@opensuse.org Subject: Re: Dateisystem mit snapshots
[Sie erhalten nicht häufig E-Mails von ralf.prengel@rprengel.de. Weitere Informationen, warum dies wichtig ist, finden Sie unter https://aka.ms/LearnAboutSenderIdentification ]
Bitte bei Zfs prüfen ob das System ausreichend dimensioniert ist.
Servus Ralf, was meinst Du genau mit "ausreichend dimensioniert" ? Genügend Hardwareressourcen (CPU, RAM, DISK) ? Bernd Helmholtz Zentrum München – Deutsches Forschungszentrum für Gesundheit und Umwelt (GmbH) Ingolstädter Landstraße 1, D-85764 Neuherberg, https://www.helmholtz-munich.de Geschäftsführung: Prof. Dr. med. Dr. h.c. Matthias H. Tschöp, Dr. Michael Frieser | Aufsichtsratsvorsitzende: MinDir’in Prof. Dr. Veronika von Messling Registergericht: Amtsgericht München HRB 6466 | USt-IdNr. DE 129521671
On Tue, 26 Mar 2024 16:45:13 +0100 Ralf Prengel <ralf.prengel@rprengel.de> wrote:
Bitte bei Zfs prüfen ob das System ausreichend dimensioniert ist. Von meinem iPhone gesendet
Oder wenn man schon weiss dass zuwenig RAM da ist ein Limit setzen das zur RAM-Groesse passt, wie z.B. options zfs zfs_arc_max=107374182400 (in /etc/modprobe.d/10-zfs.conf o.ae.)
Am 24.03.2024 um 17:16 schrieb Stephan von Krawczynski <skraw.ml@ithnet.com>:
Hallo,
wundert mich dass es diese Frage immer noch gibt. Antwort: ZFS
In diesem speziellen Fall wuerde ich einfach mal ein Proxmox-Installations-ISO runterladen. Da ist alles schon fertig drin was Deine Anwendung zu sein scheint: Virtualisierung, ZFS.
LG, Stephan
On Tue, 19 Mar 2024 10:32:29 +0000 Bernd Lentes <bernd.lentes@helmholtz-muenchen.de> wrote:
Hallo,
wir haben einen Server auf dem ca. 10 virtuelle Maschinen laufen. Unter hoher Last, z.B. Kopieren der raw-files der VM's auf ein NAS, ist uns schon 2x das OCFS2-Dateisystem kaputt gegangen. Auch mit BTRFS hatten wir Probleme. Könnt Ihr mir ein stabiles FS mit snapshot-Funktionalität empfehlen ? Es muss nicht cluster-fähig sein.
Danke.
Bernd
--
Bernd Lentes SystemAdministrator Institute of Metabolism and Cell Death Helmholtz Zentrum München Building 25 office 122 Bernd.lentes@helmholtz-munich.de +49 89 3187 1241
Helmholtz Zentrum München – Deutsches Forschungszentrum für Gesundheit und Umwelt (GmbH) Ingolstädter Landstraße 1, D-85764 Neuherberg, https://www.helmholtz-munich.de Geschäftsführung: Prof. Dr. med. Dr. h.c. Matthias H. Tschöp, Dr. Michael Frieser | Aufsichtsratsvorsitzende: MinDir’in Prof. Dr. Veronika von Messling Registergericht: Amtsgericht München HRB 6466 | USt-IdNr. DE 129521671
participants (5)
-
Bernd Lentes -
Ralf Prengel -
Richard Hafenscher -
Stephan von Krawczynski -
Ulf Volmer