Eigenbau Server Feedback

In diesem Thread stelle ich meinen neuen Homeserver vor, frage nach Feedback und tausche meine Lösungen aus. Der ursprüngliche Startpost ist im Spoiler unten zu finden.

Ziel
Aktuell habe ich eine Synology DS216+II und langsam laufen die Platten voll. Statt die Platten zu tauschen, möchte ich die Diskstation durch einen Selbstbau-Server ersetzen. Im wesentlichen, weil ich ein bisschen Datenparanoid bin und gerne auf meinem Server ein selbstheilendes Dateisystem mit ECC Ram haben möchte. Außerdem möchte ich unter anderem meinen TV-Server zentralisieren und mal schauen, was sonst noch so kommt :).

Hardware
Obwohl ich eigentlich AMD Bevorzuge, ist die CPU von Intel, einfach wegen des Stromverbrauches, weil es kaum günstige EPYCs gibt, und weil die Option vlt. den IGP für Transcoding zu nutzen nett ist.
Bei den Festplatten habe ich mich dazu entschieden vier 10TB WD MyBook aus ihrer Schale zu pellen und so jede Menge Geld zu sparen. Das ging ziemlich easy.
Vom ursprünglichen Plan ein normales Desktopgehäuse zu kaufen bin ich abgesprungen und habe mir einen Netzwerkschrank gekauft.
Hier ist die komplette Aufstellung:

Da man später immer klüger ist, werde ich die Adapter wieder zurück schicken, denn da die Molex-Anschlüsse an den HotSwap-Bays des Gehäuses parallel geschaltet sind, braucht man die nicht und der eine Molex-Anschluss an jedem der Netzteilstränge reicht aus.
Das Gehäuse ist von der Verarbeitung nicht überragend, aber das habe ich auch nicht erwartet. Die 8 HotSwap-Bays und die sehr kurze Bautiefe von 45cm machen es interessant, weil man so einen Server mit vielen gut erreichbaren Festplatten in einem 60cm tiefen Netzwerkschrank verbauen kann. Während die scharfen Kanten, die Lüfter, die ich nie getestet habe, und die mäßige Lackierung mich nicht sehr interessieren, gibt es ein großes Manko. Der Airflow ist hier wirklich absolut nicht durchdacht. Die Festplattenkäfige sind sehr luftig, was dazu führt, dass der Lüfter hauptsächlich Luft aus dem Gehäuseinneren nur an der Platine der Bay vorbei zieht und kaum entlang der Platten. Außerdem sind die vielen Öffnungen in den PCI-Slotblenden und an der Rückwand eher schlecht, da so Luft von hinten ins Gehäuse gezogen wird, statt von vorne. Viele dieser Probleme kann man mit Klebeband verringern. Unschön ist es trotzdem. Durch das Netzteil geht die Luft auch rückwärts rein, aber das möchte ich doch lieber nicht abkleben.

Aus meinem HTPC wandert noch meine DVB-T2 Karte ins Gehäuse.

Software
Ich habe mich dafür entschieden ein schlichtes Debian Stable zu installieren und für ein paar Dienste Docker zu nutzen. Die Daten landen auf einem ZFS aus striped mirrors, also sowas ähnliches wie Raid10. Dateiserver wird Samba. Für das Entertainment gibt es TVHeadend mit easyEPG und Emby.
Wähend ich mit den letzten Anwendungen sehr vertraut bin, habe ich mich vor allem mit ZFS und weiterer eher im Hintergrund stehender Software beschäftigt. Das hat bereits sehr viel Zeit gekostet und ist vielleicht nicht für jeden was, aber ich bin letztlich wohl auch nur ein Nerd.
Für die Backups werde ich borgbackup für eine lokale USB-HDD und für einen backupserver, den ich nach finalem Umzug der Daten und Dienste auf der Synology NAS einrichte, nutzen. Das ist eine ziemlich coole Backuplösung, aber man muss sich einlesen und kommt nicht wirklich drumrum, sich ein kleines Script zu schreiben und wirklich Gedanken über die Prozesse beim Backup zu machen.
Um den Zustand meines Systems zu beobachten, möchte ich mir Emailbenachrichtigungen für SMART-Tests, Backupjobs, Scrubs und Systemupgrades einrichten. Ob ich darüber hinaus noch wirklich Infos brauche, weiß ich noch nicht. Vermutlich eher nicht.

Skript
Hier packe ich irgendwann noch mal mein entpersonalisiertes Installationsskript hin. Ich habe mir angewöhnt für so Sysadmin sachen .md Files anzulegen und mein Vorgehen und die einzelnen Schritte hinzuschreiben. Das hat mir schon echt häufig geholfen, wenn ich nicht mehr genau wusste, wie ich was eingerichtet habe, oder wie ich was reparieren kann. Kann ich nur empfehlen. Bonus ist, ich kann easy teilen, wie ich das hier eingerichtet habe.

Bilder
Hier kommen demnächst noch mal ein paar Bilder hin, die auch im Thread zu finden sind :).

Ich will auf jeden Fall ECC und will eher auf Serverhardware setzen.

Habe erst mit OMV geliebäugelt, aber im Prinzip wirkt das wie eine GUI für Debian. Da kann ich gleich einen Debianserver aufsetzen und weiß, was ich wie konfiguriert habe+ ich habe nur das konfiguriert, was ich auch brauchte. Und das sind zunächst eine Hand voll Dockercontainer, der ZFSpool, Benutzer und Gruppen und der Sambaserver.

Werde mir die Boards anschauen.

Was hast du denn nicht hingefrickelt bekommen, was dir unraid jetzt erleichtert?

Ich will halt auch keine Blackbox mehr. Finde es zum Beispiel gut, dass ich mir bei arch genau überlegen muss, wie ich die Festplatte formatiere und nicht einfach irgendein Installer alles konfiguriert.

Das Fujitsu kann aber kein IPMI oder? Ist bei ner IGPU nicht super schlimm, aber wäre schön.

Ich kann mir Unraid ja nochmals anschauen, aber das sieht so nach Blackbox aus. OMV vs Debian ist für mich klar entschieden.

Das einzige wovor es mich gruselt, ist, falls ich hibernate nutzen will. Aber ich hab jetzt auch wieder mal gelesen, dass das für nen Server vlt. eh nicht so gut ist:
Contra: lästige und frickelige Config, schlecht für die Platten.
Pro: gut für die Umwelt und den Geldbeutel.

Hibernate kann halt mit TV-Karten Probleme machen. Und ich muss dann schauen, wie ich das System dazu bekomme, zu einer geplanten Aufnahme oder zu einem geplanten Backup oder sonstigen Chronjobs wieder wach zu bekommen.

Ich kann das auch sehr gut verstehen. Bin vor kurzem auch Vater geworden und die Zeit, die für so Spielereien übrig bleibt, ist enorm geschrumpft. Ich frage mich halt, ob ich mit einem System wie unraid wirklich viel Zeit spare, nachdem ich alles eingerichtet habe und ob ich genauso verstehe, was eigentlich passiert.

Ich hab hier schon Threads zu angepassten systemd units gelesen, vlt. auch von dir.
Bislang läuft die TV-Karte im HTPC und ich nutze das Addon aus dem saxbmc repo.
Bei sowas hoffe ich halt, dass es ein Einmalaufwand ist. Aber klar klingt das verlockend bei solchen Problemen.

Auf der anderen Seite merke ich, dass ich aktuell bei Synology wenig Ahnung habe, wie bestimmte Dinge funktionieren. Sei es Rechteverwaltung, Verschlüsselung oder der Sambaserver. Alles geht irgendwie, aber ich weiß nicht wie und warum.

Das Gehäuse vom @DerBaschdi könnte gefallen. Vlt. werd ich ja irgendwann mal eine Wohnung mit Verkabelung und Patchfeld haben, wo sich ein kleiner Serverschrank lohnt.

M4tt0: Du hast ja wirklich fast identische Komponenten ausgewählt ^^-

Bezüglich Unraid: Ich habe hier https://www.snapraid.it/compare gelesen, dass das Unraid eigene Filesystem ja gar keine Bitrot-Detection mitbringt. Das wäre mir schon wichtig. Damit wäre es dann wohl raus. Oder ist die Information veraltet?

Wegen der Ruhemodusgeschichte: Meine Platten in der NAS sind anscheinend in den letzten drei Jahren grob 9000 mal geschaltet worden. Also irgendwas wie Größenordnung 10 am Tag. Wenn ich S3 nutze kommt noch eine weitere Komplexität hinzu. Da weiß ich auch nicht, ob unraid das von Haus aus könnte. Ich habe eine UPS, die im Stromausfall per USB ein Signal sendet. Bei diesem soll der Server runterfahren. Wenn die im S3 ist, dann muss sie ja erst hochfahren, um runterzufahren. Aber ob das überhaupt möglich ist, keine Ahnung.

Ich nutze auf der Synology BTRFS, aber leider ohne ECC. Das ist ein dämlicher Designfehler von dem Ding und auch ein wesentlicher Grund für den Eigenbau.
BTRFS scheint aber unter Debian und auch unter OMV noch eine große Baustelle zu sein. Die ganzen Features davon sind nicht easy nutzbar. Keine Ahnung, wie das bei Unraid ist.