Unraid Découverte et stratégie : Programmer mon installation

[Machin-Truc]

Bonjour à toutes et à tous,

Après quelques recherches, j'ai l'impression que Unraid me conviendrait bien pour sa légèreté et son interface qui semble plutôt efficace. TrucNas me semble moins sexy... à part son prix ;-)
Le cœur du projet MT_Serveur (Machin-Truc représente)
Dégommer Google et le virer de mon smartphone et de la totalité de mes usages, pour une solution européenne et auto-hébergée qui respecte mes données personnelles et celles de mes proches. Alors je sais bien que tout éviter est une utopie, mais perso, je souhaite arrêter de servir de "ressource" pour redevenir libre.
Donc une grosse contrainte : Chaque solution logicielle doit-être vertueuse, payante ou non, et idéalement auto-hébergée et/ou sans inscription.

Stratégie : Serveur Unraid (J'ai l'impression que c'est le plus adapté) avec array de 6x 4TB dont 2x 4TB de parité. Les disques SATA seront sur rack amovibles et/ou externes pour procéder aux sauvegardes des données à protéger.

Outils à prévoir : (J'ai déjà un routeur intégrant deux VPN actifs)

• Sécurité : Que faut-il prévoir pour repousser au mieux les attaques sans passer sa vie à s'occuper du serveur ? Peut-on crypter les données ?
• Contagion : Unraid embarque-t-il un antivirus ou recommandez-vous autre chose ?
• A distance : Existe-t-il des applis depuis smartphone pour veiller sur le serveur à distance et recevoir des alertes ?

Les usages domestiques : (Sans sauvegardes en dehors de l'array)

• Serveur multimédias : Que pensez-vous de Jellybin ? Est-ce vraiment sans inscription ? Sera-t-il indispensable d'ajouter une carte graphique pour diffuser ?
• Sauvegarder les données de tous mes ordis et smartphone : Quelle solution est-elle adaptée avec Unraid ?
• Visioconférence sans fuites de données personnelles ni IA : Le serveur peut-il héberger une solution et connecter directement des clients (Je pense par l'intermédiaire de Nexcloud peut-être) ?
• Messagerie instantanée : Probablement via Nextcloud.

Usages artistique : (Avec sauvegarde externe + array)

• Bibliothèques de photographies, vidéos et musiques (Du coup plutôt médiathèque...) : Faut-il répartir les données entre les disques pour assurer une bonne réactivité du système lorsque je travail sur des projets volumineux ?

Usages professionnels : (Avec sauvegarde externe + array)

• Auto-hébergement Nextcloud et Proton : Les services seront-ils bien accessibles depuis d'autres PC et smartphones ? Ces fournisseurs sont-ils suffisants ou avez-vous des solutions plus simples et tout aussi sécurisées côté données persos ?
  • Coffre-fort numérique
  • Client courriels
  • Stockage des contacts, agendas
  • Office et coworking
  • Cloud auto-hébergé.

Et les questions ultimes...
Ai-je oublié quelque chose qui vous semble important ? Avez-vous d'autres idées ? Connaissez-vous des tutos clairs et complets en français sur chacune des étapes visées ?

Merci infiniment par avance pour vos idées.

 

[falcom]

Bonsoir,

Unraid pour un serveur mutilmedia est un bon choix. Truenas peut aussi le faire, mais est plus robuste.
Niveau complexite kifif en ce qui me concerne.
Niveau config disque tous les deux , tu peux avoir 2dd de secours.

Par contre attention avec Unraid. Tu prevois d'utiliser l'array, tu ne prevois pas de cache SSD/nvme. Tu peux faire sans, mais niveau perf ca sera pas la joie, le debit etant celui d'un seul disque. Si tu cherche de la perf disque soit rajouter du cache, soit faire des pools de disques, ce qui équivaut a du raid classique. Mais meme avec le cache, seul L'ecriture est accelerer, pas la lecture.

Tu peux crypter les donnees sur les deux OS.
Tu as un plugin clamav pour Unraid, mais jamais j'ai jamais tester.
1 appli android existe pour unraid, mais elle est tellement light que ca vaut pas le coup. L'interface unraid sur smarthpone via navigateur est horrible, pas foutu de se retailler correctement, contriarement a Truenas ou OMV qui le gerent bien mieux.

En serveur multimedia/mediatheque plex ou jellyfin, unraid le fait tres bien, pas forcement besoin de rajouter une CG, si tu prend un cpu intel. Apres tous depend le nombre de clients et du besoin de transcodage.

En sauvegarde machine:
- Timemachine en natif
- Apres pour sauvegarder des pc complet installer des soft comme Urbakcup.
- Pour sauvegarder des donnees, duplicati.

Pour les photos, je te conseille immich, y as aussi une applis android.

Pour nextcloud c'est faisable.

Faudra peut etre installer un reverse proxy pour etre accessible de l'exterieur, plex, nextcloud.....

Sur youtube, tu as les videos de superboki pour Unraid.

Bien sur tous ca est faisable, sous Unraid, Truenas, OMV.

 

[morgyann]

Serveur Unraid (J'ai l'impression que c'est le plus adapté)

Si la philosophie du libre te tient autant à coeur - pourquoi t'orientes tu vers un OS payant et cher ?
Fais l'essai - pendant 1 mois avant et vois si c'est adapté à tes pratiques ... (perso après plusierus essais, j'accroche pas - trop de complexité pour des choses simples - et je ne vois pas trop le principe et en quoi cela apporte un + aux autres solutions - mais bon ceux qui ont acroché en sont devenus fan).

Ai-je oublié quelque chose qui vous semble important ?

Tu souhaites partir sur quel matériel ? CPU ? Une machine toute faite ou un assemblage ?

Avez-vous d'autres idées ?

Soit partir sur un classique type OMV ou True Nas (spécial Nas)
Soit partir sur un OS "classique" type Debian ou Ubuntu (avec ou sans interface graphique) et installer tes apps web en "barre metal" (Jellyfin, Plex, serveur web ...) ou en Docker, installer les protocoles nécessaires type SMB NFS - Faire tes RAID - Tu peux en fait tout faire dessus.
Si tu as besoin d'interfaces graphiques (avec plein de tutos) tu as par ex Portainer - Cockpit - CasaOS etc etc

Dégommer Google et le virer de mon smartphone et de la totalité de mes usages,

ça va être compliqué à 100% ( n'oublie pas que Android = Google)

 

[Machin-Truc]

.Bonsoir et merci pour vos réponses. Cela me donne à réfléchir.

Si la philosophie du libre te tient autant à coeur - pourquoi t'orientes tu vers un OS payant et cher ?
Fais l'essai - pendant 1 mois avant et vois si c'est adapté à tes pratiques

Alors malheureusement je n'ai pas de temps de faire de l'exploration en essayant. Je cherche, demande des avis ici, et ensuite je fais un choix et le tiens. 1 mois, ce sera trop court pour que je comprenne le quart de ce que je veux mettre en place .
Unraid semble léger en charge, et permet de reconstruire l'array ou de préserver une partie des contenus, contrairement à un RAID matériel ou logique. Le RAID le plus efficace pour moi serait un RAID 6 pour concurrencer Unraid, mais ma carte matérielle ne tient que le 0,1,5,10.
Les RAID logiques, si je ne m'abuse, impliquent une constance de l'OS et ne sont donc pas transférables facilement en cas de plantage ou piratage ? Je n'ai pas les connaissances pour des récupérations trop complexes, même si je m'adapte pas trop mal. J'avoue que savoir qu'un disque peut être sorti et connecté sur un autre appareil en restant lisible me séduit.

Si tu penses que c'est plus simple avec OMV je veux bien en savoir plus car ce que j'ai pu lire dans quelques tutos m'a semblé trop compliqué et souvent en anglais, ce qui est un vrai handicap perso.

Les logiciels libres... ou payants, pourvu que ce ne soit pas des aspirateurs à données personnelles ;-)
Je n'ai pas de problème à acheter un service ou un bien. En revanche, mes données ne devraient pas être, ni visitées, ni vendues. Plex est sorti de ma liste à cause de l'inscription obligatoire.

Côté tarifs... quand j'ai lu les premiers tests Unraid, sa version de base était annoncée gratuite . Je suis d'accord que c'est bien cher. Mais si c'est le prix pour un truc pratique, ok. Si c'est trop complexe ou peu sécurisé, là je zappe.

Tu souhaites partir sur quel matériel ? CPU ? Une machine toute faite ou un assemblage ?

Alors c'est une machine assemblée intégrant un Xeon 4 cœurs, 40go de RAM DDR4, Carte PCIe SAS Zunate, 6 disques SAS HGST 4TB, et d'autres en SATA sur racks amovibles et externe, pour la partie sauvegarde. (Voir la config complète sur mon profil).

tu ne prevois pas de cache SSD/nvme

Un SSD NVME PCIe gen3 de 500 GB est monté pour le cache. Pour le transcodage, nous serons entre 3 et 6 personnes à utiliser Jellyfin selon si j'ai du monde à la maison.

Soit partir sur un classique type OMV ou True Nas (spécial Nas)

Alors c'est marrant car OMV me semble d'une complexité énorme, et j'ai eu du mal à trouver des tutoriels vulgarisés pour le non-anglophone que je suis ^^. TrueNas et ses 8GB me semble bien lourd et il semble pointé comme moins confidentiel côté données personnelles (Il faudrait que je retrouve l'article qui le compare à Unraid).
Ensuite c'est difficile de se faire un avis dans un monde où les tutos passent par des influenceurs sponsorisés. Et ce n'est pas faite d'avoir mu pas mal d'articles depuis 2 mois.

Soit partir sur un OS "classique" type Debian ou Ubuntu (avec ou sans interface graphique) et installer tes apps web en "barre metal" (Jellyfin, Plex, serveur web ...) ou en Docker, installer les protocoles nécessaires type SMB NFS - Faire tes RAID - Tu peux en fait tout faire dessus.
Si tu as besoin d'interfaces graphiques (avec plein de tutos) tu as par ex Portainer - Cockpit - CasaOS etc etc

Alors je suis une quiche car je n'ai toujours pas utilisé Ubuntu et c'est un univers inconnu. Je ne pige rien en anglais, donc faut vraiment que les tutoriels soient en FR.
Un OS déjà tourné Serveur me ferait gagner temps et limiterait le risque d'âneries.
L'univers est vaste...
J'ai découvert le mot "docker" la semaine dernière. Je n'ai pas encore cherché à comprendre comment cela fonctionne avec un OS, faute de temps. Autant dire que l'enjeu est d'être rationnel, rapide et efficace, en alliant contraintes de confidentialité des données et simplicité de maintenance.

ça va être compliqué à 100% ( n'oublie pas que Android = Google)

C'est impossible ! J'en ai conscience. Le simple fait d'avoir des potes qui vivent dans le bouillon commercial général fait que mes données sont menacées par rebond.
L'étape suivante à ce projet sera de trouver une alternative à Androïd officiel... ou de supprimer tout appareil mobile.

Du coup, je pensais avoir verrouillé l'OS et venais chercher des idées d'applications pour gérer les services, et je reviens à la case départ à me demander quel OS...

Où trouver des tutoriels en FR pour ce projet si je passe sur OMV ?

En attendant merci pour vos avis. Ça complique mes pensées mais si c'est pour faire de meilleurs choix, c'est cool.

 

[morgyann]

Alors malheureusement je n'ai pas de temps de faire de l'exploration en essayant.

Alors cela rique d'être compliqué de te faire un avis si tu ne consacres pas un minimum de test des différentes solutions proposées.
Perso, je suis constament à la recherche des solutions les + simples (installation et utilisation à la portée du + grand nombre) - après c'est vrai que c'est chronophage ... mais quand on aime, on ne compte pas ...

Tester plusieurs solutions permet de voir quelle solution est la + adaptée à tes besoins d'apps et à ton approche / appropriation des configurations (qui peuvent sembler ou être vraiment un peu complexe).

Unraid semble léger en charge, et permet de reconstruire l'array ou de préserver une partie des contenus, contrairement à un RAID matériel ou logique

Perso, je trouve que c'est une usine à gaz - "array" + "cache" pour des perfs aléatoires. Je n'ai toujours pas compris vraiment le fonctionnement et l'efficience ... leur FAQ ne cesse de renvoyer d'un chapitre sur l'autre et pour régler tes problèmes direction le Forum où, comme tu dis, j'ai eu l'impression d'être une quiche vu que je ne comprennais pas la moitié du language de config (pour des apps qui sont facile à dévelooper en mode simple).
Enfin donc, 3 essais x 1 mois pour ma part et ciao (trop compliqué pour moi).
Concernant le matériel, entre leur histoire d'array, de parité, de Jbod, et de cache (les ssd ne suffisent pas ???), ce n'est pas si léger que celà surtout si tu veux avoir un mini de perf ... En fin une fois de + c'est toi qui voit ...

J'ai découvert le mot "docker" la semaine dernière. Je n'ai pas encore cherché à comprendre comment cela fonctionne avec un OS,

Chez Unraid tu vas pouvoir faire ton apprentissage - toutes les apps sont en Docker

Community Apps

Unraid is an operating system that brings enterprise-class features for personal and small business applications. Configure your computer systems to maximize performance and capacity using any combination of OS, storage devices, and hardware.

unraid.net

un Xeon 4 cœurs,

TDP à 80, Perf à 8000, Peu d'indication concernant l'iGPU (???)

je n'ai toujours pas utilisé Ubuntu et c'est un univers inconnu.

Installe le et teste - ce n'est guère plus (voir moins) compliqué qu'un Win - et tu peux tester Docker - et même installer ton serveur dessus - et le site est en français (et plein de tutos aussi).

 

[falcom]

Bjr

Je rejoint l'avis de @morgyann sur Unraid et son system d'array+cache et pool.
Même si j'ai compris le truc, le seul intérêt de l'array est le mixe de taille des DD. Et de pouvoir gratter quelque watt sur les disques non utilises, au détriment peut être de la durée de vie des DD, nombre de redémarrage, le minimum devrait etre 1h pour la mise en veille, pas moins.
Si tous les DD sont de même taille autant faire un pool, mais tous les disques tourneront.

Perso les perf disque unraid ne sont pas au rdv , que ce soit en array ou pool, on se demande parfois ce que le system fait. Compare a Truenas ou ca cravache normalement et omv, meme en mergerfs, ou la vitesse des disque atteind son max.

Precise nous le model de ton cpu, car les xeon 4 coeurs, j'en ai aussi, qui date de 2008, qui suce 100w au repos, pas d'igpu, et qui sont depasser même pour transcoder.

 

[Machin-Truc]

TDP à 80, Perf à 8000, Peu d'indication concernant l'iGPU

Pas d'iGPU sur ce petit Xeon E3 1230 V5. Il est possible que je le change à l'usage pour un grand frère avec 20 Mo de cache 2 coeurs et 8 threads de plus.
Ma CM a un petit chipet graphique qui est suffisant pour la mise en route. On est vraiment sur du hardware destiné à du serveur de TPE/PME de génération entre 2016 et 2019.

Il est probable que j'ajoute une petite CG pour Jellyfin à terme, mais c'est à voir. Depuis un petit stockage multimédia actuel avec 512 Mo de ram, un pauvre tricoeur et une appli Asus Multimédia, j'arrive à tout lire via VLC ou sur SmartTV, sur 2 à 3 postes simultanés en réseau local, HDR ou non, et sans nécessité de transcodage sur la partie vidéo.
Tant que la norme n'évolue pas et que le HEVC survie, tout va bien pour la partie multimédia.
C'est plus complexe pour les bandes son type Atmos que je réencode dans la mesure où aucun de mes équipements ne fait du 7.1.

Quand la 8K débarquera, je serais un peu plus dépendant du transcodage, mais nous serons nombreux à sortir les rames et à jeter nos configs... ou a nous satisfaire de moins.

Pour la photo, le montage et la MAO, c'est depuis un PC avec mes logiciels (Adobe, Qbase, Da Vinci). Le serveur est dans ce cas un simple NAS pour centraliser, sécuriser et transférer les données. Je travaille dessus en local, et exceptionnellement en vacances si aucune bière fraîche n'est à portée de main. La bascule sur un serveur ameliorera le confort pour ces usages en faisant un étage de redondance avant sauvegarde.

C'est en bureautique et côté sécurisation de l'ensemble que l'aspect serveur est plus important et dépassera l'aspect stockage. C'est la raison de mon changement de matériel et de stratégie.
J'ai besoin d'autonomie globale et de pouvoir accéder à mes supports pros quand je suis au taff ou en déplacement.

Côté hardware, je suis confiant. Côté OS et applis serveur, c'est l'inconnu pour moi avec ce barrage de langue qui est un frein.

Je vais voir pour des tutoriels OMV et Ubuntu vu vos recommandations, mais en effet, le côté énergétique de l'arrêt des disques est assez séduisant chez Unraid.
L'ajout et retrait de disques sans tenir compte des capacités, le fait de juste réinstaller Unraid pour récupérer la grappe en cas de défaillance de l'OS, de pouvoir lire chaque disque sur une machine en dehors de la grappe, sont également des atouts que le RAID logique n'offre pas.
Pour le RAID matériel, la Zunate ne prend pas le 6. Juste le 5.

Bref j'ignore si Unraid est une plaie à l'usage mais sur le papier, c'est flexible. Maintenant... si je peux économiser 120 balles... ça se réétudie

 

[Machin-Truc]

Precise nous le model de ton cpu

E3 1230 v5

Si tous les DD sont de même taille autant faire un pool, mais tous les disques tourneront.

Oui pour la grappe, mais elle doit être facilement évolutive, et en RAID, chaque ajout menace l'intégrité des disques existants, comme pour une reconstruction, liée au fort taux de charge. Ce n'est le cas que pour les disques de parité pour Unraid, pas pour la grappe complète (Si j'ai bien compris leur fonctionnement car les infos en FR ne sont pas toujours aussi techniques).

Côté sauvegarde, des disques de capacités différentes seront insérés, mais ça ne doit pas poser de problème dans aucune des configurations OS.

 

[morgyann]

menace l'intégrité des disques existants

Ce qui est proposé et spécifique à Unraid c'est : que tu composes "un RAID à la manière d'un JBOD" avec pour différence c'est que chaque disque reste lisible séparément.
Mais à quel prix : il te faut rajouter Disques de stockage + Disques de parité (en cas de défaillance) + Disques de cache (pour booster le tout) - si cela n'est pas une usine à gaz et à quel prix (au sens propre et figuré)
Mais comme je dis toujours : Pourquoi faire simple quand on peut faire compliqué
Concernant, la performance, elle dépend de ton matériel - ils préconisent sur leur site d'avoir un matériel performant si tu veux des perfs (qui ne semblent pas toujours au rdv (d'après les témoignages des utilisateurs comme @falcom).
Concernant les apps, rien de neuf : que des apps tierces qques unes en barre métal et le catalogue Docker.
L'histoire du déploiement en un clic (comme sur Casa/Zima) est en partie un leurre -> ça fonctionnera pour des apps très basiques mais pour la plupart (Jellyfin, Nextcloud, gestion courriels, mdp ...) il te faudra les configurer donc mettre les mains dans le cambouis et pour certaines (type Nextcloud) sous le capot

Aussi, je trouve que la "particularité" (pour ne pas dire la complexité) d'Unraid a généré un micro-système inhérent à leur fonctionnement - nous n'avons jamais de question ici sur Unraid (il ont leur forum alors que la config des apps est pourtant commune). Cela reste un système qui m'intérroge - un tarif un peu cher (100€/an/machine) pour rejoindre leur communauté pour avoir des mises à jour et configurer des apps docker Si ils avaient inventé l'eau chaude OK mais là ce n'est pas vraiment le cas -

Enfin bref, ce n'est que mon opinion - et c'est ton projet ...

 

[falcom]

surtout que l'array d'unraid, tu peux avoir la meme chose sous OMV, mergerfs pour rassembler les disques et snapraid pour la parite. encas de soucis chaque disque sera lisible hors machine.
Juste que snapraid il est a declencher a intervalle regulier, la ou unraid fait la parite en live.

 

[Machin-Truc]

Enfin bref, ce n'est que mon opinion - et c'est ton projet

Et c'est intéressant. Bon, à 250 $ avec une parité Euro-dollar favorable pour les MAJ à vie, soit dans les 210 € .

Le coût en hardware est pour ma part équivalent à n'importe quel serveur domestique ou TPE qui est monté en RAID 5/6. Seule différence, les 25 euros de cache SSD NVME Gen3 que j'ai ajouté (Non obligatoire).
J'ai potassé cette partie depuis 6 mois avec les conseils d'un proche très occupé par des serveurs trop gros pour moi. Je voulais une configuration suffisante en imaginant TrueNas que j'ai depuis abandonné comme solution.

Je suis d'accord pour dire que le seul intérêt face aux autres OS dédiés, c'est cet hybride de stockage façon RAID 5/6 sans en être un... mais qui déchire dans son concept.

Bref je vais fouiller les noms de tutoriels que tu m'as donné et peut-être basculer sur OMV... et là j'aurai vraiment besoin d'aide pour comprendre cette bestiole, peu accueillante quand on pipe rien aux films en VO sans les sous-titres

D'ici là merci pour cet avis éclairé.