Serveur NAS homemade rackable

[manslipkorn]

Bonjour tout le monde.

Voilà, celà fait longtemps que j'ai dans l'idée de me monter un NAS digne de ce nom, et après avoir écumer les sujets sur le net du même type, je pense être dorénavant à peu près fixé sur le hardware à prendre et pense avoir enfin économisé le budget nécessaire à sa réalisation.


Pré-requis
J'aimerais que ce NAS soit rackable, en effet, j'ai récupéré recemment une armoire de brassage fermant à clé, du coup, autant en profiter.
Ce NAS servira à stocker tous mes fichiers (normal), et devra être en mesure d'envoyer des flux audio/vidéo dans toute la maison (entièrement cablée en CAT6). Du contenu HD pour le moment, mais pourquoi pas du contenu 4K à l'avenir, et ce, jusqu'à 3 postes différents. Il se pourrait également qu'il soit amené à stocker les images de quelques VM (je n'ai pas prévu faire tourner d'autres services dessus, il ne fera QUE du NAS), mais j'aimerais bien que mes serveurs (mails, owncloud etc...) stockent leurs données sur ce NAS histoire de centraliser toutes les données importantes à sauvegarder.
Pour des questions d'évolutivité, et de compatibilité, j'aimerais faire un RAID logiciel, un RAID hardware couterait plus cher et m'obligerais à garder un certain type de matériel.
Concernant l'OS, ce sera obligatoirement du logiciel libre (pas de Windows), mais j'hésites encore entre FreeNas & OpenMediaVault.


Voici les composants sur lesquels je suis partie:
- Boitier/Alim = Ri-vier 2U 8 bay avec option alimentation 500W et option rails (163.35€ + 120€ + 26€ = 309.35€)
- CM & Proc = ASRock C2550d4i (8xSATA 6Gb/s & 4xSATA 3Gb/s + 2 Gigabit) (285.95€)
- RAM = 2x crucial 8go DDR3 1600Mhz CL11 ECC (16 go) (212.5€)
- Disque Système = SanDisk Ultra Fit USB3.0 64 Go (49.95€)

Ce qui nous mène à 857.75€ sans les DD et sans frais de port.

Ensuite, pour les DD, je partirais bien sur 4 dans un premier temps (j'aviserais une fois cette capacité de stockage écoulée)

- 3 HDD Red 3to (384€)
- 3 HDD seagate 3to (360€)

Ce qui nous fait 744€ de DD
Soit un total tout compris de 1601.75€ toujours sans frais de port.

Alors, maintenant, place aux questions.
Hardware
- Pensez vous que cette configuration soit logique? J'entends par là, bonne dimension de l'ensemble?
- 500W pour l'alim, c'est pas un peu overkill? 400W aurait-il pû suffir? Même si à terme j'y mets 8DD?
- Le boitier précise comme type de CM compatibles EEB/CEB/ATX/m-ATX/ITX. Celle que je veux prendre est mini-ITX, est-ce que je risque du coup de galérer à la fixer dans le boitier?
- La clé pour le système me parait chère, est-il possible d'économiser un peu là-dessus (pas besoin d'une clé ayant des perfs de malade je pense)?
- L'agrégation de lien (pour les 2 ports Gigabit) apporte-t-il une réelle différence notable?
- Enfin, ma plus grande crainte concerne le branchement de tous ces DD au boitier. Je vois dans la doc du boitier "mini SAS backplane x2". Donc, si je comprends bien, je ne peux pas brancher mes DD directement au boitier via des cables SATA, il me faut acheter du coup des cables comme ceux-ci? Et niveau alimentation, comment dois-je brancher les DD?
- Du coup, est-ce qu'avec tout cet équipement (y compris le cable SAS > 4xSATA), mon NAS pourra être monté et fonctionnel ou il manque encore quelque chose?


Software
- Niveau OS, avez vous des avis sur FreeNas & OpenMediaVault? Genre pourquoi l'un, pourquoi pas l'autre? De prime abord, je serais peut-être plus tenté par OMV sachant que c'est basé sur Debian que je connais bien mieux que BSD (seulement s'il y a un soucis et que je dois mettre les mains dans le cambouis, car leurs interfaces web respectives me paraissent claires). Si vous en connaissez d'autre qui sont incontournables, et ayant  une communauté assez active?
- Quel type de RAID me conseillez vous? Je partirais bien sur du RAID 5, mais est-il possible d'avoir plusieurs disques de parité permettant du coup autant de panne disque?
- Si je rajoute plus tard 2 nouveaux DD, est-ce que ce sera simple d'aggrandir le volume RAID? ou je devrais le supprimer (donc tout sauvegarder) pour en faire un nouveau comprenant les nouveaux DD (et tout recopier par la suite)?. Je pourrais peut-être du coup acheter seulement 4 DD et dans quelque temps, quand les prix auront chutés en acheter d'autres.


Voilà, je pense que c'est tout pour le moment. C'est déjà pas mal me direz vous.

Dans tous les cas, ce projet sera j'espère finalisé pour la fin d'année (oui, comme vous le voyez, je ne suis pas dans l'urgence), mais je préfère prendre mon temps et ne pas regretter mon achat dans quelque temps.
Toujours est-il que je mettrais à jour ce post au fur et à mesure de mes avancées. Je prendrais des tas de photos, vous montrerais le montage, vous partagerais les difficultés rencontrées et vous ferais au final un diagnostic sur les perfs, la consommation etc...

A suivre donc.

[gaetan.cambier]

400W aurait-il pû suffir? Même si à terme j'y mets 8DD?

avec 400 watt, tu peux en mettre des disque voici un nas avec 8 disque et une alim 250 watt pour exemple https://www.synology.com/fr-fr/products/DS1815+#spec

 

L'agrégation de lien (pour les 2 ports Gigabit) apporte-t-il une réelle différence notable?

ca depend de l'utilisation, mais tu as 2 port reseau sur ta CM, autant les utiliser, pas en 802.11ad, qui est couteux (faut un bon switch) mais en mode Adaptive load balancing (balance-alb) https://en.wikipedia.org/wiki/Link_aggregationca te coute un cable rj45, ca devrai rentrer dans le budjet

 

Quel type de RAID me conseillez vous? Je partirais bien sur du RAID 5, mais est-il possible d'avoir plusieurs disques de parité permettant du coup autant de panne disque?

raid 5 = parité de 1 disque réparti, autrement, faut du raid 6

maintenant, si tu commence avec 3 disque tu as pas trop le choix, c'est du raid 5, mais rien ne t'enpeche par la suite :

soit d'etendre ton raid 5

soit de le convertir en raid6

sans aucune perte de donnée et meme sans interruption de service, (au pire un ralentissement ) 

 

Niveau OS, avez vous des avis sur FreeNas & OpenMediaVault?

les 2 sont très bien, un bon conseil : test les 2 pour te faire une iddée 

[Aloyse57]

Je n'ai pas testé OpenMediaVault, mais FreeNAS.

Dernièrement mon FreeNAS a été corrompu (pb avec l'OS), j'ai reformaté le disque système, réinstallé, réimporté la config que j'avais sauvée auparavant à part, et hop, toutes mes données étaient là.

[gaetan.cambier]

Disque Système = SanDisk Ultra Fit USB3.0 64 Go (49.95€)

64 go pour en utiliser que 2 ? 

[fiatt]

Bonjour manslipkorn,

 

J'ai monté un Freenas il y a maintenant presque 1 an et j'en suis très content. Il n'est pas rackable comme le tien, j'ai choisi le bon vieux grand tour!

 

Voici le lien sur leur forum où j'ai discuté du matos (en anglais): https://forums.freenas.org/index.php?threads/ram-and-chassis-advices.24522/de très bons conseils, y comprit sur les marques de RAM incompatibles selon la carte mère. Je suis parti de ce thread très complet sur les recommandations niveau matériel: https://forums.freenas.org/index.php?threads/hardware-recommendations-read-this-first.23069/

 

 

J'ai choisi Freenas pour deux raisons: opensource et de très bonne réputation quant à la sécurisation des données. Je ne suis pas du tout expert, mais de ce que j'ai compris le système ZFS est + que performant. Les snapshots sont très pratiques pour avoir des archives régulières de ses données. Plus besoin de RAID, c'est Freenas qui gère les backup.

Le principe des jails est vraiment génial.

 

Tu as peut-être déjà lu mais il y a ce post: https://forums.freenas.org/index.php?threads/slideshow-explaining-vdev-zpool-zil-and-l2arc-for-noobs.7775/où tu trouveras un petit guide/faq très intéressant sur Freenas et ses capacités.

 

Il est très facile d'utilisation, l'interface est intuitive, le manuel est très bien documenté. C'est l'avantage d'un système maintenu par une entreprise, qui fait son beurre en vendant son propre matériel !

 

Tout ça pour dire qu'il vaut le coup de s'y intéresser. J'en suis très content. J'y ai mis owncloud, miniDLNA et openVPN, la gestion des droits est pointue et efficace. J'y accède depuis mon PC ou mon Iphone, même à l'étranger. Il a pleins de possibilités que je n'utilise pas, d'autres plugins (transmission, couchpotatoe, Plex, Sickbeard, CrashPlan etc etc), mais ce que je lui fais faire, il le fait très bien!

 

Je n'ai que quelques connaissances basiques sur Linux et aucunes sur BSD, mais je m'en suis sorti facilement. Merci à la communauté, très active et volontaire.

 

Concernant OpenMediaVault, je vais le tester dans les prochaines semaines sur un RPi 2, mais je ne le connais pas encore.

[gaetan.cambier]

Je n'ai pas testé OpenMediaVault, mais FreeNAS.

Dernièrement mon FreeNAS a été corrompu (pb avec l'OS), j'ai reformaté le disque système, réinstallé, réimporté la config que j'avais sauvée auparavant à part, et hop, toutes mes données étaient là.

 

en fait c'est le gros problème de ses nas, le système est mis sur une clé usb, et c'est le SPOF

perso j'ai un nas synology et l'os est sur chaque debut de hdd en raid1 (sur 5 disk comme j'en ait 5) --> l'os est vraiment increvable

[fiatt]

Je n'ai pas testé OpenMediaVault, mais FreeNAS.

Dernièrement mon FreeNAS a été corrompu (pb avec l'OS), j'ai reformaté le disque système, réinstallé, réimporté la config que j'avais sauvée auparavant à part, et hop, toutes mes données étaient là.

Je confirme, j'ai mis le système sur une clé USB, que j'ai dû réinstaller au début, pendant mes premiers essais. Très simple et aucune perte de donnée sur les disques.

 

Par contre je n'ai pas fait d'aggrégation, pas sûr de sa réelle utilité pour une utilisation en local (à la maison je veux dire, sans accès WAN régulière).

[mantisis]

Salut,

 

L'alim est bien plus que suffisante comme l'a mentionné gaetan.cambier, tu peux descendre à 300W si tu veux garder un palier de sûreté quand elle vieillira.

 

Concernant le RAID 5 non tu as le droit à un disque qui plante mais c'est un bon compromis niveau performance / espace de stockage.

Avec un RAID 10 tu peux avoir plusieurs disques qui tombent et des meilleurs perfs mais il faut 4 disques. Avec 4 disques de 3To tu aurais 5To de dispo.

Le RAID 6 c'est le mal oublie

 

Pour l'agrégat de port je suis pas convaincu de l'utilité sur un réseaux perso ni des possibilité offerte au niveau de l'OS. Le NIC Teaming c'est utile pour du fail over, du load balancing ou de l'agrégat de BP. Dans ton cas ça pourrais servir pour du load balancing à voir si ton OS permet le NIC Teaming.

 

Pourquoi tu prendre la tête à brancher tes disques au backplane alors que tu as 8 emplacements en hot swap en façade dont 5 inutilisés ? De toute façon tu peux brancher un disque SATA sur un controlleur SAS, l'inverse est faux en revanche.

[Carpe_Diem]

Salut,

j'ai un peu regardé la conf proposée et

- je passerais sur un CPU C7 car il y a plusieurs utilisateurs concomitents (le C2750 par exemple)

- le raid 5 n'est pas supporté par les chipsets annexes sans compter les Sata II et III qui devront être dans 2 grappes différentes

- l'alim doit faire moins de 2U soit environ 9cm de haut

- les ports USB sont en V2. Si tu as le temps, pas de problème, mais si tu coupes le NAS pour le ré-allumer, ça risque de pas plaire

- je ne pense pas que le mini-ITX passe sur ce rack mais je n'ai pas cherché la fiche descriptive complète

- des ventilos à 8000 tours... direction cave ou équivalent.

 

C'est une conf mi-pro avec ses avantages et ses inconvénients.

[gaetan.cambier]

Le RAID 6 c'est le mal oublie

le raid6, c'est super fiable, bien + que le raid5, bien + que le raid10

seule le raid6 permet de se prémunir d'une double panne

et pour les probabilité de panne des raid, il y a un site très interessant : http://www.servethehome.com/raid-calculator/raid-reliability-calculator-simple-mttdl-model/ 

[mantisis]

le raid6, c'est super fiable, bien + que le raid5, bien + que le raid10

seule le raid6 permet de se prémunir d'une double panne

et pour les probabilité de panne des raid, il y a un site très interessant : http://www.servethehome.com/raid-calculator/raid-reliability-calculator-simple-mttdl-model/ 

 

J'ai pas dit que c'était pas fiable mais c'est la meilleur solution pour flinguer les iops, déjà que du 7.2k c'est pas ça.

[Kernelcoffee]

Salut,

 

Bienvenue au club des NAS rackable à monter sois-même.

Alors j'avais commencé un sujet que j'avoue n'ai pas maintenus: https://forum.nextinpact.com/topic/168699-le-topic-du-nas-ikeahomemade-a-monter-soi-meme/#entry2801640

qui était la suite de mon premier post un peu perso: https://forum.nextinpact.com/topic/166571-la-creation-de-mon-nas-24-baies-pour-pas-si-cher-que-ca/ qui avait donne cette news sur NXI (enfin PCI à l’époque): http://www.nextinpact.com/news/82125-forum-pci-un-nas-maison-sous-freenas-avec-24-baies-et-xeon-e3-1220l.htm

 

Alors déjà sur la conception NAS + RACK -> fait gaffe à la profondeur de l'ensemble, une baie de "brassage", il me semble que c'est surtout fait pour les switchs et autre qui n'ont pas beaucoup de profondeur.

Ca serai dommage que tu te fasse toute ta config pour te rendre compte que ça ne rentre pas dans la boite.

C'est une des raisons pour laquelle que je galère un peu pour trouver une baie pas trop cher qui à la bonne profondeur.

 

Ensuite oui 400w c'est largement suffisant, le seul moment ou tu pourrais rencontrer des problèmes c'est au niveau de l’ampérage sur le rail en 5v (genre mon nas a une capacité de 24dd et 400w c'est très limite sur le long terme)

 

Le RAIDx c'est surtout fait pour être hardware si tu veux quelque chose de sérieux.

FreeNAS n'est pas fait pour du RAID Hardware mais pour ZFS qui est un système de fichier RAID software (et qui marche très bien), donc vérifier ce que tu veux.

 

Si tu décide d'utiliser FreeNAS, le système est prévu (mais pas que), pour tourner sur une clef USB (ce que je fais, avec une 8Go pas cher), une fois ma clef a cramé mais heureusement j'avais sauvegardé (les backups c'est la vie) le fichier de configuration FreeNAS et j'ai pu restaurer sans soucis. (et au pire FreeNAS peut détecter les volumes zRaid et les restaurer), depuis aucun soucis.

La clef en elle même n'est presque jamais utilisée autre que pour être lu afin de charger le système complet en mémoire au démarrage, sauvegarder le fichier de config et les updates, donc a sert pas a grand chose de prendre une ultra flex 3 avec 4Go/s de transfert en usb4, une clef a la con qui traine sur ton bureau fera parfaitement l'affaire IMHO.

 

ZFS demande beaucoup (beaucoup) de RAM (1Go par To est recommande) pour avoir le maximum de performance, donc faire attention entre ce que tu souhaite sur ta capacite max dd vs la capacité RAM de ta CM.

SI jamais tu as des services/ordi/truc qui font beaucoup de petit acces au NAS, il est possible de rajouter des SSD qui serviront de cache de lecture (L2ARC) et d’écriture (ZIL).

 

Également le boitier que tu as choisi est un 2U avec seulement 8 caddies, il existe des solutions avec 12 caddies dans le même espace.

Au niveau perf, l'optimisation de ZFS se fait avec certaine formule d’agrégation de disque -> zRaid1(équivalent a RAID5) -> 3 disque (2 + 1 redondance), zRaid2 (equivalent RAID6) -> 6 disque (4 + 2)

Tu as un boitier 8 disques ce qui ne te permet pas d'avoir le max en optimisation pour ZFS, je conseillerais un 3U avec 12 caddie pour 3x3dd en zRAID1, sachant que tu peux attacher les zRaid sur une même zPool pour voir qu'un seul volumes physique et les rajouter au fur et a mesure -> j'ai commence avec un seul zRaid1 (3 disques) puis j'ai rajouter un autre zRaid1 que j'ai attache a ma zPool (donc j'ai double mon volume a ce moment la), puis j'ai rajoute un zRaid2 (6 dd) en 2e zPool, tout transféré, détruit ma première zPool et convertie mes 2 zRaid1 en zRaid2 et rattache a ma nouvelle zPool pour finir avec 2 zRaid2 qui apparaisse comme un seul volumes. (je finis avec l’équivalent d'un RAID 60 de 2x6DD)

La partie la plus longue était le transfert, le reste s'est fait en quelques clics via l'interface de FreeNAS.

Donc dans cette situation, j'ai commence avec peu de disques et j'en ai rajoute au fur a mesure de mes besoins.

 

Ce type de boitier a des backplanes SAS pour brancher les disques mais la carte mère que tu as choisi ne semble pas disposer des ces connecteurs et tu n'a pas pris de carte contrôleur SAS donc quid ?

L'interet des cables SAS est de pouvoir utiliser qu'un seul cable pour 4 disques, donc beaucoup moins de foulli de cables.

Les backplane SAS (voir https://forum.nextinpact.com/gallery/image/1468-p1000773/ ) disposent d'un port SAS et d'un prise alim (2xMolex redondant dans mon cas), donc normalement tu branche un câble d'alim + un connecteur SAS par backplane et c'est bon.

 

Pour l’agrégation de lien, j'ai vaguement essaye a un moment mais j'ai du faire un truc pas bien parce que ça n'a pas marche et j'ai juste eu 2 NIC sur le réseau. (bon un 1 seul 1Gbps me suffit pour mes besoins pour l'instant)

Si quelqu'un sait si ça marche juste cote serveur ou s'il faut également un switch managé pour gerer ca ?

 

N'oublie pas le WAF (wife/woman acceptance factor) ou le PAF (parents acceptance factor), les boitiers rackable sont surtout fait pour tourner en datacenter, un endroit ou le concept de bruit n'a pas d'importance. Vérifie que les ventillo dans le boitier soit adapté a ton environnement sonore, tout en faisant gaffe a ce que les disques soit bien refroidis (une des raison pour la quel j'ai pris un 4U pour pouvoir mettres des gros Noctua 120mm)

Tu ne veux pas vivre avec des ventillo a 8k+ rpm, c'est pire qu'un sèche cheveux allumé en permanence.

 

Voilà en gros.

Je préféré prévenir, parce que je vois raid logiciel + freenas + Raid5/6, il y a un truc qui cloche et j'ai l'impression qu'il y a pas mal de points qui ne sont pas couvert. (prise en compte du bruit / 8 slots mais 6 disques / etc.), j'ai l'impression qu'il y a confusion sur certain points.

- Raid Software ou Hardware ?

- Si tu veux du raid software -> FreeNAS (et donc zfs)

- Si tu faire du raid hardware -> OpenMediaVault (et la je connais pas)

- Profondeur boitier vs armoire ?

 

Surtout que tu monte ton serveur toi même, n’hésite pas a acheter les pièces au fur et a mesure histoire d’étaler ton budget plutôt que de casser ton PEL en une fois (j'ai mis 6 gros mois pour récupérer toutes les pièces pour le miens et a peu près autant de temps de recherche sur le sujet), ce qui te permet d'obtenir des meilleurs composant au meilleur moment pour ton budget. (genre je trouve qu'avoir un bon boitier est très important vu que tu peux le garder des années)

 

[EDIT]

Je reviens sur la question des perfs:

- il n'y a quasiment pas de differences entre le Raid Hardware et ZFS

- je disais plus haut qu'il y avait une sorte de formule pour avoir le max de perf du type :

2n + 1
RAIDZ1 vdevs should have 3, 5, or 9 devices in each vdev
RAIDZ2 vdevs should have 4, 6, or 10 devices in each vdev
RAIDZ3 vdevs should have 5, 7, or 11 devices in each vdev

 

Mais ce constat date de 2012 et concerne si le Raidz n'utilise pas de compression (sachant qu'il est conseille d'utliser la compression et cela n'a pas d'impact sur les perfs).

Donc du coup oublie, tu peux te faire un truc du style 2x Raidz1 (3 + 1 redondance) sans soucis pour les perfs.

[mantisis]

Question bruit Kernelcoffee a raison faut supporter des ventilos de rack, aprés une journée en salle serveur ta la tête en vrac. Même dans des armoires fermés y'a un bourdonnement horrible. Concernant la taille, je pense pas que ce soit une armoire 48U ( qui elle sont dispo en 600/800/1000 donc tu peux tout rentrer dedans ), si c'est juste un top case de brassage tu pourras rentrer qu'un switch en profondeur (~40cm de profondeur).

 

Pour les ports SAS c'est vrai que si ta pas une carte contrôleur ça sert pas à grand chose.

[Sedanxio]

Salut,

 

Pour les ventilos, n'hésite pas à prendre des Noctua 80mm, j'ai équipé mon NAS 2U avec et c'est pratiquement inaudible.

L'agrégation de liens pour tes NIC c'est surtout bien si il y a de gros transferts ou si tu travailles sur les fichiers (photo ou video, ce qui est mon cas par exemple et ça apporte un petit confort supplémentaire) directement sur le serveur. N'oublie pas qu'il te faudra un switch L2/L3 pour en tirer parti.

Pour le reste le hardware m'a l'air equilibré et niveau alim 400w, ça devrait le faire

Niveau OS, je suis sous windows 7 donc je n'ai pas de réponse a apporter

Pour le reste, je pense que Kernelcoffee a bien tout résumé

[mantisis]

.

L'agrégation de liens pour tes NIC c'est surtout bien si il y a de gros transferts ou si tu travailles sur les fichiers (photo ou video, ce qui est mon cas par exemple et ça apporte un petit confort supplémentaire) directement sur le serveur. N'oublie pas qu'il te faudra un switch L2/L3 pour en tirer parti.

 

C'est pas totalement juste, tu n'as pas besoin d'un switch L3 pour gérer le NIC Teaming.

En réalité soit l'OS propose de gérer le NIC Teaming nativement de son côté, soit tu peux déléguer ça au switch avec du LACP par exemple.

[Sedanxio]

C'est pas totalement juste, tu n'as pas besoin d'un switch L3 pour gérer le NIC Teaming.

En réalité soit l'OS propose de gérer le NIC Teaming nativement de son côté, soit tu peux déléguer ça au switch avec du LACP par exemple.

J'ai déjà essayé et je n'ai jamais réussi à le faire fonctionner sans LACP, je me renseignerai  

[mantisis]

Sur les OS de bureau c'est normal que cela fonctionne pas, après sur Windows Server et sous ESXi je sais que ça fonctionne sans avoir besoin du switch qui gère.

Après c'est pas forcément la meilleur solution étant donné que ça peut engendrer du flapping MAC au niveau du switch derrière.

[Sedanxio]

Merci pour les précisions

[manslipkorn]

Bonjour à tous,

 

Tout d'abord, merci beaucoup pour toutes vos réponses, il y a en effet pas mal de points soulevés qui ont totalement leur place ici.

Aussi, désolé pour la réponse TRES tardive, mais avec les impôts (revenus, fonciers, habitation) qui viennent de tomber, je voulais assurer le coup (le coût surtout).

 

Alors, mon NAS actuel arrivant à saturation (NAS netgear 2 caddies de récupération), il est dorénavant grand temps de penser à l'avenir.

 

===========================

 

Je pense déjà dans un premier temps commander le boitier. En effet, je peux profiter des fêtes de fin d'année afin de m'en faire payer une partie.

 

Et, c'est peut-être le poste où je galère le plus.

Mes besoins : J'ai une armoire 24U de 600mm de profondeur (trouvée sur leboncoin à un prix défiant toute concurrence).

 

- 2U, 3U ou 4U, pas de préférence (enfin si, un 4U est mieux pour ajouter des cartes filles, mais souvent le prix s'en ressent). J'étais à la base partis sur un 2U, mais peu importe à vrai dire.

- Dans l'idéal, j'aimerais un boitier rackable prof MAXI 600mm. Un peu moins serait grandement apprécié sachant que j'ai décalé les rails de fixation frontaux un petit peu vers l'arrière (afin de ne pas plier les câbles connectés aux switches en fermant la porte). Si pas le choix, tampis je plierai mes câbles cat6.

- Avec 8 caddies idéalement (je ne les utiliserai pas tous dès le début, je pense partir sur 6DD, mais autant prévoir un peu de marge). 8 caddies dans le pire des cas.

- Si possible avec une alim décente à l'intérieur (sinon, tampis je l'achèterai à part).

- Vu où sera placé le NAS, le bruit n'est pas un souci immédiat (puis si besoin, j'achèterai des ventilos moins bruyant, c'est pas ça qui va faire exploser le budget n'est-ce pas?)

 

Le tout, pour un prix le plus raisonnable possible (bah oui, l'argent reste le nerf de la guerre).

 

Seulement voilà, à part Ri-vier qui fait des boitiers NORCO vraiment pas cher, je n'ai pas vraiment trouvé mon bonheur à un prix raisonnable qui soit livrable en France. Si vous avez des adresses de revendeurs, voir mieux, des liens vers des boitiers qui correspondent à mon besoin, vous aurez ma gratitude éternelle .

 

Il y a juste en revanche un point que je n'ai pas saisi dans vos messages. Vous dites que c'est dommage d'avoir un boitier avec connexions SAS et de brancher ça en SATA sur la CM. Mais, d'après ce que j'ai vu, il n'y a que des boitiers rackable avec connexion SAS. Donc, à moins d'avoir un contrôleur SAS, une CM avec connexion SAS ou des câbles 4xSATA->SAS. Il n'y a pas le choix. Ou à moins que ces boitiers comportent connexion SAS + connexion SATA (mais je n'ai pas l'impression). Du coup, entre avoir une carte contrôleur SAS qui peut être galère à rentrer dans un boitier 2U ou une carte mère avec pléthore de ports SATA, mon cœur balance. De plus, une carte controlleur, c'est toujours ça de plus à payer. Est-ce gênant d'avoir des câbles SATA->SAS ?

 

===========================

 

Enfin, début 2016 j'achèterai la CM/proc/RAM.

 

Mes besoins: (histoire d'avoir une idée, mais le débat sera réellement relancé quand le budget sera là, donc pas avant 2016)

 

- CM compatible avec le boitier (c'est mieux)

- CM compatible RAM ECC (Freenas a l'air de préférer ce type de RAM)

- Proc assez véloce pour que le tout ne rame pas

- Consommation électrique LA PLUS FAIBLE possible (c'est LE POINT crucial, pas envie de payer 1000€ d'élec par an pour un NAS)

- Si possible à refroidissement passif, mais bon ce n'est pas un critère bloquant

- Tout ça bien évidemment pour le meilleur rapport qualité/prix possible (l'argent reste le nerf de la guerre).

 

Je n'ai de prime abord pas trouvé de solution viable à base de processeurs ARM. C'est dommage, mais bon je pense que ça finira par venir.

 

===========================

 

Merci d'avance pour votre aide,

J'essaierai de répondre de façon plus réactive la prochaine fois .

[Sedanxio]

Salut,

 

Pas de problème pour la réponse tardive, on a tous nos occupations annexes qui parfois prennent du temps

 

Pour le boîtier, tu peux regarder du côté de chez inter-tech, ils sont vraiment pas mal (le mien en est un ) et ils ne sont en règle générale pas inaccessibles niveau prix

http://www.inter-tech.de/index.php?option=com_content&view=article&id=607&Itemid=520〈=de

 

Ils sont commandables sur amazon

 

Pour les câbles, je ne sais pas si un 4xSATA vers SAS marcherait mais il ne devrait pas y avoir de soucis normalement. A confirmer

 

Comme alim, je te conseillerais de partir sur une alim achetée à part (du genre seasonic )

 

Pour le proc et carte mère, le top serait un xeon D, leur consommation est vraiment très modeste (mais le prix sera probablement le facteur limitant ) mais d'ici là, les carte mères avec chipset c236 seront sorties donc on pourra regarder de ce côté

[Kernelcoffee]

Mes besoins : J'ai une armoire 24U de 600mm de profondeur (trouvée sur leboncoin à un prix défiant toute concurrence).

 

Fait gaffe a la profondeur du boitier, 600mm c'est pas enorme si on compte les cables qui sortent derrieres.

 

- Avec 8 caddies idéalement (je ne les utiliserai pas tous dès le début, je pense partir sur 6DD, mais autant prévoir un peu de marge). 8 caddies dans le pire des cas.

 

gaffe si tu prend FreeNas tu ne peux pas etendre un zRaid existant mais ajouter un nouveau zRaid et l'ajouter au zPool (un zPool contient un ou plusieur zRaid et un zPool peut etre considere comme un volume monte sur le systeme)

Sur cette notion je conseille plutot 1 zPool avec un zRaid1 4DD puis tu rejoute un 2e zRaid1 de 4DD

 

- Si possible avec une alim décente à l'intérieur (sinon, tampis je l'achèterai à part).

 

les boitier 3U et 4U permettent de mettre des alim "classique" que tu peux acheter dans le marche

Pour le 2U je demande s'il faut pas des alim de type EPS (plus fine)

 

Est-ce gênant d'avoir des câbles SATA->SAS ?

 

Dans l'absolue non, ca change rien, un cable SAS est juste plusieur lien SATA aggrege en un seul cable.

Un controller SAS de type JBOD va juste agir comme une carte qui te rajoute des port sata, il n'y a aucun mecanique intelligente la dedans donc ideal pour du ZFS.

Si tu veux faire du Raid Hardware (Raid5/6) alors il te faut un controller Raid SAS qui va deporter le boulot de la gestion du Raid sur la carte plutot que sur la CM.

Le seul vrai avantage d'une carte SAS c'est que tu gere seulement 2 cables (1 par backplate x2) plutot que 8, donc moins de bordel dans le boitier.

 

 

- CM compatible avec le boitier (c'est mieux)

Mini-ITX c'est la vie.

 

- CM compatible RAM ECC (Freenas a l'air de préférer ce type de RAM)

En general c'est surtout dispo sur les CM serveur et ca peut couter un peu cher -> j'ai une supermicro pour ma part qui gere les XEON + la ram ECC

 

- Proc assez véloce pour que le tout ne rame pas

Mon NAS a un Xeon 1220Lv2 (ou v3 je sais plus) qui est un dual-core 2.2Ghz (HT) avec 22W (ou 17W je sais plus) de consommation et je n'ai aucun soucis pour faire tourner FreeNAS + 12DD pour 28To

Juste que le scrubing (procedure de maintenance de ZFS) prend 48h mais c'est parce que j'ai 28To (en 2x zRaid2 de 6DD) a scruber, mais c'est surtout limite par la vitesse des DD j'ai l'impression (WD Red)

Pour l'instant je m'en fiche mais faudra que je me penche sur la question un jour.

 

- Consommation électrique LA PLUS FAIBLE possible (c'est LE POINT crucial, pas envie de payer 1000€ d'élec par an pour un NAS)

Le CPU et les DD, c'est ce qui bouffe le plus, ceci dit la derniere fois que j'ai mesure a la prise mon NAS prenait 50W en utilisation courrante.

 

- Si possible à refroidissement passif, mais bon ce n'est pas un critère bloquant

Mauvaise idee, par definition il ne faut pas que ton NAS soit passif, il faut de l'air pour refroidir les disques donc autant mettre les elements a contributions.

Normalement avec un boitier 2U tu va avoir des ventillos de 80mm (genre 6 sur une range dans le boitier), qui devrait s'occuper de 90% du refroidissement, pour le CPU tu peux prendre un truc du style Noctua NH-L9X65 si ca passe.

J'ai tendance a m'equiper chez Noctua pour les ventillo vu qu'il ont en general un truc bon rapport bruit/puissance mais sont un peu cher.

[manslipkorn]

Bonjour à vous :).

Alors, voici quelques nouvelles du front, mais avant tout, merci pour vos conseils, en effet ces derniers sont précieux étant donné que vous êtes dans une situation similaire.
J'ai prévu du coup suivre les conseils de Kernelcofee entre autre et prendre un boitier 3U ou 4U ne serait-ce que pour pouvoir mettre une alim dite "standard".

Alors, concernant le boitier. Ceux d'inter-tech sont vraiment bien mais 2 points me semblent limites dans mon cas:
- le prix. Ceux ayant attiré mon attention chez Inter-Tech coûtent tout de même 360€ (3U avec hotswap)
- la taille. En effet, j'ai écrit n'importe quoi dans mon précédent post. Mon armoire fait 800mm extérieur, soit environ 700mm utile à l'intérieur. Sachant que je veux garder de la marge pour mes cables branchés sur le switch (je mettrais une photo pour que vous vous rendiez mieux compte), je partirais plutôt sur un boitier 650mm voir 600. Tous les boitiers Inter-Tech font 685mm. Théoriquement ça passe, mais mes cables seront alors pliés pour être connectés au switch. j'aimerais éviter ce problème.

C'est alors que j'ai eu une idée de génie (enfin, ça c'est vous qui me direz)

Quitte à monter mon NAS, pourquoi pas commencer par monter mon boitier?

En effet, en cherchant sur le net, j'ai vu que je pouvais avoir des boitiers 4U vraiment pas cher (supportant une alim standard) avec 650mm de prof. Ce à quoi je pourrais rajouter des backplanes (les DD vous conseilleriez à l'horizontale ou à la verticale?).

Bon, dans le cas présent avec ces éléments, 1 boitier + 1 backplane (pour commencer) me reviendrait tout de même à 246€ TTC (hors FdP). L'avantage, je peux commencer avec 5DD et éventuellement acheter un 2nd backplane plus tard si le besoin s'en fait sentir.

Que pensez vous de l'idée de monter soit-même son boitier?

Je ne suis pas un spécialiste, mais j'ai l'impression que cette solution réunie les conditions qui me sont imposées à savoir:
- rackable
- prix correct
- évolutif
- dimension 650mm GRAND MAX.
- caddies hotswap 5 ou 10 (ou 4 ou 8 )
- Alim "standard"
- CM format eATX, ATX, MicroATX, Mini-ITX


Question plus ciblée pour Kernelcofee (mais vos avis m'interessent aussi). Un zRAID de 5DD, ce n'est pas déconnant? 4 utiles 1 de parité?

============

Voilà, je me cantonne aujourd'hui au boitier, je ne vais pas vous saouler tout de suite avec le couple CM / Proc. Je garde ça pour 2016.

Encore merci pour vos conseils et réponses.
Et encore désolé pour ma réponse tardive, mais entre le boulot, le petit et les kms de pages web parcourues sur ce sujet, les journées passent vite.

[Sedanxio]

  je ne vais pas vous saouler tout de suite avec le couple CM / Proc.

Pas de risque de ce côté là

 

Attention pour les backplanes, ça peut coûter cher aussi (je n'arrive pas à avoir accès au site que tu as mis en lien donc je n'ai pas vu le prix). Ca a par contre l'avantage d'avoir la possibilité de brancher du SATA directement.

 

Pour les disques durs je dirais que l'idéal serait à l'horizontale mais si je ne m'abuse cela n'a, à l'heure d'aujourd'hui, plus aucune importance

 

Pour le RAIDz, je suis mal placé pour te répondre

 

(Pour carte-mère / CPU, voici quelques petits modèles susceptibles de t'intéresser

http://www.asrockrack.com/general/productdetail.asp?Model=D1540D4U-2T8R#Specifications

http://www.asrockrack.com/general/productdetail.asp?Model=E3C236D4U#Specifications

http://www.asrockrack.com/general/productdetail.asp?Model=D1520D4I#Specifications

http://www.asrockrack.com/general/productdetail.asp?Model=D1540D4U-2L%2b#Specifications

Je n'ai pas d'idée niveau prix par contre )

 

EDIT: fautes de frappe

[Kernelcoffee]

- le prix. Ceux ayant attiré mon attention chez Inter-Tech coûtent tout de même 360€ (3U avec hotswap)

 

Oui, j'ai eu la meme reaction, j'en ai eu pour 400-500$ avec les frais de port pour mon NorcoTek mais bon ca va me durer TRES longtemps donc aucun regret. (et de toute facon c'est trop tard)

 

Mon armoire fait 800mm extérieur, soit environ 700mm utile à l'intérieur

 

Effectivement c'est mieux

Le vrai gros probleme que je crains a chaque fois c'est le cable d'alim qui peut bloquer.

En general le reste des cables (Ethernet) n'est pas vraiment un soucis dans l'absolue

 

Que pensez vous de l'idée de monter soit-même son boitier?

Bah c'est pas bete, et tu rempli sur tes besoin mais tu perds quand même pas mal d'emplacement disques -> tu peux avoir des 16dd en 3U ou 24dd en 4U (ce que j'ai)

Donc Je sais pas.

 

Question plus ciblée pour Kernelcofee (mais vos avis m'interessent aussi). Un zRAID de 5DD, ce n'est pas déconnant? 4 utiles 1 de parité?

Alors c'est complétement arbitraire puisqu'au final tu fais ce que tu veux au niveau de tes zRaids (24dd en Raid0 ou 23 + 1 de parite)

Mais bon d'apres ce que j'ai vu sur les forums y un moment j'ai cru comprendre que la regle d'or c'est:

zRaid1 -> 2+1

zRaid2 -> 4+2

zRaid3 -> 6+3

qui était base sur des histoires de perf a l’époque (et qui ne sont plus valide) mais bon les gens ont garde ces valeurs en tete.

Donc 4+1 ca marche puisque c'est en dessous de ce qui devrait se faire pour zRaid2 (4+2)

Autre chose est qu'il ne faut surtout pas prendre des disques "grand publique" pour faire du RAID -> les instructions dans le firmaware ne sont pas adapte et peuvent soit se vautrer plus rapidement ou bien se tirer une balle au moment d'une reconstruction, du coup plus un RAID est gros, plus il va mettre du temps a se récupérer en cas de perte d'un disque et si un autre meurt au moment de la reconstruction alors tu perd le raid complet.

C'est pour ca qu'en général les gens qui commence a avoir des grosses grappe aiment bien avec au moins 2 disques de partie par RAID et qu'ils prennent des disques qui font fait pour du RAID.

 

Actuellement j'ai 2 zRaid2 de 6 disques (donc 2 dd de parite par zRaid soit 33% de redondance), mais je pense que la fiabilité du matos joue beaucoup.

Je n'ai pris que des WD Red auquel j'ai fait traverse les US (Boston -> SF) a l’arrière de ma bagnole + 2 déménagements depuis que je suis a SF et par je ne sais quel miracle aucun ne m'a encore claque entre les doigts. (je comprend pas)

 

Backblaze fait un rapport tout les ans sur la fiabilité de leur disques: https://www.backblaze.com/blog/hard-drive-reliability-q3-2015/

 

Si t'a des bon disques alors non, 4+1 c'est pas déconnant.

[manslipkorn]

Bonsoir à vous,

 

Bon, bonne nouvelle (enfin j'espère), étant donné qu'il n'y avait pas de contre-indication particulière de votre part, j'ai du coup commandé ce midi le boitier 3U et le backplane (un peu déçu sur le backplane car noname, j'aurais préféré un IcyDock (mais je n'en ai pas trouvé avec 5DD et en SATA 3 / SAS à un prix raisonnable). On verra bien du coup ce que ça vaut. Sachant que la livraison est offerte, j'en ai pour 233.76€ (ça rentre dans le budget que je m'accordais pour un boitier).

 

Théoriquement, je le recevrai dans 3 jours, je m'empresserais alors de le monter dans l'armoire voir si j'ai assez de place devant comme derrière. (je mettrais aussi quelques photos de l'ensemble).

 

@Kernelcoffee

Je suis d'accord avec toi, je perds surement en emplacement disques en faisant de cette façon, mais je ne pense pas avoir besoin de plus de 10 HDD (avec les capacités qui augmentent, dans 3-4 ans quand mes 5 ou 10 HDD seront pleins, un "simple" HDD fera l'équivalent de l'ensemble de ma grappe en capacité .

Sinon, concernant la place derrière pour le cable d'alim, j'en ai quelques-uns de coudés, ça me fera gagner un peu de place :)

Voilà, en tout cas, merci à tous pour vos conseils / remarques. Je continuerai sur ce même topic pour les demandes CM / Proc / Alim / HDD (même si j'ai déjà des idées en alim et HDD, un peu plus floues par contre pour le couple CM / Proc).

 

Encore merci à vous,

Des photos viendront dans la semaine