Tutoriel La creation de mon NAS 24 baies pour pas si cher que ça.

[djelme]

foetus, (le) 09 Fév 2014 - 17:39, a écrit :

djelme, (le) 09 Fév 2014 - 16:49, a écrit :

j'ai commandé un petit ventilo de 40 mm de marque Noiseblocker

Tu es sérieux là :zarb:

Même collé à la puce de ta carte j'ai un énorme doute sur l"efficacité

Déjà je pense que tu as cherché pour en trouver 1 et en plus le payer assez cher (encore plus si fdp)

As-tu déjà entendu parler de CFM et de pression statique?

Bah à 7 euros fdp compris je ne me ruine pas.

http://www.blacknoise.com/en/products/it/12/Noiseblocker-NB_BlackSilentFan_40mm

c'est celui là. J'ai déjà changé des ventilos de ce type sur des chipsets. S'ils y sont c'est bien pour quelque chose même s'ils soufflent pas fort. Et la carte HBA n'est pas directement dans le flux d'un des 12 cm, donc je rajoute ce petit ventilos sur son refroidisseurs histoire de créer un léger flux qui évacuera sa chaleur. Je verrai bien le résultat avec la sonde.

[Kernelcoffee]

Salut a tous,

L'ensemble des discutions/informations/questions qui sont sur ce topics est absolument fantastique, et j'ai trouve qu'un vrai topics dedie aux questions sur le NAS homemade etait de rigueur

https://forum.nextinpact.com/topic/168699-le-topic-du-nas-ikea-a-monter-soi-meme/

Je vais mettre l’ensemble des informations que je trouve essentiel pour monter son propre NAS, pour le néophyte et pour celui qui se pose des questions.

[djelme]

Kernelcoffee, (le) 11 Fév 2014 - 05:04, a écrit :

Salut a tous,

L'ensemble des discutions/informations/questions qui sont sur ce topics est absolument fantastique, et j'ai trouve qu'un vrai topics dedie aux questions sur le NAS homemade etait de rigueur

https://forum.nextinpact.com/topic/168699-le-topic-du-nas-ikea-a-monter-soi-meme/

Je vais mettre l’ensemble des informations que je trouve essentiel pour monter son propre NAS, pour le néophyte et pour celui qui se pose des questions.

[christophefrontignan]

Merci Kernelcoffee

[djelme]

Master Of Bandwidth, (le) 09 Jan 2014 - 14:03, a écrit :

Le Core i5 4570TE prend en charge la memoire ECC, l'acceleration AES et les instructions pour la virtualisation. Il consomme 35W, il vaut moins cher qu'un Xeon E3 1220v3. Ce processeur me semble être idéal et -bizarement supérieur aux Xeon E3.

Après reste à boir la dispo.

J'ai oublié de t'en parler, mais je n'ai pas réussi à le trouver dans le commerce. Je me suis rabattu sur le xeon...

christophefrontignan, (le) 06 Fév 2014 - 16:51, a écrit :

Bonjour Djelme,

Après l’expiration de ta license WS, quel système d’exploitation compte tu installer sur ton NAS ?

Merci pour ton aide.

Christophe

A la base, il y a plus de deux ans, je comptais utiliser whs qui était spécialement prévu pour les home serveurs. Mais en 2013, MS a annoncé qu'il ne serait pas mis à jours. J'ai donc changé mon fusil d'épaule et me suis rabattu sur Windows serveur Essentials. Mais la différence de prix est triple....

[Flo1028]

Bonjour à toutes et à tous,

 

Tout d'abord, mille mercis et grand respect pour vos connaissances et le temps passé ici à partager votre expérience...

 

J'ai presque "honte" d'intervenir tant je ressens l'immensité de mon ignorance.

 

Mais je me lance:

 

Cela fait plusieurs années que je m'efforce de gérer du mieux que je peux l'accroissement des données dans mon PC. J'ai accumulé les HDD et ai essayé de les changer au fur et à mesure pour éviter les pannes.

 

Mais ça va sans doute devenir plus difficile maintenant, les capacités des HDD semblent "stagner ces derniers temps", et le rapport prix/capacité ne pas "s'effondrer" comme il y a quelques années (ah, l'heureux temps des Samsung F4  ).

 

J'ai cru comprendre que le RAID 5 (par exemple) ne garantissait pas du tout de récupérer ses données en cas de panne, surtout sur des HDD de grosse capacité (4 To ou plus), puisque le temps de reconstruir la grappe, il y a presque certitude qu'une erreur va venir gacher la chose (c'est bien ça ?  )...

 

Donc, au lieu de me construire un NAS comme le votre (superbe au passage  ) j'ai plutot imaginé de me rabattre vers ce genre de choses :

 

Boitier externe ICY BOX IB-3640SU3 : http://www.magicpc.fr/boitiers-externes-docks-disques-durs/31058-boitier-externe-icy-box-3640su3-4250078186328.html?codesf=990707985&gclid=CKjyurWv8MICFagSwwodcHoAEw (à 110€, ça a, en plus, l'avantage de la simplicité) (à propos, comment on insère une image dans un post ? ).

 

il existe le modèle 8 baies, un peu plus cher, et chacun ont aussi une variante qui gère le RAID...

 

Confirmez vous bien le fait que pour des grappes de 4 ou 8 disques de 4 ou 6 To chaucun, le RAID ne met pas du tout à l'abri d'une panne qui conduirait à une perte de données ?

Vous remerciant de vos précisions sur ces points, je vous souhaite à tous de passer un excellent réveillon et vous dit "à l'année prochaine"

[RFN]

Bonjour,

 

Le raid est une protection temps "réel". Certes tu peux avoir un souci de reconstruction de grappe mais avec un hardware basé spécialisé (carte raid de standard répandu), c'est assez fiable.

 

Par contre, une solution RAID ne te protège pas de tout : plusieurs disques en pannes, incendie, virus, inondation, ...

 

Aussi il convient de lui adjoindre une sauvegarde externe dont les média entre 2 backup sont stockés ailleurs  afin d'éviter tout dommage comme cité précédemment.

Les 2 méthodes (raid et backup) se complètent. En effet si le raid est en temps réel, le backup lui fait perdre les données depuis la dernière sauvegarde en cas de perte du RAID.

 

Perso, je synchronise les données entre plusieurs ordi (trois en l’occurrence) et je pars avec l'un des portable quand je quitte mon domicile (y compris pour aller au bureau).

[Flo1028]

Bonjour, et Bonne année !! :-)

 

En fait, je parlais de ce genre de chose :

De mon EXP:

 

Ne jamais dépasser les 8 disques sur du raid hardware et des disques Sata, surtout en raid5. Avec une IBM DS-4700 et 8*1TB, ça met dans les 48h la reconstruction.

Tu as de fortes chances de péter un deuxième disque suite au bourrinage d'IOPS lié à la reconstruction.

 

Je n'ai pas la prétention de tout comprendre  mais je pensais que ça voulait dire que la reconstruction (8x1To, on ne parle même pas de disques de 4To ou plus...) est quasi impossible sans erreur... Et j'ai cru lire aussi ailleurs qu'il arrive que de petites erreurs d'écriture ou lecture ne soient pas identifiées au moment où elles se produisent, mais qu'elles empêchent, ensuite, la reconstruction de la grappe... bref, qu'en fait, le RAID 5 ne met pas du tout les données à l'abri, mais qu'en revanche, en effet, il permet juste d'avoir une assurance de "disponibilité" des données, dans un environnement pro (et cher) et sur des disques "relativement petits".

 

Quoi qu'il en soit, pour un particulier qui n'héberge pas de serveur en ligne, mais uniquement ses propres données sur son réseau perso, sans besoin de dispo 24/7, (question 1)est-il vraimet utile d'opter pour du raid alors même que la sécurité des données n'est pas assurée et qu'il faudra, de toute façon, faire une sauvegarde ?

 

(Question 2) : que pensez-vous, pour un NAS 24 baies pas cher du tout, de monter un mini PC (avec carte mère d'au moins 4 ports SATA, et 2 équerres SATA vers e-SATA) et de coller 3 boitiers de ce genre : http://www.ldlc.com/fiche/PB00175739.html

 

pour info, ce modèle gère uniquement le JBOD, mais il existe aussi le même (plus cher) avec "Niveau RAID : RAID 0 (Striping) / 10 / 5 / 50 / BIG (Spanning)", mais pour ma part, ce serait sans doute du JBOD et une sauvegarde, donc (et sans doute sur un autre boitier, "à froid", c'est à dire branché uniquement le temps de la sauvegarde et mis hors tension après)

 

L'ordi :

http://www.ldlc.com/b-f9fea92612304237.html  (223,45€ TTC) 4 ports e-sata (+ 1 port PCI express 16x cablé en 4x, qui peut donc accueillir une carte sata 4 ports ou USB 3... pour doubler la capacité) et conso de 25W du processeur.

1 boitier 8 disques JBOD = 295€...

 

donc (295x4)+223,45 = 1 403,45€ pour un NAS 32 baies...extensible à 64 baies pour (70€ la carte USB 3x4 ports + 4 autres boitiers) = 1250€... mais la carte a déjà 2 ports USB 3 et 2 ports USB 2 pour ceux à qui ça suffira.

 

Donc, potentiellement, un NAS 64 baies pour 2 653,45€... (sans disque bien évidemment, mais compatible avec les disques les plus gros)

 

Avec l'avantage de "l'évolution progressive" (d'abord le mini ordi et 1 boitier 8 baies dans lequel on met un disque, puis un  autre, puis un autre boitier 8 baies, etc...), la faible consommation (en tout cas, juste le nécessaire), la possibilité de mettre un OS complet sur le mini ordi qui pourra gérer tout ça et même autre chose (Kodi, serveur Plex, serveur Media Browser, voir quelques logiciels qui tournent parfois 7/24) et, finalement, pour un prix assez modeste (519€ les 8 baies / 813€ les 16 baies / 1 108€ les 24 baies...)

 

ca vous semble "tenir la route" ?

[Kernelcoffee]

Salut,

 

C'est intéressant comme montage, j'avais deja vu les boitier ICY mais je n'y avais pas mis plus d'attention.

Je ne sais pas si ca tient la route mais pourquoi pas.

 

Ma demarche actuellement pour la redondance des donnes :

Le probleme qui se pose actuellement c'est que la capacités des disques deviennent de plus en plus grande mais la mécaniques ne change pas ça reste toujours des plateaux qui tournent et plus la capacité est grande et plus cela va prendre du temps pour les opérations de reconstruction ou de maintenance (un scrub ZFS actuellement prend env 24h actuellement sur mon système)

Donc c'est plus interressant je pense de faire des petite grappes de RAID

 

Mes remarques/questions :

- Avec la multiplications des boitiers et des cables (sans compter la multi-prise) j'ai peur que cela rendre l'ensemble plus fragile.

- En mettant 8 disques dans un boitier SATA qu'en est-il des perfs ?

- je n'ai pas vu comment tu comptais gérer les disques : Raid Hardware ? ZFS ? Btrfs ? Alamainfs ?

- tu compte avoir un onduleur ?

 

Mon retour rapide avec ma config actuel:

- j'ai 12 disques (6x3To + 6x4To) en 2 zRaid2 (donc 2 disques de redondance par grappe) agrégé sur un seul volume et malgres ma consommation massive de stockage ca va me prendre encore pas mal de mois avant d'arriver au bout de 28To de stockage.
- le protocole reseau AFS pour OS X c'est pratique grace a Bonjours, mais soit c'est mon mac mini soit c'est de la merde parce que les performance sont pourri : gros lag, dossier qui mettent 250 a lister et une fâcheuse tendance d'OS X a laisser des petite bouses .DS_STORE et .doubleTruc partout. Je pense que Spotlight est le coupable mais y a un truc qui sent le moisi.

Je suis sur que ca doit etre possible de deactiver ce genre de truc sur le volumes reseaux.

[Flo1028]

Salut,

C'est intéressant comme montage, j'avais deja vu les boitier ICY mais je n'y avais pas mis plus d'attention.

Je ne sais pas si ca tient la route mais pourquoi pas.

Le gars qui monte un NAS 24 baies de pro il trouve mon idée intéressante !!!

 

Mes remarques/questions :

- Avec la multiplications des boitiers et des cables (sans compter la multi-prise) j'ai peur que cela rendre l'ensemble plus fragile.

- En mettant 8 disques dans un boitier SATA qu'en est-il des perfs ?

- je n'ai pas vu comment tu comptais gérer les disques : Raid Hardware ? ZFS ? Btrfs ? Alamainfs ?

- tu compte avoir un onduleur ?

 Euh... là, j'ai pas tout compris... j'imagine que ça s'adresse à des gens compétents... ;-)

Pour ce qui est de la question des perfs de 8 HDD dans un boitier qui ne dispose que d'une seule prise SATA, en fait, si, par exemple, on dit pas que c'est vraiment ça le projet, mais par exemple, si il s'agit de 8 disques sur lesquels il y a des films, pour les lire sur un média center... par exemple... (mais en vrai, M'sieur, c'est pas ça, en vrai c'est pour y mettre tous mes fichiers super perso des films de mes vacances captés en 4K 3D stéréoscopique...)

 

Sera-ce vraiment pénalisant pour du stockage presque "à froid" ? il ne s'agirait pour ainsi dire que de lecture avec un débit relativement raisonnable (pas plus que la bande passante habituel d'un mkv disons, toujours pour prendre un exemple n'est-ce pas ^^)

 

Mon retour rapide avec ma config actuel:

- j'ai 12 disques (6x3To + 6x4To) en 2 zRaid2 (donc 2 disques de redondance par grappe) agrégé sur un seul volume et malgres ma consommation massive de stockage ca va me prendre encore pas mal de mois avant d'arriver au bout de 28To de stockage.

Si je compte bien, 2 disques de redondances par grappe, ça te fait une "perte" d'espace de 1/3 ?

Est-ce que tu penses être, du coup, dispensé de sauvegarde ?

 

Pour le dire autrement, est-ce que tu considères tes données à l'abri quoi qu'il arrive avec ce montage ?

 

Je peux comprendre le RAID (et l'allocation d'1/3 de l'espace de stockage à la redondance) dans un environnement qui demande une disponibilité des données 24/7 quoi qu'il arrive, OU pour se passer de sauvegarde, mais 1/3 pour la redondance alors qu'il faudra aussi sauvegarder, pour un particulier et pour du stockage "à tiède" (presque à froid  )

 

Ca ferait 6To + 2To de redondance + 6To de sauvegarde, soit 14To acheté pour 6 To "sauvegardés" utilisés, au lieu de 6To utilisés + 6To de sauvegarde.

 

Enfin, pour remplir tes 28To de disques, ça peut être long en effet... ou pas...  tout dépend avec quoi...

[Kernelcoffee]

Euh... là, j'ai pas tout compris... j'imagine que ça s'adresse à des gens compétents... ;-) Pour ce qui est de la question des perfs de 8 HDD dans un boitier qui ne dispose que d'une seule prise SATA, en fait, si, par exemple, on dit pas que c'est vraiment ça le projet, mais par exemple, si il s'agit de 8 disques sur lesquels il y a des films, pour les lire sur un média center... par exemple... (mais en vrai, M'sieur, c'est pas ça, en vrai c'est pour y mettre tous mes fichiers super perso des films de mes vacances captés en 4K 3D stéréoscopique...) Sera-ce vraiment pénalisant pour du stockage presque "à froid" ? il ne s'agirait pour ainsi dire que de lecture avec un débit relativement raisonnable (pas plus que la bande passante habituel d'un mkv disons, toujours pour prendre un exemple n'est-ce pas ^^)

 

De ce que j'ai compris tu aura un petit ordi avec X boitier ICY (de 8 disques) branche dessus, ma question etait surtout qu'avec la multiplication du hardware c'est certe tres modulaire (suis un grand fan des truc modulaire), mais est ce que avoir autant de pièce de hardware différent ne va t-il pas augmenter la fragilité physique de l'ensemble.

 

Une des raisons pour laquel je me suis diriger vers mon boitier actuelle c'est que c'est un boitier rackable 4U standard (format serveur pro) ce qui le rend a terme plus facile a ranger avec d'autre elements qui sont aussi au format rackable (onduleur/switch/autre boitier) et plutôt que de multiplier les petits boitier qui traine un peu partout je voulais tout mettre dans une armoire et fermer la porte.

Vu qu'on facile trouver des boitiers 1U/2U on peut facilement monter des serveurs/ordi/routeur et autres joyeuseté (multi-prise/tablette/kvm/...)

 

Avec ton systeme tu va avoir, avec 24 disques, 4 différents boitier (l'ordi + 3 ICY) qui seront pose quelque part (par terre ?) sans avoir de possibilité de rangement plus pratique (i.e rackable).

Donc si tu compte monter jusqu’à 24/48/64 disques, est ce que tu pense que sur le long terme ça va être pratique d'avoir autant d’élément différent face a une solution plus monolithe ?

 

Egalement tu compte installer quel système sur l'ordi pour pouvoir créer ton NAS ?

 

Si je compte bien, 2 disques de redondances par grappe, ça te fait une "perte" d'espace de 1/3 ? Est-ce que tu penses être, du coup, dispensé de sauvegarde ?

 

Non, mais c'est un début en mettant a 1/3 mon niveau de redondance (ce qui est le maximum), j'essaye de diminuer au maximum le risque de perdre un volume zRAID.

Deja mes grappes sont plus petit ce qui fait que la reconstruction devrais etre plus petite également.

Je peux perdre 2 disques par grappe (et j'ai 2 grappe) ce qui devrait me laisser le temps de courir chez mon vendeur de disque préféré pour en racheter un autre (ou que la poste le livre).

Dans un monde "pro", j'aurai un 2e serveur identique qui serais en mirroir (afin de former un RAID de type 60) et qui serais capable de prendre le relais si jamais l'un ou l'autre claque. (disque ou hardware)

Étant un particulier n'ayant pas de besoin réellement pro ma configuration actuelle est non-seulement de l'overkill complet mais m'a surtout permis d'apprendre beaucoup de chose.

 

Enfin, pour remplir tes 28To de disques, ça peut être long en effet... ou pas... tout dépend avec quoi...

 

Bah pareil en dehors des backup de mes ordis et autres VM, des vidéos 4K 3D en RAW de mes vacances de nowel.

Mais même si tu voyage beaucoup, une fois que tu as fini de d'archiver les 25 dernières année de vacances en haute def, au bout d'un moment il faut attendre les prochaines vacances pour continuer a prendre des vidéos, des photos ou la bande son du petit cousin qui joue du piano a la kermesse de la paroisse ou pour la fête du village, donc ta courbe de besoin baisse drastiquement ou bien jusqu’à ce que tu retrouve un carton plein de bobine au fond du grenier.

[Flo1028]

De ce que j'ai compris tu aura un petit ordi avec X boitier ICY (de 8 disques) branche dessus, ma question etait surtout qu'avec la multiplication du hardware c'est certe tres modulaire (suis un grand fan des truc modulaire), mais est ce que avoir autant de pièce de hardware différent ne va t-il pas augmenter la fragilité physique de l'ensemble.

[...]

Avec ton systeme tu va avoir, avec 24 disques, 4 différents boitier (l'ordi + 3 ICY) qui seront pose quelque part (par terre ?) sans avoir de possibilité de rangement plus pratique (i.e rackable).

Donc si tu compte monter jusqu’à 24/48/64 disques, est ce que tu pense que sur le long terme ça va être pratique d'avoir autant d’élément différent face a une solution plus monolithe ?

Et oui, c'est pas faux... je vais essayer de dormir là-dessus.

Mais en fait j'extrapolais. Je n'ai jamais vraiment eu l'intention de monter 64 disques de cette façon. Peut être un boitier de 8 HDD pour stocker et accéder aux donnés sur le réseau, et un autre (le même ?), rangé, uniquement pour la sauvegarde.

 

Egalement tu compte installer quel système sur l'ordi pour pouvoir créer ton NAS ?

Du coup, je m'étais dit que "n'importe quoi" pouvait faire l'affaire, un Linux genre Ubuntu, un petit Windows qui traine (je dois avoir une licence XP qui ne sert plus à grand chose), voir même un freenas si compatible ? Le but étant juste, en fait, de mettre le boitier en réseau. Pour être parfaitement franc, j'avais même imaginé,  initialement, un "banana-pi"   (pas le raspberry parcequ'il n'a pas de port SATA), mais j'ai cru lire que son port SATA n'était pas compatible avec toutes les tailles de disques... et on sait tous à quel point la taille à son importance !!

 

Au tout début, l'idée était de dire: un boitier ICY 8 baies en RAID 5 à moins de 300€, tu ajoutes le raspberry pour le côté réseau et services dispo sous raspbian... et tu avais un NAS 8 baies RAID 5 pour à peine 350€. C'eut été rafraichissant isn't it ?

 

Mauvaise pioche :-(

 

Non, mais c'est un début en mettant a 1/3 mon niveau de redondance (ce qui est le maximum), j'essaye de diminuer au maximum le risque de perdre un volume zRAID.

Deja mes grappes sont plus petit ce qui fait que la reconstruction devrais etre plus petite également.

Je peux perdre 2 disques par grappe (et j'ai 2 grappe) ce qui devrait me laisser le temps de courir chez mon vendeur de disque préféré pour en racheter un autre (ou que la poste le livre).

Dans un monde "pro", j'aurai un 2e serveur identique qui serais en mirroir (afin de former un RAID de type 60) et qui serais capable de prendre le relais si jamais l'un ou l'autre claque. (disque ou hardware)

Étant un particulier n'ayant pas de besoin réellement pro ma configuration actuelle est non-seulement de l'overkill complet mais m'a surtout permis d'apprendre beaucoup de chose.

 

Je critique pas le côté farce... ;-) mais en effet, je comprends mieux la démarche à la lumière de tout ça... Encore que faire admettre à sa copine qu'il faut une armoire pour y loger le serveur, le NAS 24 baies et tout le toutim, il va encore falloir négocier l'armoire dédiée aux chaussures, je le sens ça...

 

Décidément, un super retour d'expérience, très profitable. Je garderais sans doute en tête l'idée de ce boitier ICY pour la sauvegarde (en 4 baies), et vais réfléchir à un serveur de stockage (avec redondance ?)

 

merci encore et je tacherai de vous tenir informés quand mon projet prendra corps, parce que dans l'immédiat, un gros barbue à la barbe blanche et habit rouge m'a fait les poches récemment...