Page 1 of 1
Nouveau besoin d'aide sur l'installation d'un serveur notamment sur rtorrent.
Posted: 02 Mar 2016 17:35
by Kira
Bonjour a tous.
Étant nouveau sur le forum, je vais tout d'abord me présenter rapidement, j'ai 26 ans, je suis passionné par les domaines de l’informatique et tout ce qui touche a la technologie en général, je suis aussi fansubber depuis quelques années maintenant, je gère même ma propres team, mais la question n'est pas là, pour information nous ne faisons en aucun cas des œuvres licencier nous ne sommes pas là pour concurrencer les éditeurs professionnel, si cette parti est contraire a la charte ne pas hésiter a virer le superflu, étant donnée que le domaine du fansub reste un sujet sensible entre légal, illégal, tolérer etc.
Pour information je ne parle quasiment pas l'anglais donc il m'est assez difficile de m'y retrouver, et de comprendre quoi que ce soit de technique.
J'en viens au sujet principal de ma venus ici, a savoir le réglages et l'optimisation de mon serveur qui tourne sous nas4free version : 10.2.0.2 - Prester (revision 2332).
Le hardware se compose d'une ancienne config :
OS : nas4free version : 10.2.0.2 - Prester (revision 2332) version « embedded ».
Disque Système : SSD corsair force gs 128 go pour l'os.
Stockage : Disque dur Western digital Caviar Red 7 X 3 to en raid Z1 avec un disque en parité.
Cm : Msi Big Bang-Marshal (B3) Chipset Intel® P67.
Proc : I7 2600K
Ram : 8 Go de DDR3 Corsair vengeance cl9 a 1600 mhz.
CG : Radeon HD 5870 vapor-x de sapphire.
Alim : Corsair HX 650 80+ Gold
Pour la suite je tiens a préciser que je suis un total débutant dans le monde linux, freebsd etc.
J’avais donc installer a l'époque et ré-installer au propre y a quelques jours mon serveur avec l'aide du tuto que voici :
http://www.lambot.info/installation-et- ... n-dun-nas/ que j'ai trouver relativement simple d’accès et des plus complet, en suivant le tuto j'ai aussi fait la manip pour virer l’émulateur GNOP, a fin que ZFS accède aux disques en mode RAW, selon le tuto c'est plus sur est plus facile a rattraper en cas de problème.
la situations étant clair, j'en passe donc aux question de ma venu ici,je souhaiterai donc utiliser rtorrent a la place de Transmission qui depuis quelque version me parait bien moins stable, est qui surtout se retrouve de plus en plus bloquer sur les tracker que j'utilise.
J'ai donc suivi les tuto de laster13 : pour installer TheBrig Alcatraz
viewtopic.php?f=94&t=7479, chose qui a parfaitement fonctionner apparemment en revanche je galère énormément depuis 4-5 jours sur l'installation de rtorrent avec ce tuto
viewtopic.php?f=94&t=9018, je bloque notamment a l'étape, Configuration de php-fpm là ou il faut sélectionner et modifier des lignes que je n'arrive pas a trouver.
Par ailleurs me semble avoir vu nombre de Warning, lors de l'installation des étapes précédentes.
J'envisagerai aussi par la suite si utile de me prendre un VPN, sachant que j'utilise nombreux site et tracker étranger, sachant que certain ce retrouve de temps a autre voir totalement inaccessible de la France, apparemment le vpn pourrait être une solution mais je dois avouer que je ne connais pas grand chose, a tout ce qui touche le monde de la programmation des logicielles, mes connaissance sont surtout porter sur le hardware en lui même.
Je souhaiterai donc votre aide concernant l'installation de rtorrent et vos avis sur l'utilité ou non de prendre un abonnement a un vpn.
Pour mon utilisation a savoir qu'elle est assez classique mon serveur me sert uniquement pour les torrents, et pour une extension de stockage de mon pc, utilisant le pc, pour tout le reste que ce soit le coté home cinéma, jeux etc, je n'ai pas forcément l'utilité du DLNA si j'ai bien compris qui pourrait être en gros une lecture en direct via ma tv etc, préfèrent de loin tout mes réglages est mes habitude pc.
En revanche je ne suis pas contre d'autre installation qui peuvent être utile a la sécurité du serveur entre autres, ou qui pourrait me servir au quotidiens. Car j’avoue que pour moi les possibilités offerte par un serveur me reste vraiment inconnus.
Pour finir veuillez pardonner mon orthographe j'ai fait au mieux pour corriger autant que possible.
Merci par avance de votre aide.
Re: Nouveau besoin d'aide sur l'installation d'un serveur notamment sur rtorrent.
Posted: 02 Mar 2016 20:31
by ernie
Hello
Bienvenu sur le forum.
Avant nas4free 10.x et TheBrig alcatraz, pour avoir rtorrent et le vpn seulement pour rtorrent, il valait mieux passer par vbox et une machine virtuelle.
Ceci est installé d office (vbox) dans la version 10.x d ailleurs. Il n y a plus qu à créer une vm avec debian jessie. Et tu auras ainsi à installer dessus rtorrent et les tutos sont en français sur le site mondedie
Avec alcatraz je ne sais pas et ceux qui ont suivi le tuto de Laster13 pourront t en dire plus.
Re: Nouveau besoin d'aide sur l'installation d'un serveur notamment sur rtorrent.
Posted: 02 Mar 2016 20:47
by mtiburs
Bonjour
Bienvenue !
Même si ce n'est pas ce que tu recherches pour l'instant, je suis surpris par ton SSD, est-ce que te peux faire un:
zpool status lenomdupool et faire un copier/coller ?
Par exemple, dans "Avancé|Exécuter une commande"
taper: $ zpool status -v nas1
et prendre le résultat
Re: Nouveau besoin d'aide sur l'installation d'un serveur notamment sur rtorrent.
Posted: 03 Mar 2016 15:17
by Kira
Salut ernie et mtiburs.
Tout d'abord merci de vos réponses, je vais donc fournir les infos, que mtiburs as demandé.
Je vais commencer par l'histoire du SSD, donc en faite nas4free m'indiquer que mon ancien dd système un Classique maxtor, était bon a remplacer il avais pas mal d'erreur selon le rapport SMART, faut dire que c'était un vieux dd que j'avais récups sur une de mes première config en sata^^.
Du coup je l'ai remplacer par l'ancien ssd de mon pc actuels, qui me servait plus vraiment entre temps.
Je pensait l'utiliser sur mon pc secondaire a la place d'un autre ssd Corsair de 64 go, mais vu que pour le système il m'est largement suffisant, j'ai donc préférer ne pas ré installer windows sur le second pc aussi.
Et selon le tuto que j'avais vu apparemment un ssd peut être utile sur ZFS, bien que je n'ai pas trop compris.
Concernant le zpool status le voici, hier soir j'ai vu un paquet d'erreur CKSUM, j'ai donc chercher un peu est lancer un scrub.
Selon SMART tout mes dd sont nickel, je pense donc a une corruption ou connerie du genre du Zpool liée a mon ancien dd système, vu que le pool a pas été recrée suite a la nouvelle install de nas4free sur le ssd, ce qui expliquerai peut être mes problème actuels de dl avec transmission, qui fini mal les téléchargement, qui après une vérification dit toujours qu'il en manque et re dl des donnée qui en complète certain et en corrompe d'autres qui fonctionner parfaitement.
kira-serveur: /mnt# zpool status Raidpool
pool: Raidpool
state: ONLINE
status: One or more devices has experienced an error resulting in data
corruption. Applications may be affected.
action: Restore the file in question if possible. Otherwise restore the
entire pool from backup.
see:
http://illumos.org/msg/ZFS-8000-8A
scan: scrub repaired 14.3M in 4h18m with 11 errors on Thu Mar 3 03:55:10 2016
config:
NAME STATE READ WRITE CKSUM
Raidpool ONLINE 0 0 29
raidz1-0 ONLINE 0 0 58
ada0 ONLINE 0 0 0
ada2 ONLINE 0 0 0
ada3 ONLINE 0 0 0
ada4 ONLINE 0 0 0
ada5 ONLINE 0 0 0
ada6 ONLINE 0 0 0
ada7 ONLINE 0 0 0
errors: 27 data errors, use '-v' for a list
Je suis donc a votre écoutes, actuellement je n'ai a peine plus de 1 to de stocker sur le serv, mais je peut parfaitement formater ou autre le pool et le recrée avec la méthode que vous me conseillerez toutes les donnée importante étant a l’abri dans mes pc.
Je suis même si besoin prêt a tout réinstaller de A a Z.
Tout ce que je demande, c'est que le serveur soit le mieux optimiser possible en fonction de mon matériel, de garder un raidZ1 avec un disque en parité pour un minimum de sécurité, de pouvoir installer rtorrent et pourquoi pas un VPN, si l'utilité est appréciable dans mon utilisation que j'avais décrit premier poste.
Je suis a votre écoute, après je ne sait pas qu'elle service de VPN serait le meilleur et si il y en as des gratuits, mais dans tout les cas, je n'aurait aucun problème a payer un abonnement si le prix reste décent.
Encore merci a vous de votre aide.
Re: Nouveau besoin d'aide sur l'installation d'un serveur notamment sur rtorrent.
Posted: 03 Mar 2016 17:54
by mtiburs
Bonjour,
OK, je comprends, pour ton SSD
Pour ton pool, Il faudrait faire les choses suivantes:
1) faire un zpool status -v Raidpool
2) détruire purement et simplement tous les fichiers qui sont vu en erreur
3) quand tu n'as plus rien et que un zpool status -v ne te donnera que des trucs en hexa (donc, qu'il n'y a plus de noms de fichiers), tu feras:
zpool clear Raidpool
4) puis un zpool scrub Raidpool (pour info tu peux l'arrêter en faisant: zpool scrub -s Raidpool)
Tu pourras voir l'évolution avec: zpool status -v Raidpool (çà te donnera des % et le temps restant)
Quand il aura finit, tu arrêtes ta machine et tu remets en route, et, tu refais un:
zpool status -v Raidpool
normalement tout devrait être bon
Pour en revenir à ton SSD, il peut servir de Zcache, et,il y a 3 façon de l'utiliser
1) secondarycache=none
les infos qui transiteront dans le pool seront écrite dans le Zcache très succinctement, un peu comme le sommaire d'un livre
les écritures sont très faibles et toutes petites, une clef USB peut servir à çà !
2) secondarycache=metadata
les métadonnées du pool qui transiteront seront écrite dans le Zcache (une sorte de structure, un peu comme des titres, des chapitres, des numéros de pages d'un livre)
c'est encore faible comme volume (çà ne comprends pas de data), çà use guère le SSD
2) secondarycache=all
les infos qui transiteront dans le pool seront toutes écrites dans le Zcache
c'est le plus gourmand en taille et en usure du SSD (a noter que le Zcache est remis à zéro à chaque redémarrage)
mais, c'est génial pour des disques lents, car chaque lecture sera faite dans le SSD
Pour info, un SSD ne s'use pas "facilement", car l'OS le gère différemment par rapport à un disque dur.
Pour info le primarycache concerne la RAM, et çà fonctionne exactement de la même manière.
C'est pour çà que je trouve que ton SSD pourrait être mieux utilisé, il est trop gros pour l'OS et toute sa capacité (qui est grande) serait en revanche très utile pour ton pool (qui est très gros).
Si tu veux voir comment est positionné ces valeurs:
zfs get all Raidpool | grep cache
pour moi, sur un de mes nas, çà donne:
nas2: ~# zfs get all nas2 | grep cache
nas2 primarycache all default
nas2 secondarycache all default
çà veut dire que toutes les données qui vont passer dans le pool seront écrites en RAM et dans le Zcache (c'est positionné par défaut en all, même si il n'y a pas de Zcache ! (à savoir, tu peux très bien positionner du Zcache "à fond" pour des datasets particuliers et du Zcache "léger" pour tout le reste, par défaut, les datasets crées "héritent" de la valeur du pool en vigueur).
Re: Nouveau besoin d'aide sur l'installation d'un serveur notamment sur rtorrent.
Posted: 04 Mar 2016 02:04
by Kira
Salut mtiburs, j'ai fait ce que tu m'as conseiller, mais j'ai un souci.
Une foi tous les fichiers concerner supprimer j'ai donc fait l'étape 4 : zpool scrub Raidpool, et voilà le résultat.
pool: Raidpool
state: ONLINE
status: One or more devices has experienced an error resulting in data
corruption. Applications may be affected.
action: Restore the file in question if possible. Otherwise restore the
entire pool from backup.
see:
http://illumos.org/msg/ZFS-8000-8A
scan: scrub repaired 3.55M in 4h0m with 10 errors on Fri Mar 4 01:49:44 2016
config:
NAME STATE READ WRITE CKSUM
Raidpool ONLINE 0 0 10
raidz1-0 ONLINE 0 0 20
ada0 ONLINE 0 0 28
ada2 ONLINE 0 0 16
ada3 ONLINE 0 0 33
ada4 ONLINE 0 0 27
ada5 ONLINE 0 0 27
ada6 ONLINE 0 0 26
ada7 ONLINE 0 0 25
errors: Permanent errors have been detected in the following files:
Raidpool/Serveur@auto-20160224-000000:/Transmission/Complet/nom du fichier.mkv.part
Raidpool/Serveur@auto-20160224-000000:/Transmission/Complet/nom du fichier.mkv.part
Raidpool/Serveur@auto-20160224-000000:/Transmission/Complet/nom du fichier.mkv
Raidpool/Serveur@auto-20160224-000000:/Transmission/Complet/nom du fichier.mkv.part
Raidpool/Serveur@auto-20160224-000000:/Transmission/Complet/nom du fichier.mkv.part
Raidpool/Serveur@auto-20160224-000000:/Transmission/Complet/nom du fichier.mkv.part
Le problème c'est que j'ai pour être sur d'avoir effacer chacune des donnée, j'ai même supprimer le dossier de transmission.
Donc je comprends pas pourquoi il me retrouve ça.
*J'ai juste remplacer les nom des fichier concerner par "nom du fichier car sinon y'en avais pour x ligne sur les noms.
Re: Nouveau besoin d'aide sur l'installation d'un serveur notamment sur rtorrent.
Posted: 04 Mar 2016 06:49
by sleid
Bonjour,
Si vous êtes certain de vos rapports SMART, vérifiez votre mémoire en laissant tourner memtest pour obtenir au moins 2 passes complètes.
Re: Nouveau besoin d'aide sur l'installation d'un serveur notamment sur rtorrent.
Posted: 04 Mar 2016 10:57
by mtiburs
Bonjour,
Je suis d'accord avec Sleid pour le test de mémoire (memtest se trouve sur des liveCD de Linux genre Knoppix), car tu as beaucoup de d'erreurs mais qui ne sont pas lié à la lecture ou l'écriture mais dans le checksum (çà veut dire que quand ZFS manipule un bloc:
- il arrive à le lire
- il arrive à l'écrire (et il a été validé comme bien écrit)
MAIS, à chaque fois (lors d'une ou des deux opérations ci-dessus, la somme de contrôle du bloc n'est pas bonne, donc, il se passe quelque chose ... y'à des fuites ! des aliens

, je sais pas moi .. ou une activité ésotérique
C'est pour cela que l'idée de Sleid se porte sur:
1) le smart
2) la mémoire
Personnellement, il y a quelque chose qui me chiffonne et que je connais pas:
c'est:
Raidpool ONLINE 0 0 10
raidz1-0 ONLINE 0 0 20
Il y a 2 fois plus d'erreurs "coté dev" que sur le pool
et les erreurs se trouvent sur chaque disque, donc, j'ai tendance a penser qu'il s'agit d'un problème de mémoires ou plus exactement "hors dev".
Si c'était un pb de connectiques, cela serait précis sur un disque.
Il est possible aussi que cela se situe sur le chemin d'un chipset.
Je propose la chose suivante (uniquement après avoir testé la mémoire par memtest)
Si le pool peut être détruit complétement:
1) supprimer le pool
2) faire un pool sur chaque disque
3) copier des données sur chaque pools en regardant bien les compteurs
Là, on pourra voir le comportement d'un dev séparément, mais aussi du pool
Si il y a des différence, on peut supposer qu'il il y une mauvaise gestion des chipsets SATA (je n'y crois pas trop mais bon), tu as 4 ports SATA d'un type, et 4 d'un autre (donc, avec des chipsets différents au niveau de la conception)
Si les checksum se reproduisent sur chaque pools, alors, là, je pense à un pb plus général, plus au sein de la mémoire ou du pont-nord.
il faudrait vérifier:
- que tu n'as pas de fonction d'auto-overclokage, et mets tout sur "auto" (enfin, fait en sorte que çà marche basiquement)
on peut imaginer aussi:
- de refaire le test avec une seule barrette
- de baisser la fréquence de la RAM
Sinon, si tu veux mon avis personnel sur la config:
(ceci veut dire uniquement ce que JE ferais si j'avais ta config, )
- La carte graphique est bien trop grosse est énergivore (tant en consommation qu'en ligne PCI), de plus elle a un VTL (donc usure au final), je mettrais une carte la plus simple possible (je dis çà uniquement si la machine a vocation a être sous Nas4Free et ne sert que de serveur).
- les autres composants sont très bien mais pour moi, il y n'y aura jamais un bon équilibre entre le système et les disques, dû à l'utilisation des ports SATA, il faudrait que les ports de disques (pour un raidZ) soit tous identiques et qu'il soit sur le PCI-express.
Je mettrais une carte SAS sur un des PCI express qui apporterait 8 dev de manière pure, ceci laisserait du SATA III pour le SSD et autre disque, et du SATA normal (II) pour le disque système et autre disque également.
Le cas échéant, je mettrai une carte SATA à (16?) ou 8 ports, ou 2 de 4 mais en PCIexpress (car le SATA passe par un chipset qui s'appelle pont-sud, qui lui provient d'un chipset plus puissant qui est le "pont-nord", avec le PCIexpress, les données ne passe que par le "pont nord", plus c'est direct est mieux c'est.
Par contre les disques étant en 3Go, il faudrait une carte SAS2 plus onéreuse.
Le système serait proche d'une "machine de guerre", mais la RAM n'est pas en mémoire ECC, donc, une grosse épée de Damoclès "plane", le pool peut-être altéré à tout moment sans aucune réparation possible (c'est ce qui distingue le matériel grand public du pro (pas sur la solidité, mais sur la conception même, un pool ZFS est géré d'une façon spéciale, c'est hyper fiable à condition qu'on lui en donne les moyens (à part mon serveur perso de MV, toutes mes autres machines (pro) ne sont pas ECC, les cordonniers sont les plus mal chaussés, mais c'est dit ! si j'ai un jours je perds un pool, je suis prévenu !, ... c'est pour cela que je n'utilise pas un gros pool, mais des petits)
Pour l'alim, normalement, elle est bonne, car il n'y a qu'un "rail" (j'avais peur pour le nombre de disques)
Donc voilà, j'ai hésité a mettre cette dernière partie, car çà peut faire un peu "rabat-joie", mais bon, c'est mon avis, c'est dit
Re: Nouveau besoin d'aide sur l'installation d'un serveur notamment sur rtorrent.
Posted: 04 Mar 2016 20:27
by Kira
Merci des réponse, je pense effectivement que le problème serait plutôt liée a la ram.
Pour les dd a la base j'en avais 3, et un a merder erreur smart signaler dans la partie diagnostics, information, S.M.A.R.T, du coup j'avais tester les 3 dd de manière intensif et hormis suis que smart repérer ras.
Je l'avais donc fais changer par Western digital avec le remplacement avant envoi, et par la même occasion j'en avais racheter 4, sa remonte a fin été 2015 en gros, et au final je n'ai re installer le serv que récemment fin 2015, jusque là vu que j'avais pas trop le temps et que le stockage pc me suffisait, il était en attente de récup la config actuel de chez ma mère, vu que avec ces dd en plus ma config serv de base était trop juste.
Et pour en venir a la ram, je me souviens que du temps ou j'avais oc un peu ce pc juste pour voir ce qui l'avais dans le ventre niveau potentiel oc, la ram m'avais poser dors et déjà problème, j'avais donc enlever la barrette concerné, qui était pas stable, bref j'ai fait le con, a la remettre en place lors de la réinstallation du serveur.
A mon avis pas utile de refaire un memtest du coup, vu qu'une des 2 barrette avais déjà été incriminer par celui-ci, et vu que 4 Go je pense que sa fera un peu juste, je pense remplacer les 2 par 4x4 go 1600 mhz cl9, sa m’évitera de devoir retester les barrette pour retrouver la quelle foutais la merde.
Sur mes 2 pc principal je tourne a 16 go de ram sur chacun, sa m'aide surtout en enco bien que je bouffe pas
souvent l'intégralité hormis quand je lance full enco fin bref.
Je me dits que 16 go de ram pour ZFS qui est très gourmand ferai pas de mal.
Pour ce qui concerne la carte graphique, j'ai pris celle là car je l'avais en stock depuis x année, sinon la seul qui me reste en stock et une GTX 680, qui est désormais inutilisé, je vois pas trop l’intérêt de racheter une cg bas de gamme alors que j'en ai en stock.
Pour le coup d'ailleurs sur l'ancienne config, avec d'autre barrette je n'avais jamais eu ce problème, et avec le dd qui a été remplacer au final j'ai 2 dd qui date de fin 2014 et 5 dd qui datte d'été 2015.
Sinon aucune fonction d'overclocking auto est activé, sa pose plus souvent de problème que de solutions, j'ai tendance a tout fixer manuellement dans mes bios que ce soit pour oc ou pour un usage quotidiens.
Pour l'histoire des port sata je suis d'accord c'est pas optimal certes, mais je n'y connais pas grand chose dans ce genre de matériel aurait tu une sélection de carte intéressante qui ferai l'affaire, je pourrais envisager de passer a la caisse, si pas trop excessif.
Après sur des dd classique comme eu je suis pas sur qu'on sente la difference entre le sata 2 et 3.
Et si j'ai bien compris ce que tu me disait, tu prendrais genre une clef usb ou autre pour le systeme et dédierai du coup le ssd entièrement au raidZ1 ?
Encore merci du coup de main.
Re: Nouveau besoin d'aide sur l'installation d'un serveur notamment sur rtorrent.
Posted: 04 Mar 2016 22:38
by mtiburs
Bonsoir,
Pour les SATA, il faut essayer avec, ce n'est peut-être pas ce qu'il y de mieux mais avec ZFS çà marche toujours, il est patient.
Quelles genres de données passent dans ta machine (je ne te demande pas ce que c'est),mais est-ce que c'est des éléments qui sont susceptible d'être lu et relu ou c'est lu qu'une fois ?
Car chacun a son type d'utilisation.
J'aurai tendance à dire que de l'encodage, c'est lu qu'une fois.
Je pense que 16Go serait une très bonne chose et il est possible que cela suffise, faut tester puis voir ce que çà donne, c'est toi l'utilisateur et si çà te suffit, c'est bien.
Je n'ai encore jamais mis un fichier du disque système en Zcache, si d'autres on déjà fait qu'ils le disent, sinon, je peux essayer.
Quand tu fais un df -h, çà donne quoi sur le disque système ?
Re: Nouveau besoin d'aide sur l'installation d'un serveur notamment sur rtorrent.
Posted: 04 Mar 2016 22:59
by Kira
Pour te répondre, alors pour le moment, le SSD donc ou il y'a nas4free d'installer n'est aucunement liée a ZFS il y a juste le système dessus, j'ai pas eu le temps de me plonger sur l'optimisation, d’où le fait que j'ai rejoins le forum pour d'une corriger le souci que j'ai et de deux, optimiser autant que possible mon matériel avec nas4free.
Le serveur me sert principalement a 2 chose les 95% du temps, d'une a dl dessus pour pas laisser le pc allumer toute la nuit, car pas aussi discret, et windows est pas trop prévu pour tourner h24 en permanence^^.
Et de deux il me sert comme stockage externe connecter a mon pc via CIFS/SMB, pour mater mes série, dessus.
Comme expliquer en début de poste je fais du fansub, c'est ma passions, étant passionnée par la japanime principalement, je récupère énormément de bdmv jap ou de super bonne enco, si rien n'est dispos en bonne enco sur une série qui nécessite d'être encoder j'encode moi même, sinon remux donc souvent des fichier de 7 go environs pour un remux d'un épisode avec des bitrate entre 40-50 000 en moyenne, pour ce qui est enco c'est variable.
Tout ce qui est bien entendu encoder via mes deux pc, le serveur est juste là pour le stockage et le dl, et de temps a autres je peut utiliser le ftp, mais tres rare.
Après sinon il m'arrive aussi d'extraire de mes Blu-ray et dvd les bdmv et iso via le pc et que je stock ensuite telle qu'elle sur le serveur , pour pas avoir a toujours utiliser mes dvd et blu-ray.
Re: Nouveau besoin d'aide sur l'installation d'un serveur notamment sur rtorrent.
Posted: 04 Mar 2016 23:23
by mtiburs
Oui, donc, en gros, t'as pas besoin d'avoir du Zcache de folie.
Je pense que vu la taille de ton pool, les 16Go sont la meilleur des solutions

Re: Nouveau besoin d'aide sur l'installation d'un serveur notamment sur rtorrent.
Posted: 04 Mar 2016 23:32
by Kira
Je pense aussi, déjà avec les 8 go sur l'ancien serveur, j'avais aucun problème en lecture, dommage que j'ai pas pu récupérer la ram dessus, vu qu c'était celle de mon pc secondaire, en dépannage le temps de récupérer suis-la.
Enfin passer a 16 go fera pas de mal pour le prix rien d'énormes, pi bon je passe quand même de 3x3to a 6x3 to plus un dd 3to en parité, après je peut aussi très bien installer le système sur une clef usb, apparemment sa marche bien et récupérer le ssd pour du cache c'est pas un problème.
J''ai ce qui faut en usb une kingston 8 go en usb3 elle et pas mal.
Après c'est pas dit qu'une foi que je connaitrais mieux les possibilité de nas4free, que je n'aurai pas un plus gros besoin, donc je suis preneur de ceux qui y a de mieux, en fonction de mes moyens, et des conseil qu'on me donnera.
Re: Nouveau besoin d'aide sur l'installation d'un serveur notamment sur rtorrent.
Posted: 05 Mar 2016 00:03
by mtiburs
Si tu peux utiliser ton SSD directement en Zcache, c'est bien, tu vas l'apprécier !
Pour l'évolution future, des fois on peut ruser, j'arrive souvent a mettre ce que j'ai besoin directement dans le pool, du coup je suis toujours avec une clef.
Après c'est pas dit qu'une fois que je connaîtrai mieux les possibilités de nas4free
Et bien tu le connais déjà bien, et en plus t'as pas peur de mettre les mains dans le moteur ! ... donc, je pense que tu vas y être longtemps sous Nas4Free

... faut reconnaître que c'est tout petit et génial ... c'est difficile de s'en passer !

Re: Nouveau besoin d'aide sur l'installation d'un serveur notamment sur rtorrent.
Posted: 05 Mar 2016 18:42
by laster13
Une parenthèse concernant l'une de tes questions initiales. Le fichier php-fpm doit être à l'endroit spécifié dans le tuto. Dans le cas contraire cela signifie que la compilation de php ne s'est pas déroulée corectement. Je te suggère de détruire la Jail et de recommencer.
Re: Nouveau besoin d'aide sur l'installation d'un serveur notamment sur rtorrent.
Posted: 05 Mar 2016 20:05
by Kira
Salut laster13, oui c'est ce que je comptais faire, je l'avais d'ailleurs dors et déjà détruite.
Là d'ailleurs, je reviens a l'instant d'aller chercher mes nouvelle barrette mémoire , j'ai donc pris 4x4go de G.SKILL SNIPER, CL9 a 1600 mhz.
J'installe ça dans la soirée et je vais refaire ce que ma conseiller mtiburs un peu plus haut être sur qu'il n'y as plus d'erreur.
De base je savais que j'avais une ram qui merder chose confirmer hier soir, j’espère que ce sera le seul souci.
Edit : j'ai fini le teste avec mes nouvelle barrette mémoire, y a vraiment du mieux quand on compare au précédent résultat.
Mais toujours quelques erreur, je vous mets ci dessous les résultats.
pool: Raidpool
state: ONLINE
status: One or more devices has experienced an error resulting in data
corruption. Applications may be affected.
action: Restore the file in question if possible. Otherwise restore the
entire pool from backup.
see:
http://illumos.org/msg/ZFS-8000-8A
scan: scrub repaired 0 in 3h59m with 10 errors on Sun Mar 6 03:03:33 2016
config:
NAME STATE READ WRITE CKSUM
Raidpool ONLINE 0 0 10
raidz1-0 ONLINE 0 0 20
ada0 ONLINE 0 0 0
ada2 ONLINE 0 0 0
ada3 ONLINE 0 0 0
ada4 ONLINE 0 0 0
ada5 ONLINE 0 0 0
ada6 ONLINE 0 0 0
ada7 ONLINE 0 0 0
errors: Permanent errors have been detected in the following files:
Raidpool/Serveur@auto-20160224-000000:/Transmission/Complet/nom du fichier.mkv
Raidpool/Serveur@auto-20160224-000000:/Transmission/Complet/nom du fichier.mkv.part
Raidpool/Serveur@auto-20160224-000000:/Transmission/Complet/nom du fichier.mkv
Raidpool/Serveur@auto-20160224-000000:/Transmission/Complet/nom du fichier.mkv.part
Raidpool/Serveur@auto-20160224-000000:/Transmission/Complet/nom du fichier.mkv.part
Raidpool/Serveur@auto-20160224-000000:/Transmission/Complet/nom du fichier.mkv.part
Raidpool/Serveur@auto-20160224-000000:/Transmission/Complet/nom du fichier.mkv
Comme on peut le voir en comparant avec les précédent résultat plus d’erreur CKSUM sur aucun DD.
mais toujours les mème souci avec c'est fichier pourtant supprimer même le dossier transmission a été intégralement supprimer.
Re: Nouveau besoin d'aide sur l'installation d'un serveur notamment sur rtorrent.
Posted: 08 Mar 2016 21:06
by Kira
Bonsoir, j'ai fini par vider totalement le pool, et je me demander si il y avais une manière, plus propre qu'une autre pour supprimer le dit pool.
Je me posait aussi une autre petite question suite au information que j'ai eu par mtiburs , je me demander si au final il serait pas simplement plus préférable de crée 7 pool distinct, un pour chaque disque dur, au lieu d'un raidZ1, et a ce moment là par exemple allouée spécifiquement un disque dur au dl que ce soit par transmission ou rtorrent, et les autre les utiliser vraiment spécifiquement comme stockages.
l’avantage j'y gagnerai un DD qui me servait jusque là de parité, donc plus de stockage mes j'y perd les avantage d'un raidZ1, enfin a voir si un gain ou pas dans mon utilisation, a l'origine j'avais fait un raidZ1 pour un minimum de sécurité avec le disque en parité, mais apparemment a moins de lui donner les moyens avec de la ram ecc et une carte sas2, je n'ai pas réellement plus de sécurité que sans, si ça doit pt sa pètera d’où ma question.
Re: Nouveau besoin d'aide sur l'installation d'un serveur notamment sur rtorrent.
Posted: 08 Mar 2016 21:40
by mtiburs
Salut,
Kira wrote:
Raidpool/Serveur@auto-20160224-000000:/Transmission/Complet/nom du fichier.mkv
Raidpool/Serveur@auto-20160224-000000:/Transmission/Complet/nom du fichier.mkv.part
Raidpool/Serveur@auto-20160224-000000:/Transmission/Complet/nom du fichier.mkv
Raidpool/Serveur@auto-20160224-000000:/Transmission/Complet/nom du fichier.mkv.part
Raidpool/Serveur@auto-20160224-000000:/Transmission/Complet/nom du fichier.mkv.part
Raidpool/Serveur@auto-20160224-000000:/Transmission/Complet/nom du fichier.mkv.part
Raidpool/Serveur@auto-20160224-000000:/Transmission/Complet/nom du fichier.mkv
Attention, ce que tu vois ci-dessus, n'est pas les fichiers mais le snapshot !
il faut faire:
zfs destroy Raidpool/Serveur@auto-20160224-000000
qui supprimera le snapshot "Raidpool/Serveur@auto-20160224-000000" est donc, les fichiers dedans qui posent problèmes.
Après çà, tu referas un scrub pour qu'il repasse tout en revue, et ensuite tu refais un zpool status -v
Il faut que tu n'aies plus d'erreur !
Pour le matos, on verra après (on fera des essais pour voir le débit du pool)
Pour l'instant, il faut faire avec ce qu'il y a et normalement, çà doit marcher. Le matériel améliore avant tout les choses sur contraintes bien spécifiques comme la déduplication et/ou des tailles très grosses.
Re: Nouveau besoin d'aide sur l'installation d'un serveur notamment sur rtorrent.
Posted: 09 Mar 2016 02:13
by Kira
je viens de finir le test et là il m'indique une autre snapshot corrompus, Serveur@auto-20160225-000000.
Y'aurait pas une commande pour supprimer toute les snapshot car je sent que ça va etre long si je doit faire un teste entre chaque qui y'aurai a supprimer.
Edit : c'est bon j'ai vu qu'on pouvais les supprimer a la main via l'interface j'ai supprimer toute les snapshot, et je relance le test.
Edit 2 : le test lancée après la suppression de toute les snapshot c'est terminée avec succès.
pool: Raidpool
state: ONLINE
scan: scrub repaired 0 in 3h21m with 0 errors on Wed Mar 9 06:38:06 2016
config:
NAME STATE READ WRITE CKSUM
Raidpool ONLINE 0 0 0
raidz1-0 ONLINE 0 0 0
ada0 ONLINE 0 0 0
ada2 ONLINE 0 0 0
ada3 ONLINE 0 0 0
ada4 ONLINE 0 0 0
ada5 ONLINE 0 0 0
ada6 ONLINE 0 0 0
ada7 ONLINE 0 0 0
errors: No known data errors
Re: Nouveau besoin d'aide sur l'installation d'un serveur notamment sur rtorrent.
Posted: 09 Mar 2016 21:57
by sleid
"l’avantage j'y gagnerai un DD qui me servait jusque là de parité, donc plus de stockage mes j'y perd les avantage d'un raidZ1, enfin a voir si un gain ou pas dans mon utilisation, a l'origine j'avais fait un raidZ1 pour un minimum de sécurité avec le disque en parité, mais apparemment a moins de lui donner les moyens avec de la ram ecc et une carte sas2, je n'ai pas réellement plus de sécurité que sans, si ça doit pt sa pètera d’où ma question."
Quel que soit le système de fichiers un problème de ram touchera les fichiers, seulement presque tous les systèmes sont aveugles face a ces erreurs.
ZFS a de multiples possibilités de contrôle d'erreur, mais son infaillibilité n'a qu'un talon d’Achille, c'est l'intégrité de la ram.
C'est son seul point faible donc il est mis en évidence mais les autres systèmes sont tout autant sensibles et sont impuissants à corriger d'autres problèmes qui sont résolus par ZFS, le plus connu étant la coupure d'alimentation pendant une écriture disque.
Sachant que des systèmes sous ZFS tournent depuis des années avec de la ram classique mais de qualité, il ne faut faire une fixation sur l'ecc.
De toute façon seule une sauvegarde bien faite peut palier à un crash de FS.
Re: Nouveau besoin d'aide sur l'installation d'un serveur notamment sur rtorrent.
Posted: 10 Mar 2016 18:20
by Kira
Salut sleid, oui j'avais lu un peut partout avant de me décider sur ZFS qu'il était vraiment intéressent, est plus fiable que la moyennes.
Bon en tout cas là j'ai plus d'erreur sur le pool suite au divers test effectuer, mtiburs, c'est quoi les test donc tu parler pour le matériel ?
Tant qu'a faire autant que je les fassent avant de re utiliser le serveur a proprement parler, pour le moment j'ai toute les donnée du pool en sécurité sur le pc.
Hâte que tout soit vraiment OK, pour vider les dd du pc qui commencer a être dans le rouge niveau espace.
Re: Nouveau besoin d'aide sur l'installation d'un serveur notamment sur rtorrent.
Posted: 23 Mar 2016 16:10
by mtiburs
Salut,
Si tu veux faire les choses en "mode parano", fais du "COW-alourdit"

!
Copie tes données de tes PC "en rouge" et tu videras partiellement (ou pas) tes PC uniquement quand ton pool "vivera" et sera validé (par toi) dans le temps.*
(perso, des fois, je renomme certains dossier avec "_SUPPR" au bout, çà veut dire que c'est supprimé, et que si j'ai besoin de la place, je les supprime réellement, c'est une façon de différer l'action destructrice)
quelques idées:
1er exemple:
- tu enlèves un disque (à chaud) et tu copies des fichier dans ton pool (ou pendant la copie)
- puis tu redémarres (ou rebranche le disque à chaud)
2ème exemple:
- tu bootes sur une clef avec N4F "neuve"
- tu choisis un disque et tu fais un dd if=/dev/zero (ou random) of=/dev/ada2 'exemple) bs=1M count=10000 (10Go de zéro)
- tu redémarres avec ton système normalement
le but et d'analyser la situation (voir les messages d'erreurs) ... et comment se "dépatouiller" (s'auto-former quoi

)
Je veux dire par là, ne fais pas juste un "déplacer" de tes données en "une seule passe" !
Re: Nouveau besoin d'aide sur l'installation d'un serveur notamment sur rtorrent.
Posted: 24 Mar 2016 22:35
by Kira
Salut mtiburs, pour le coup, je pense que le pool est a nouveau stable, depuis que tu m'as aider a supprimer les autosnapshot et que j'ai changer les barrettes mémoires.
J'ai commencer a relancer divers Dl, via transmission dans un temps pour voir si j'avais toujours des corruption au dl etc, et là pour le coup tout les dl effectuer j'ai pas vu un seul mo de corrompu, mémé après 7 ou 8 vérif des données, j'ai aussi re fait après divers dl plusieurs scrub et pas eu la moindre erreur d'apparue.
Pour le coup après j'ai essayer de me re atteler a l'installation de rtorrent, pas encore réussi a l'installe complètement (par manque de temps), mais de ce que j'ai vu, pu d'erreur lors des étapes d'installation.
Du coup me reste juste ce doute sur que faire de mon pool, soit rester comme ça avec un disque en parité, ou bien a ce moment faire aucun Raidz1 Et au final crée 7 pool distinct avec chaque disque dur.
Vu qu'a ce que tu me disait un Raid z1 n'est pas non plus forcément infaillible me demande si au final le moins risquer ce serait pas d'avoir 7 pool avec mes donnée importante en sécurité sur divers pool et sur divers pc, a fin de minimiser les risques.
Re: Nouveau besoin d'aide sur l'installation d'un serveur notamment sur rtorrent.
Posted: 26 Mar 2016 16:33
by mtiburs
Salut,
le sujet est intéressant, je voulais y répondre mais j'ai eu quelques soucis de connection, je reviens sur ce post plus tard