This is the old XigmaNAS forum in read only mode,
it will taken offline by the end of march 2021!



I like to aks Users and Admins to rewrite/take over important post from here into the new fresh main forum!
Its not possible for us to export from here and import it to the main forum!

[RESOLU] Probleme de paramétrage Iscsi avec un cluster nas4free 10.3.0.3

French community

Moderators: velivole18, ernie, mtiburs

Forum rules
Set-Up GuideFAQsForum Rules
Post Reply
octave
experienced User
experienced User
Posts: 123
Joined: 30 Sep 2013 12:37
Status: Offline

[RESOLU] Probleme de paramétrage Iscsi avec un cluster nas4free 10.3.0.3

Post by octave »

I - Présentation du matériel et logiciel
2 Nas4free Version 10.3.0.3 - Pilingitam (revision 2942)
2 Hostname nas01 / nas02
par machine
CPU 2* L5530 @ 2.40GHz
Carte mère Supermicro X8DTH
System bios American Megatrends Inc. version: 2.1b 05/04/12

2 Virtual IP address [CARP] 192.168.4.8 (iscsi) et 192.168.4.7 (samba)

4 cartes réseaux intel pro (2 intégrées à la cm, 2 ajoutées pcie
- 1 lan manager
- 1 lan (samba) avec carp
- 1 lan (iscsi) avec carp

2 hdd sata 2 TO
- 1 pour iscsi
- 1 pour samba

1 une carte raid hardware pour projet futur avec 12 hdd 3 TO raid 6
II - Présentation du problème
J'ai mis en place un Datacenter home made avec deux nas4free
J'ai mis en place 2 ipv carp qui sont opérationnelles les bascules d'une machine a l'autre sont ok (arret système, reboot, arrachage prise, retour à l 'état d'origine)
J'ai mis en place samba sur l'une des ipv coté lan c'est fonctionnel

Ce qui ne fonctionne pas c'est la partie iscsi sur la deuxieme ipv (carp) avec les carte en 9000 de mtu sur les cartes associées à celle ci.

J'ai fait le test avec esxi, et hyper-v.
Seul hyper-v voient l'iscsi de temps en temps
Les esxi ou hyper-v sont les mêmes machines car je n'ai que ces deux machines pour faire mes test.
- config hyper-v je rajouter un disque.
- config esxi je vire le disque et ajouter une clé usb.
III - Possibilité de solution
- Passer sur des cartes iscsi hardware + cables + switch qui va bien.

- savoir si iscsi sur carp est fonctionnel ou pas
- si iscsi + carp faisable revoir la conf iscsi (j'ai du rater quelques chose mais quoi ? et où ? )

Le petit schéma pour la compréhension du montage réseau
datacenter_homemade001.jpg

Merci
You do not have the required permissions to view the files attached to this post.
Last edited by octave on 23 Sep 2016 22:19, edited 3 times in total.
Project
Cluster Pfsense (end)
Cluster ESXI /Hyperv (standby)
Cluster NAS/SAN (in project)
---
2x Dell Poweredge C6100
2x SuperMicro X8dth-i (NAS/SAN Build) ISCSI

User avatar
mtiburs
Forum Moderator
Forum Moderator
Posts: 951
Joined: 09 Aug 2012 23:34
Location: France - Besançon
Status: Offline

Re: Probleme de paramétrage Iscsi avec un cluster nas4free 10.3.0.3

Post by mtiburs »

Salut,

C'est la suite de çà: viewtopic.php?f=35&t=10346 ?
Serveur Intel bi-Xéon P5530 / 8 X Ubuntu Serveur 18.04 LTS - ZFS-BTRFS-bcache / ~30 x PI2b(ARM) sous Nas4Free / et ...(chhhut)... 1 seul Xigmanas :o ... et pas à jour en plus :oops: (çà craint)
Conception d'un "système bizarre" :mrgreen: de "super-devices-autonomes" en NFS gérés par des micro-serveurs SAN(+nas) sous N4F (11 super-devs en raidz3) taille actuelle: 16To / prévue: 64To / théorique: 320To (consommation < 15W en veille - 24/24h) en service depuis 2 ans.

octave
experienced User
experienced User
Posts: 123
Joined: 30 Sep 2013 12:37
Status: Offline

Re: Probleme de paramétrage Iscsi avec un cluster nas4free 10.3.0.3

Post by octave »

salut salut

oui et non c'est une suite sans en etre une ^^

--- sur le plan générale oui
La dernière mise a jour de l'os 10.3 est une merveille, les paramètre hast restent en place meme apres un arrêt prolongé de l'un d'eux, ce qui est une bonne nouvelle pour mon cluster.


--- sur le problème en lui meme non ^^
Je me prend la tete avec l'iscsi depuis un presque trois semaines.
a terme il me faudra trois lun ==> esxi / hyper-v / proxmox


++
Project
Cluster Pfsense (end)
Cluster ESXI /Hyperv (standby)
Cluster NAS/SAN (in project)
---
2x Dell Poweredge C6100
2x SuperMicro X8dth-i (NAS/SAN Build) ISCSI

User avatar
mtiburs
Forum Moderator
Forum Moderator
Posts: 951
Joined: 09 Aug 2012 23:34
Location: France - Besançon
Status: Offline

Re: Probleme de paramétrage Iscsi avec un cluster nas4free 10.3.0.3

Post by mtiburs »

octave wrote:Je me prend la tete avec l'iscsi depuis un presque trois semaines.
C'est quoi qui te chagrinne avec l'iscsi

Des fois en posant le problème simplement, çà va mieux

Moi, je l'utilise beaucoup, mais d'une manière simple (en NAS4Free ou en Linux)
Je trouve juste qu'ajouter un disque iscsi sous NAS4Free n'est pas "clair", sous Linux on le voit bien avec le discovery et ls -l /dev/disk/by-path
Serveur Intel bi-Xéon P5530 / 8 X Ubuntu Serveur 18.04 LTS - ZFS-BTRFS-bcache / ~30 x PI2b(ARM) sous Nas4Free / et ...(chhhut)... 1 seul Xigmanas :o ... et pas à jour en plus :oops: (çà craint)
Conception d'un "système bizarre" :mrgreen: de "super-devices-autonomes" en NFS gérés par des micro-serveurs SAN(+nas) sous N4F (11 super-devs en raidz3) taille actuelle: 16To / prévue: 64To / théorique: 320To (consommation < 15W en veille - 24/24h) en service depuis 2 ans.

octave
experienced User
experienced User
Posts: 123
Joined: 30 Sep 2013 12:37
Status: Offline

Re: Probleme de paramétrage Iscsi avec un cluster nas4free 10.3.0.3

Post by octave »

Salut salut.

En faite je dois, je pense, me mélanger entre les différents termes et procédures pour monter un lun iscsi.
c'est la parti chap / et target

je viens de reprendre le paramétrage de 0 et cela fonctionne, je ne vois pas ou j'ai fais mes erreurs.
Merci en tout cas
Project
Cluster Pfsense (end)
Cluster ESXI /Hyperv (standby)
Cluster NAS/SAN (in project)
---
2x Dell Poweredge C6100
2x SuperMicro X8dth-i (NAS/SAN Build) ISCSI

octave
experienced User
experienced User
Posts: 123
Joined: 30 Sep 2013 12:37
Status: Offline

Re: [résolu] Probleme de paramétrage Iscsi avec un cluster nas4free 10.3.0.3

Post by octave »

bon pour la solution avec iscsi qu'il soit en ha ou pas

ne pas mettre de , et de ; la ou il ne faut pas ;o et bien se relir
Project
Cluster Pfsense (end)
Cluster ESXI /Hyperv (standby)
Cluster NAS/SAN (in project)
---
2x Dell Poweredge C6100
2x SuperMicro X8dth-i (NAS/SAN Build) ISCSI

octave
experienced User
experienced User
Posts: 123
Joined: 30 Sep 2013 12:37
Status: Offline

Re: [RE OUVERT] Probleme de paramétrage Iscsi avec un cluster nas4free 10.3.0.3

Post by octave »

Salut salut

Je ré-ouvre le fil, car j'ai un soucis de plus qui c'est greffe sur mon cluster.

Si le node A est master ==> iscsi sur carp et sur l'ip node A ==> ok mais pas sur ip node B
Si le node B est master ==> iscsi sur carp et sur l'ip node B ==> ok mais pas sur ip node A

Que se soit en sous Windows ou Esxi, je suis un peut dans l'impasse là.

- récapitulatif
--- node A avec 4 cartes (lan, lan-admin, iscsi, synchro nas/nas)
--- node A avec 4 cartes (lan, lan-admin, iscsi, synchro nas/nas)
--- 2 ipv lan(samba) ipv lan(iscsi)

J'ai découvert que même avec samba ou iscsi j'ai le problème, comme si la bascule de services ne se faisait pas totalement.
Au ping la bascule entre node A ou B se fait dans la seconde.

Je seche, si quelqu'un a une idée, je suis preneur.
++
Project
Cluster Pfsense (end)
Cluster ESXI /Hyperv (standby)
Cluster NAS/SAN (in project)
---
2x Dell Poweredge C6100
2x SuperMicro X8dth-i (NAS/SAN Build) ISCSI

sleid
PowerUser
PowerUser
Posts: 774
Joined: 23 Jun 2012 07:36
Location: FRANCE LIMOUSIN CORREZE
Status: Offline

Re: [RE OUVERT] Probleme de paramétrage Iscsi avec un cluster nas4free 10.3.0.3

Post by sleid »

__
Last edited by sleid on 22 Sep 2016 21:53, edited 1 time in total.
12.1.0.4 - Ingva (revision 7852)
FreeBSD 12.1-RELEASE-p12 #0 r368465M: Tue Dec 8 23:25:11 CET 2020
X64-embedded sur Intel(R) Atom(TM) CPU C2750 @ 2.40GHz Boot UEFI
ASRock C2750D4I 2 X 8GB DDR3 ECC
Pool of 2 vdev Raidz1: 3 WDC WD40EFRX + 3 WDC WD40EFRX

octave
experienced User
experienced User
Posts: 123
Joined: 30 Sep 2013 12:37
Status: Offline

Re: [RE OUVERT] Probleme de paramétrage Iscsi avec un cluster nas4free 10.3.0.3

Post by octave »

salut salut

Je n’attribue jamais d'ip en dynamique que un serveur quel qu’il soit.
Sur toutes mes cartes il y a une ip fixe, seul mes machines clientes (pc/portable/tablette/gsm) passent par une ip dynamique.

Mon soucis est la bascule de node qui est lente je trouve, je n'avais pas ce soucis sous debian 6 mais depuis le paquet qui me permettait la gestion de l'ipv n'est plus maintenu voir passé à la trappe.

J'ai bien compris que hast comme drbd tournent en mode actif/passif (voir actif/actif avec drbd, mais pas utile pour moi dans ce cas).
Je n'ai pas trouvé un paramètre pour diminuer le temps de bascule d'état entre le maitre et l'esclave car en l'état actuel, mes vm tombent du fait de la perte du leurs supports iscsi délogués et ou non basculés à temps. Et je ne peux pas me le permettre dans une configuration de haute dispo, bien que cela soit un labo maison, il a pour vocation de passer en mode production réelle h24/j7
Project
Cluster Pfsense (end)
Cluster ESXI /Hyperv (standby)
Cluster NAS/SAN (in project)
---
2x Dell Poweredge C6100
2x SuperMicro X8dth-i (NAS/SAN Build) ISCSI

sleid
PowerUser
PowerUser
Posts: 774
Joined: 23 Jun 2012 07:36
Location: FRANCE LIMOUSIN CORREZE
Status: Offline

Re: [RE OUVERT] Probleme de paramétrage Iscsi avec un cluster nas4free 10.3.0.3

Post by sleid »

__
Last edited by sleid on 22 Sep 2016 21:54, edited 1 time in total.
12.1.0.4 - Ingva (revision 7852)
FreeBSD 12.1-RELEASE-p12 #0 r368465M: Tue Dec 8 23:25:11 CET 2020
X64-embedded sur Intel(R) Atom(TM) CPU C2750 @ 2.40GHz Boot UEFI
ASRock C2750D4I 2 X 8GB DDR3 ECC
Pool of 2 vdev Raidz1: 3 WDC WD40EFRX + 3 WDC WD40EFRX

octave
experienced User
experienced User
Posts: 123
Joined: 30 Sep 2013 12:37
Status: Offline

Re: [RE OUVERT] Probleme de paramétrage Iscsi avec un cluster nas4free 10.3.0.3

Post by octave »

salut salut

C'est bien ca mon probleme
Pourrais tu mettre les paramètres icsi / hast / carp ?
Je suis sur que j'ai un truc que j'ai raté ou mal fait.
ha oui les carte qui sont dévolus au iscis sont en mtu 9000 chacune avec le carp d'actif et le switch est prévu/paramétré pour enquillé la mtu 9000
Project
Cluster Pfsense (end)
Cluster ESXI /Hyperv (standby)
Cluster NAS/SAN (in project)
---
2x Dell Poweredge C6100
2x SuperMicro X8dth-i (NAS/SAN Build) ISCSI

sleid
PowerUser
PowerUser
Posts: 774
Joined: 23 Jun 2012 07:36
Location: FRANCE LIMOUSIN CORREZE
Status: Offline

Re: [RE OUVERT] Probleme de paramétrage Iscsi avec un cluster nas4free 10.3.0.3

Post by sleid »

__
Last edited by sleid on 22 Sep 2016 21:54, edited 1 time in total.
12.1.0.4 - Ingva (revision 7852)
FreeBSD 12.1-RELEASE-p12 #0 r368465M: Tue Dec 8 23:25:11 CET 2020
X64-embedded sur Intel(R) Atom(TM) CPU C2750 @ 2.40GHz Boot UEFI
ASRock C2750D4I 2 X 8GB DDR3 ECC
Pool of 2 vdev Raidz1: 3 WDC WD40EFRX + 3 WDC WD40EFRX

octave
experienced User
experienced User
Posts: 123
Joined: 30 Sep 2013 12:37
Status: Offline

Re: [RE OUVERT] Probleme de paramétrage Iscsi avec un cluster nas4free 10.3.0.3

Post by octave »

salut salut

c'est ce qui me fait un peur en effet mais avec le jumbo qui est d'office actif sur mes switch ca passe j'ai bien acces a mes partage iscsi qui node 1 ou node 2 est l'un ou lautre en maitre (logique hast) mais c'est le changement de node qui merde.
Il est trop lent pour faire la bascule.
Project
Cluster Pfsense (end)
Cluster ESXI /Hyperv (standby)
Cluster NAS/SAN (in project)
---
2x Dell Poweredge C6100
2x SuperMicro X8dth-i (NAS/SAN Build) ISCSI

sleid
PowerUser
PowerUser
Posts: 774
Joined: 23 Jun 2012 07:36
Location: FRANCE LIMOUSIN CORREZE
Status: Offline

Re: [RE OUVERT] Probleme de paramétrage Iscsi avec un cluster nas4free 10.3.0.3

Post by sleid »

__
Last edited by sleid on 22 Sep 2016 21:55, edited 1 time in total.
12.1.0.4 - Ingva (revision 7852)
FreeBSD 12.1-RELEASE-p12 #0 r368465M: Tue Dec 8 23:25:11 CET 2020
X64-embedded sur Intel(R) Atom(TM) CPU C2750 @ 2.40GHz Boot UEFI
ASRock C2750D4I 2 X 8GB DDR3 ECC
Pool of 2 vdev Raidz1: 3 WDC WD40EFRX + 3 WDC WD40EFRX

octave
experienced User
experienced User
Posts: 123
Joined: 30 Sep 2013 12:37
Status: Offline

Re: [RE OUVERT] Probleme de paramétrage Iscsi avec un cluster nas4free 10.3.0.3

Post by octave »

Salut salut.

Je n'utilise pas de zfs car je suis sur du raid hardware.

++
Project
Cluster Pfsense (end)
Cluster ESXI /Hyperv (standby)
Cluster NAS/SAN (in project)
---
2x Dell Poweredge C6100
2x SuperMicro X8dth-i (NAS/SAN Build) ISCSI

sleid
PowerUser
PowerUser
Posts: 774
Joined: 23 Jun 2012 07:36
Location: FRANCE LIMOUSIN CORREZE
Status: Offline

Re: [RE OUVERT] Probleme de paramétrage Iscsi avec un cluster nas4free 10.3.0.3

Post by sleid »

__
Last edited by sleid on 22 Sep 2016 21:55, edited 1 time in total.
12.1.0.4 - Ingva (revision 7852)
FreeBSD 12.1-RELEASE-p12 #0 r368465M: Tue Dec 8 23:25:11 CET 2020
X64-embedded sur Intel(R) Atom(TM) CPU C2750 @ 2.40GHz Boot UEFI
ASRock C2750D4I 2 X 8GB DDR3 ECC
Pool of 2 vdev Raidz1: 3 WDC WD40EFRX + 3 WDC WD40EFRX

sleid
PowerUser
PowerUser
Posts: 774
Joined: 23 Jun 2012 07:36
Location: FRANCE LIMOUSIN CORREZE
Status: Offline

Re: [RE OUVERT] Probleme de paramétrage Iscsi avec un cluster nas4free 10.3.0.3

Post by sleid »

__
Last edited by sleid on 22 Sep 2016 21:55, edited 1 time in total.
12.1.0.4 - Ingva (revision 7852)
FreeBSD 12.1-RELEASE-p12 #0 r368465M: Tue Dec 8 23:25:11 CET 2020
X64-embedded sur Intel(R) Atom(TM) CPU C2750 @ 2.40GHz Boot UEFI
ASRock C2750D4I 2 X 8GB DDR3 ECC
Pool of 2 vdev Raidz1: 3 WDC WD40EFRX + 3 WDC WD40EFRX

octave
experienced User
experienced User
Posts: 123
Joined: 30 Sep 2013 12:37
Status: Offline

Re: [RE OUVERT] Probleme de paramétrage Iscsi avec un cluster nas4free 10.3.0.3

Post by octave »

Salut salut

Je pense que vous ne m'avez pas bien compris.
Cela ne vient pas de HAST est fonctionnel , que cela soit avec :
- ZFS soft raid.
- Raid hardware.
- de simple disque non raid.
==================> fonctionnel.

Mon soucis est sur le délais de bascule des services d'un node à l'autre.
Et arrêtez de me les briser avec ZFS s il vous plait, point barre.

Donc y a t il une solution pour diminuer la bascule d'un node a l'autre pour les services. Merci
Project
Cluster Pfsense (end)
Cluster ESXI /Hyperv (standby)
Cluster NAS/SAN (in project)
---
2x Dell Poweredge C6100
2x SuperMicro X8dth-i (NAS/SAN Build) ISCSI

octave
experienced User
experienced User
Posts: 123
Joined: 30 Sep 2013 12:37
Status: Offline

Re: [RE OUVERT] Probleme de paramétrage Iscsi avec un cluster nas4free 10.3.0.3

Post by octave »

salut salut.

Bon j'ai repris a la mains tous les fichiers de paramétrage des éléments
rc.conf ==> les mtu des cartes réseaux et carp
istgt ==> les param de groupe iscsi et des lun

La je recherche comment jouer sur les temps de bascule entre les node, je suis persuadé que c'est par la que cela doit se jouer.
Project
Cluster Pfsense (end)
Cluster ESXI /Hyperv (standby)
Cluster NAS/SAN (in project)
---
2x Dell Poweredge C6100
2x SuperMicro X8dth-i (NAS/SAN Build) ISCSI

octave
experienced User
experienced User
Posts: 123
Joined: 30 Sep 2013 12:37
Status: Offline

Re: Probleme de paramétrage Iscsi avec un cluster nas4free 10.3.0.3

Post by octave »

Salut salut

Bon à première vue en reprenant un par un les étapes de l'installation et le paramétrage du cluster ainsi que par précaution un changement des cables.

Cela à l'air de tenir et bien basculer avec un légère latence tout de meme. cela est mieux que les 20s que j'avais et qui me pétait mes serveurs de virtualisation.
Project
Cluster Pfsense (end)
Cluster ESXI /Hyperv (standby)
Cluster NAS/SAN (in project)
---
2x Dell Poweredge C6100
2x SuperMicro X8dth-i (NAS/SAN Build) ISCSI

Post Reply

Return to “Français”