[technique] Question connectique et cartes controleur SFF 8087 / 8643 MiniSAS pour Linux ?

[Bertrand]

Salut Laurent, Alex,

En fait la mode moderne c'est d'aller directement de la carte vers le
backplane en mini-sas le mode "cheap" mini-sas => sata pose souvent des
soucis de fiabilité.
Mais ça marche quand même... c'est juste un petit retour d'expérience là
dessus sur des câbles qui finissent par "fuir" :)

Concernant les cartes raid, l'idéal est d'en trouver une qui sache faire du
JBOD/passthrough sans avoir à reflasher le firmware, spoiler alert : ça
n'existe quasiment pas.

Je sais que Ceph est plus apte à gérer les différences de performances
entre les disques que ZFS mais de ce que je connais (ZFS) c'est beaucoup
mieux d'avoir tout d'un seul tenant.
Ceci pour avoir des performances d'accès aux disques uniformes.

Si j'ai bien suivi le boîter et ses 16 disques, moi je partirai sur un truc
comme ça :
https://www.amazon.fr/LSI-MegaRaid-9240-4i-4-Port-LSI00199/dp/B0036RH6L0

Certains donne la méthodo pour pouvoir reflasher la carte :
https://serverfault.com/questions/851738/disable-hardware-raid-controller

Après dans un cadre d'utilisation "backup" ne pas avoir de cache sur un SSD
ne pose pas de problème.
Pour un "filer" qui accueille des données qui bougent pas mal (genre des
VM) vivre sans ça rend quand mêmes les VM beaucoup moins réactivent....
Mais de mémoire le setup de ceph est composite avec certaines machines
"full flash" et c'est ceph qui gère ensuite les données qui bougent
beaucoup surtout de ce côté là j'imagine (?)

Voilà pour mon petit retour.

Librement,

Bertrand




Le jeu. 28 janv. 2021 à 22:38, Alexandre GUY via technique <
technique at lists.tetaneutral.net> a écrit :

>
> > Le 28 janv. 2021 à 19:41, Laurent GUERBY via technique <
> technique at lists.tetaneutral.net> a écrit :
> >
> > Bonsoir,
>
> Salut Laurent,
>
> >
> > Le boitier 3U que nous avons testé "Inter-Tech 3U-3416" :
> >
> >
> https://lists.tetaneutral.net/pipermail/technique/2020-December/004148.html
>
> Tout à fait d’accord
>
> Perso je ne suis (toujours) pas fan de AMD, je préfère le diable INTEL
>
> Mais peu importe, migrer sur un nouveau cluster racké plus facilement
> administrable, c’est ce qu’il faut faire.
>
> >
> > https://www.inter-tech.de/en/products/ipc/storage-cases/3u-3416
> >
> > Dispose de 4 connecteurs SFF-8087 pour connecter son backplane hotswap
> > et pour notre test nous avons pris les cables 8087 vers 4xSATA
> > recommandés par le constructeur :
> >
> > https://www.inter-tech.de/en/products/cable/data-cable/cable-88885237
> >
> > Ce qui nous a permis de cabler 8 baies de disque vers les 8 ports SATA
> > de la carte mère.
>
> Au passage il y a toujours le DELL R720 (16 emplacements 2,5’’) inutilisé.
>
> Ca me dirait bien de faire des tests de dé-duplication + compression ZFS
> dessus.
>
> Manque que les disques …
>
> >
> > Pour exploiter les 8 autres baies disque du boitier il nous faut
> > choisir une carte controleur PCIE.
> >
> > En cherchant je trouve des cartes qui ont l'air anciennes (PCIE 2) et
> > qui ont un ou deux ports SFF 8087, et des cartes plus recentes (PCIE 3)
> > avec des connecteurs SFF-8643.
> >
> > On trouve des cables SFF-8643 vers SFF-8087, par exemple :
> >
> > https://www.inter-tech.de/en/products/cable/data-cable/cable-88885005
> > "Cable SFF-8643 to SFF-8087"
> >
> > Est-ce que vous avez des retours et recommandations sur ces
> > connectiques et cartes controleur dans un environnement Linux et JBOD
> > car pas de RAID dans notre setup ceph ?
> >
> > Les prix des cartes vont de 30 a vers 200 EUR mais je me demande ce qui
> > marche sans trop de soucis sous les linux standard debian/ubuntu que
> > nous utilisons.
> >
> > Merci pour vos retours !
>
> Il y a plus de 10 ans, j’ai fait plusieurs fois du hot-swap sur des
> disques et des contrôleurs S-ATA grand public (pas vendu pour du hot-swap),
> tu changes le disque, tu envoies la commande magique au noyau pour lui dire
> de re-scanner le bus s-ata, et hop, ça juste marche :)
>
> Mais bon, je ne recommande pas ça pour le cluster TTNN, il vaut mieux
> investir sur du vrai hot-swap.
>
> Du coup, il faut prendre des disques SAS ou on part sur du classique grand
> public ?
>
> >
> > Laurent
>
> C’est quand le prochain Jitsi’Qjelt ?
>
> Alex.
>
> > _______________________________________________
> > technique mailing list
> > technique at lists.tetaneutral.net
> > http://lists.tetaneutral.net/listinfo/technique
> _______________________________________________
> technique mailing list
> technique at lists.tetaneutral.net
> http://lists.tetaneutral.net/listinfo/technique
>
-------------- section suivante --------------
Une pièce jointe HTML a été nettoyée...
URL: <http://lists.tetaneutral.net/pipermail/technique/attachments/20210130/632f0af1/attachment.htm>