<div dir="ltr">Salut Laurent, Alex,<div><br></div><div>En fait la mode moderne c'est d'aller directement de la carte vers le backplane en mini-sas le mode "cheap" mini-sas => sata pose souvent des soucis de fiabilité.</div><div>Mais ça marche quand même... c'est juste un petit retour d'expérience là dessus sur des câbles qui finissent par "fuir" :)</div><div><br></div><div>Concernant les cartes raid, l'idéal est d'en trouver une qui sache faire du JBOD/passthrough sans avoir à reflasher le firmware, spoiler alert : ça n'existe quasiment pas.</div><div><br></div><div>Je sais que Ceph est plus apte à gérer les différences de performances entre les disques que ZFS mais de ce que je connais (ZFS) c'est beaucoup mieux d'avoir tout d'un seul tenant.</div><div>Ceci pour avoir des performances d'accès aux disques uniformes. </div><div><br></div><div>Si j'ai bien suivi le boîter et ses 16 disques, moi je partirai sur un truc comme ça :</div><div><a href="https://www.amazon.fr/LSI-MegaRaid-9240-4i-4-Port-LSI00199/dp/B0036RH6L0">https://www.amazon.fr/LSI-MegaRaid-9240-4i-4-Port-LSI00199/dp/B0036RH6L0</a><br></div><div><br></div><div>Certains donne la méthodo pour pouvoir reflasher la carte :</div><div><a href="https://serverfault.com/questions/851738/disable-hardware-raid-controller">https://serverfault.com/questions/851738/disable-hardware-raid-controller</a><br></div><div><br></div><div>Après dans un cadre d'utilisation "backup" ne pas avoir de cache sur un SSD ne pose pas de problème. </div><div>Pour un "filer" qui accueille des données qui bougent pas mal (genre des VM) vivre sans ça rend quand mêmes les VM beaucoup moins réactivent....</div><div>Mais de mémoire le setup de ceph est composite avec certaines machines "full flash" et c'est ceph qui gère ensuite les données qui bougent beaucoup surtout de ce côté là j'imagine (?)</div><div><br></div><div>Voilà pour mon petit retour.</div><div><br></div><div>Librement,</div><div><br></div><div>Bertrand</div><div><br></div><div><br></div><div><br></div></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">Le jeu. 28 janv. 2021 à 22:38, Alexandre GUY via technique <<a href="mailto:technique@lists.tetaneutral.net">technique@lists.tetaneutral.net</a>> a écrit :<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><br>
> Le 28 janv. 2021 à 19:41, Laurent GUERBY via technique <<a href="mailto:technique@lists.tetaneutral.net" target="_blank">technique@lists.tetaneutral.net</a>> a écrit :<br>
> <br>
> Bonsoir,<br>
<br>
Salut Laurent,<br>
<br>
> <br>
> Le boitier 3U que nous avons testé "Inter-Tech 3U-3416" :<br>
> <br>
> <a href="https://lists.tetaneutral.net/pipermail/technique/2020-December/004148.html" rel="noreferrer" target="_blank">https://lists.tetaneutral.net/pipermail/technique/2020-December/004148.html</a><br>
<br>
Tout à fait d’accord<br>
<br>
Perso je ne suis (toujours) pas fan de AMD, je préfère le diable INTEL<br>
<br>
Mais peu importe, migrer sur un nouveau cluster racké plus facilement administrable, c’est ce qu’il faut faire.<br>
<br>
> <br>
> <a href="https://www.inter-tech.de/en/products/ipc/storage-cases/3u-3416" rel="noreferrer" target="_blank">https://www.inter-tech.de/en/products/ipc/storage-cases/3u-3416</a><br>
> <br>
> Dispose de 4 connecteurs SFF-8087 pour connecter son backplane hotswap<br>
> et pour notre test nous avons pris les cables 8087 vers 4xSATA<br>
> recommandés par le constructeur :<br>
> <br>
> <a href="https://www.inter-tech.de/en/products/cable/data-cable/cable-88885237" rel="noreferrer" target="_blank">https://www.inter-tech.de/en/products/cable/data-cable/cable-88885237</a><br>
> <br>
> Ce qui nous a permis de cabler 8 baies de disque vers les 8 ports SATA<br>
> de la carte mère.<br>
<br>
Au passage il y a toujours le DELL R720 (16 emplacements 2,5’’) inutilisé.<br>
<br>
Ca me dirait bien de faire des tests de dé-duplication + compression ZFS dessus. <br>
<br>
Manque que les disques …<br>
<br>
> <br>
> Pour exploiter les 8 autres baies disque du boitier il nous faut<br>
> choisir une carte controleur PCIE. <br>
> <br>
> En cherchant je trouve des cartes qui ont l'air anciennes (PCIE 2) et<br>
> qui ont un ou deux ports SFF 8087, et des cartes plus recentes (PCIE 3)<br>
> avec des connecteurs SFF-8643.<br>
> <br>
> On trouve des cables SFF-8643 vers SFF-8087, par exemple :<br>
> <br>
> <a href="https://www.inter-tech.de/en/products/cable/data-cable/cable-88885005" rel="noreferrer" target="_blank">https://www.inter-tech.de/en/products/cable/data-cable/cable-88885005</a><br>
> "Cable SFF-8643 to SFF-8087"<br>
> <br>
> Est-ce que vous avez des retours et recommandations sur ces<br>
> connectiques et cartes controleur dans un environnement Linux et JBOD<br>
> car pas de RAID dans notre setup ceph ?<br>
> <br>
> Les prix des cartes vont de 30 a vers 200 EUR mais je me demande ce qui<br>
> marche sans trop de soucis sous les linux standard debian/ubuntu que<br>
> nous utilisons.<br>
> <br>
> Merci pour vos retours !<br>
<br>
Il y a plus de 10 ans, j’ai fait plusieurs fois du hot-swap sur des disques et des contrôleurs S-ATA grand public (pas vendu pour du hot-swap), tu changes le disque, tu envoies la commande magique au noyau pour lui dire de re-scanner le bus s-ata, et hop, ça juste marche :)<br>
<br>
Mais bon, je ne recommande pas ça pour le cluster TTNN, il vaut mieux investir sur du vrai hot-swap.<br>
<br>
Du coup, il faut prendre des disques SAS ou on part sur du classique grand public ?<br>
<br>
> <br>
> Laurent<br>
<br>
C’est quand le prochain Jitsi’Qjelt ?<br>
<br>
Alex.<br>
<br>
> _______________________________________________<br>
> technique mailing list<br>
> <a href="mailto:technique@lists.tetaneutral.net" target="_blank">technique@lists.tetaneutral.net</a><br>
> <a href="http://lists.tetaneutral.net/listinfo/technique" rel="noreferrer" target="_blank">http://lists.tetaneutral.net/listinfo/technique</a><br>
_______________________________________________<br>
technique mailing list<br>
<a href="mailto:technique@lists.tetaneutral.net" target="_blank">technique@lists.tetaneutral.net</a><br>
<a href="http://lists.tetaneutral.net/listinfo/technique" rel="noreferrer" target="_blank">http://lists.tetaneutral.net/listinfo/technique</a><br>
</blockquote></div>