Ces technologies g\u00e9n\u00e8rent d’\u00e9normes volumes de donn\u00e9es, que les chercheurs collectent et analysent quotidiennement \u00e0 l’aide d’outils sophistiqu\u00e9s, comme l’analyse d’images et la simulation m\u00e9canique. Pour traiter les donn\u00e9es, ils devaient jusqu\u2019\u00e0 pr\u00e9sent les d\u00e9placer \u00e0 partir de plusieurs syst\u00e8mes de stockage, ce qui nuisait \u00e0 la productivit\u00e9 et entra\u00eenait souvent des duplications inutiles. Par ailleurs, la gestion et la maintenance de multiples syst\u00e8mes de stockage s\u2019av\u00e9raient \u00e9galement fastidieuses pour le service informatique.
\nPour accueillir de nouveaux outils tels que la tomographie et la corr\u00e9lation d’images 3D, le Centre avait besoin d’une solution de stockage unifi\u00e9e, capable de fournir d’excellentes performances, tout en permettant une croissance continue du volume de donn\u00e9es. L\u2019autre priorit\u00e9 \u00e9tait d’offrir une exp\u00e9rience utilisateur positive \u00e0 tous – y compris aux 70 chercheurs utilisateurs de calcul haute performance (HPC) et aux 130 utilisateurs d\u2019applications de partage de fichiers du syst\u00e8me.<\/p>\n
La suppression des goulets d’\u00e9tranglement au niveau HPC<\/u>
\n\u00ab Aujourd\u2019hui gr\u00e2ce \u00e0 l\u2019ActiveStor de Panasas, les chercheurs gagnent du temps puisqu’ils n’ont plus \u00e0 d\u00e9placer ni \u00e0 copier les fichiers de donn\u00e9es avant de pouvoir les traiter. Ils gagnent en productivit\u00e9 puisqu’il n’y a plus de goulets d’\u00e9tranglement au niveau HPC pour acc\u00e9der au syst\u00e8me de stockage. La bande passante est quatre \u00e0 cinq fois plus \u00e9lev\u00e9e qu’auparavant. Et le partage de fichiers est plus pratique, gr\u00e2ce \u00e0 des temps de r\u00e9ponse plus courts et \u00e0 un d\u00e9bit plus \u00e9lev\u00e9. \u00bb explique Gregory Sainte-Luce, Responsable Informatique du Centre de recherche sur les mat\u00e9riaux et membre de la Direction Informatique de MINES ParisTech.<\/p>\n
Une technologie de stockage r\u00e9active et \u00e9chelonnable<\/u>
\nMINES ParisTech a \u00e9valu\u00e9 plusieurs solutions de stockage de fichiers parall\u00e8les et de stockage d\u2019objets avant de choisir l\u2019ActiveStor de Panasas, un \u00e9quipement HPC plug-and-play sur lequel tourne le syst\u00e8me de fichiers parall\u00e8le PanFS. \u00ab Nous avons choisi ActiveStor pour sa combinaison unique de haute performance, d’\u00e9chelonnabilit\u00e9 et de simplicit\u00e9 d’administration, \u00bb explique Gregory Sainte-Luce, Responsable Informatique du Centre de recherche sur les mat\u00e9riaux et membre du conseil d’administration informatique de MINES ParisTech.
\nBas\u00e9 sur une technologie de stockage r\u00e9active et \u00e9chelonnable, install\u00e9 au Centre de recherche des mat\u00e9riaux, le syst\u00e8me ActiveStor fonctionne 24 heures sur 24 et 7 jours sur 7, et offre aux utilisateurs un acc\u00e8s parall\u00e8le r\u00e9actif au stockage, avec des performances \u00e9lev\u00e9es et constantes, m\u00eame en cas de charges de travail lourdes, simultan\u00e9es et mixtes.
\nLes t\u00e2ches HPC du Centre varient de quelques heures \u00e0 plusieurs jours, 24 heures sur 24. La t\u00e2che HPC la plus gourmande en ressources est l’analyse de donn\u00e9es de tomographie, qui peut durer plusieurs jours. L’ex\u00e9cution d’une seule t\u00e2che de tomographie peut mobiliser de 10 \u00e0 100 Go de stockage, et le Centre en ex\u00e9cute des centaines dans le cadre de ses exp\u00e9riences. Les simulations par \u00e9l\u00e9ments finis \u00e0 grande \u00e9chelle du comportement des mat\u00e9riaux n\u00e9cessitent jusqu’\u00e0 1 t\u00e9raoctet (To) de stockage par simulation. Le Centre doit s’assurer que les chercheurs ont un acc\u00e8s rapide aux donn\u00e9es.
\nLa solution Panasas a satisfait et d\u00e9pass\u00e9 les attentes des utilisateurs et du service informatique. \u00ab Les chercheurs gagnent du temps puisqu’ils n’ont plus \u00e0 d\u00e9placer ni \u00e0 copier les fichiers de donn\u00e9es avant de pouvoir les traiter. \u00bb selon M. Sainte-Luce. \u00ab Ils gagnent en productivit\u00e9 puisqu’il n’y a plus de goulets d’\u00e9tranglement au niveau HPC pour acc\u00e9der au syst\u00e8me de stockage. La bande passante est quatre \u00e0 cinq fois plus \u00e9lev\u00e9e qu’auparavant. Et le partage de fichiers offre plus de confort, gr\u00e2ce \u00e0 des temps de r\u00e9ponse plus courts et \u00e0 un d\u00e9bit plus \u00e9lev\u00e9. \u00bb
\nGr\u00e2ce aux performances \u00e9lev\u00e9es et constantes d’ActiveStor, les utilisateurs ont d\u00e9sormais un acc\u00e8s rapide et simultan\u00e9 au stockage, m\u00eame en cas de charges de travail sont mixtes ou lorsque le taux d’utilisation est tr\u00e8s \u00e9lev\u00e9.<\/p>\n
1 To de donn\u00e9es pour chaque jour de l’exp\u00e9rience<\/u>
\nLe Centre m\u00e8ne des \u00e9tudes statistiques 4D, qui \u00e9valuent les contraintes m\u00e9caniques qui se produisent au cours du temps. Le processus d’essai 4D g\u00e9n\u00e8re automatiquement un jumeau num\u00e9rique de l’\u00e9chantillon de mat\u00e9riau, ce qui permet aux analystes de simuler les performances et de valider les mod\u00e8les de comportement utilis\u00e9s par leurs partenaires industriels.<\/p>\n
\u00ab L’analyse d’essais 4D faisant appel \u00e0 de tr\u00e8s gros volumes de donn\u00e9es peut prendre plusieurs mois, voire un an, \u00bb explique Henry Proudhon, chercheur au Centre. \u00ab Nous traitons en g\u00e9n\u00e9ral 1 To de donn\u00e9es pour chaque jour de l’exp\u00e9rience, avec 15 \u00e0 20 jours d’exp\u00e9riences par an. Une \u00e9tude moyenne peut n\u00e9cessiter une centaine de t\u00e2ches HPC qui durent en moyenne six heures par jour. \u00bb
\nEn tant qu’utilisateur, M. Proudhon appr\u00e9cie la fa\u00e7on dont ActiveStor am\u00e9liore la disponibilit\u00e9 des donn\u00e9es HPC, et acc\u00e9l\u00e8re ainsi l\u2019obtention des r\u00e9sultats. \u00ab Panasas permet de traiter de gros volumes que l’on peut augmenter ou r\u00e9duire rapidement, en fonction des besoins, \u00bb explique M. Sainte-Luce. \u00ab Nous fonctionnons actuellement \u00e0 80% de notre capacit\u00e9 de stockage et notre niveau de charge est de 17 \u00e0 20%, selon l\u2019outil de suivi de Panasas. L’acc\u00e8s aux donn\u00e9es est cinq fois plus rapide pour le stockage HPC, et nous avons m\u00eame constat\u00e9 une am\u00e9lioration des performances et du confort pour les autres utilisateurs qui n\u2019utilisent pas de HPC. Nous n’avons pratiquement plus de donn\u00e9es dupliqu\u00e9es. ActiveStor g\u00e8re toute la charge de travail du laboratoire de recherche sans rencontrer le moindre probl\u00e8me de performance. \u00bb
\nDe plus, la centralisation des serveurs et des matrices de stockage au sein d\u2019une m\u00eame solution convergente a permis au Centre de r\u00e9duire les besoins des utilisateurs en mati\u00e8re de transfert de donn\u00e9es entre des dispositifs de stockage distincts.
\nLa gestion simplifi\u00e9e d\u2019ActiveStor a consid\u00e9rablement r\u00e9duit les besoins du Centre en mati\u00e8re de gestion du stockage. La simplicit\u00e9 de gestion de la solution a permis d’\u00e9liminer de gros efforts d’ing\u00e9nierie, tout en r\u00e9duisant le temps d\u2019administration global. L’agr\u00e9gation automatique des ressources de stockage lib\u00e8re les administrateurs de la n\u00e9cessit\u00e9 de configurer des r\u00e8gles hi\u00e9rarchiques complexes de gestion du stockage.
\nL’interface graphique intuitive \u00e0 base web permet \u00e0 un administrateur unique de g\u00e9rer et de maintenir les quotas et les volumes en consacrant \u00e0 cette t\u00e2che seulement une quarantaine d\u2019heures par an. ActiveStor envoie automatiquement des avertissements de quota aux administrateurs par e-mail, ce qui leur permet d’ajuster rapidement et dynamiquement l’espace disque en fonction des besoins, sans aucune interruption de service.
\n\u00ab L’ajout d’un nouveau rack est un processus sans risque et compl\u00e8tement transparent, qui prend moins d’une heure, \u00bb explique M. Sainte-Luce. \u00ab ActiveStor r\u00e9\u00e9quilibre automatiquement les donn\u00e9es stock\u00e9es entre tous les serveurs de stockage du nouveau syst\u00e8me, sans aucune d\u00e9gradation des performances. La distribution plus \u00e9quilibr\u00e9e des donn\u00e9es a consid\u00e9rablement am\u00e9lior\u00e9 les performances de notre syst\u00e8me. \u00bb<\/p>\n
Un stockage plus fiable et moins co\u00fbteux<\/u>
\nDepuis le d\u00e9ploiement d’ActiveStor, les utilisateurs n’ont connu aucun arr\u00eat syst\u00e8me. Plusieurs serveurs de gestion de m\u00e9tadonn\u00e9es et de syst\u00e8mes de fichiers assurent la redondance, ce qui augmente la disponibilit\u00e9 et la r\u00e9silience.
\n\u00ab Les administrateurs passent moins de temps \u00e0 g\u00e9rer le stockage, ce qui leur permet de se concentrer sur d’autres activit\u00e9s, \u00bb explique M. Sainte-Luce. \u00ab Dans l’ensemble, le fonctionnement sans faille d’ActiveStor nous a permis de r\u00e9duire nos co\u00fbts de gestion du stockage. \u00bb<\/p>\n
Flexibilit\u00e9 pour soutenir la croissance<\/u>
\nActiveStor offre \u00e0 MINES ParisTech l’\u00e9chelonnabilit\u00e9 n\u00e9cessaire pour r\u00e9pondre \u00e0 ses besoins de stockage pr\u00e9sents et \u00e0 venir. Panasas g\u00e8re la charge de travail actuelle de l’ensemble du groupe de recherche, et peut facilement s’adapter \u00e0 l’\u00e9volution des besoins, en augmentant ou en r\u00e9duisant les quotas des volumes physiques ou logiques.
\n\u00ab L’\u00e9chelonnabilit\u00e9 est l’un des principaux avantages de la solution Panasas, \u00bb d\u00e9clare M. Sainte-Luce. \u00ab C’est une technologie que l’on peut \u00e9chelonner pratiquement sans effort pour r\u00e9pondre \u00e0 la demande. \u00bb
\nActiveStor permet \u00e9galement aux chercheurs d\u2019accomplir davantage. \u00ab Lorsque les chercheurs peuvent acc\u00e9der plus rapidement \u00e0 leurs donn\u00e9es scientifiques, atteindre un d\u00e9bit de travail plus \u00e9lev\u00e9 et effectuer davantage de calculs, ils peuvent accomplir davantage de t\u00e2ches, \u00bb explique M. Sainte-Luce. \u00ab Leur productivit\u00e9 nous permet de vendre plus de contrats \u00e0 nos partenaires et de d\u00e9velopper notre activit\u00e9. Nous sommes particuli\u00e8rement ravis d’avoir Panasas comme partenaire. \u00bb<\/p>\n