FlashBlade + LandingAI de Pure Storage : Accélérer l’intelligence visuelle

Ce blog sur la puissance de FlashBlade et LandingLens de LandingAI a été co-écrit avec Steve Ackley de LandingAI.

Soyons réels : L’AI visuelle n’est plus seulement une aire de jeu en R&D. C’est ainsi que les usines détectent les défauts avant qu’ils ne coûtent des millions, que les assureurs accélèrent les réclamations et que les sociétés de biotechnologie repoussent les limites de la découverte. Les modèles ? Ils sont prêts. GPU ? Beaucoup de puissance. Mais voici le piège : La plupart des projets se heurtent à un mur, car le stockage ne peut pas suivre le rythme.

Voici la réalité :

• Les derniers systèmes DGX ou HGX peuvent atteindre 1-5TB/s pour l’entraînement, et l’inférence en temps réel peut aller de 500GB/s à 1TB/s.
• Pour faire évoluer un cluster de processeurs graphiques, il faut que le système NAS évolue de manière linéaire en termes de performances pour que ces clusters restent occupés.
• Les équipes finissent par copier les mêmes images à maintes reprises pour exécuter des expériences.
• Les configurations hybrides, où certaines données se trouvent dans le cloud, d’autres sur site, créent des problèmes de sécurité et d’exploitation.

C’est là que cette configuration Pure Storage + LandingAI entre en jeu. LandingAI simplifie le processus de création et de déploiement de modèles (via LandingLens et les microservices). Avec FlashBlade//S™, une baie 100 % flash NVMe capable d’atteindre 450 Go/s et une latence inférieure à la milliseconde, Pure Storage gère le firehose des données. FlashBlade//S NVMe All-Flash Array 450GB FlashBlade//EXA™ peut atteindre un débit de lecture supérieur à 10TB/s. Ensemble, vous bénéficiez d’une architecture de référence propre : images brutes, informations stratégiques, pas de recâblage, pas de copies de données désordonnées.

(Et non, FlashBlade//S n’est pas votre SSD moyen : il ressemble plus à 100 SSD NVMe derrière une structure de 450GB/s. Pensez 10 fois plus vite que les SSD de bureau ou les clés USB.)

Ce que nous avons réellement conçu

Figure 1 : 

Architecture LandingLens

Figure 2 : 

Fonctionnement (sans le jargon)

Mise à disposition : Nous automatisons le côté Azure avec Terraform ; les nœuds Pure Storage sur site sont provisionnés manuellement pour le moment.

Package : La CLI d’AI à destination et notre script de personnalisation génèrent des graphiques Helm spécifiques au site, injectant des hôtes de base de données, des règles d’entrée et des balises d’image.

Lancement : Nous appliquons le service de cartes par service avec la mise à niveau Helm, en ajoutant des secrets de retrait pour chaque espace de nom. Une installation guidée prend généralement quelques jours avec nos ingénieurs de garde.

Résultat : Tout ingénieur agréé peut mettre en service la pile entière en quelques minutes, la tester localement ou dans le cloud et la mettre en production sans remaniement.

Ce qui est cool à ce sujet

Pas de préproduction ou de copie des données : LandingLens fonctionne directement sur FlashBlade//S. Pas besoin de tâches rsync ou de mise en cache.

Même vitesse, quelle que soit la taille du jeu de données : Que vous ayez affaire à 100GB ou 1PB, les performances restent stables grâce à la structure parallèle de FlashBlade^®.

Sécurité et résilience intégrées : FlashBlade offre un chiffrement permanent et des snapshots immuables, pour que les Ransomware sn’aient aucune chance.

L’exactitude des données, Il existe un niveau de précision plus élevé que l’open source et un plus petit nombre d’échantillons pour affiner les modèles de vision hautement spécialisés.

Temps de formation/valeur : En raison de ses avantages architecturaux, la pile offre le délai le plus rapide pour entraîner des modèles de vision par rapport aux offres open source.

Performance : La solution offre les meilleures performances/unité de rack, les meilleures mesures performance/W/Go et les meilleures performances de charges de travail mixtes (lecture/écriture simultanées) pour les charges de travail d’AI multimodales.

Coût : Avec Pure Storage^® Evergreen//One™, la solution offre le meilleur TCO global avec des performances garanties.

Proposition de valeur globale :Pure Storage FlashBlade + LandingLens offre un pod complet clé en main et validé pour l’imagerie médicale, les biotechnologies et la fabrication, ce qui permet au client final de se former/valoriser plus rapidement pour les cas d’utilisation de la vision par ordinateur.

Ce que cela signifie pour vous

Examinons maintenant de plus près certains cas d’utilisation de cette pile.

Fabrication et électronique

Mettez fin à la « vérification ponctuelle et à la prière ». Avec FlashBlade, alimentez vos processeurs graphiques jusqu’à 600Gb/s, et encore plus rapidement si vous passez à FlashBlade//EXA, LandingLens signale les composants manquants, les pièces hors angle, les ponts de soudure et les dings cosmétiques pendant que la ligne est toujours en mouvement. Comme les modèles apprennent à partir d’une fraction des images étiquetées dont la plupart des piles open source ont besoin, vous bénéficiez d’un rendement supérieur et d’une traçabilité hermétique sans le calque d’étiquetage des données de six mois.

Application de LandingLens dans la fabrication.

Textiles et emballages

Que vous tissiez des tissus en fibre de carbone ou imprimiez des étiquettes sous film rétractable, chaque rouleau et chaque passe d’impression est directement transféré vers la mémoire GPU. Le même pipeline qui détecte les tâches et les défauts de tissage peut lire les codes-barres ou les codes de lot à la volée, ce qui vous permet d’identifier les changements de couleur, les erreurs d’impression ou les écarts de mastic avant qu’une seule palette ne quitte le quai. Pas de rsync, pas de jeux en cache, juste des yeux en temps réel sur chaque millimètre.

Biotechnologie et sciences de la vie

Les images de lames entières et les piles de microscopie fluorescente se déplacent à la vitesse de la découverte, et non à la vitesse des transferts de fichiers. Affinez votre environnement sur site, derrière votre pare-feu, avec un chiffrement permanent et des snapshots immuables conformes aux normes FDA 21 CFR Part 11 et HIPAA. Résultat : des cycles de test plus rapides, sans problèmes de souveraineté des données.

Application de LandingLens dans les sciences de la vie et la biotechnologie.

Finance et assurance

LandingLens transforme les backlogs de documents en flux de travail directs. Dans notre étude de faisabilité, la pile a ingéré des photos d’identité haute résolution, des paquets de réclamations de plusieurs pages et des bundles de prêts hypothécaires directement à partir de FlashBlade, les a poussés à travers des services d’AI de vision et de documentation, et a renvoyé des résultats structurés vers des systèmes centraux, le tout sur le même fer, sans aucun transfert de données vers le cloud. Les premiers pilotes montrent que vous pouvez réduire les jours de KYC et les cycles de réclamations tout en conservant chaque octet dans votre propre périmètre de conformité.

Surveillance des équipements industriels

Gardez un œil constant sur les convoyeurs, les presses et les bras robotiques. Dès que l’alignement dérive ou qu’une bande commence à s’effilocher, le modèle de vision déclenche un ticket de maintenance. Comme FlashBlade évolue de manière linéaire, un châssis à la fois, vous pouvez continuer à ajouter des caméras (ou des cellules de production entières) sans jamais réorganiser le stockage ou surveiller la latence dépasser la milliseconde.

Regarder une vidéo de démonstration de LandingLens

Quelle est la prochaine étape ?

Exécutez votre propre pilote : Nous offrons à nos premiers clients la possibilité de tester leurs charges de travail sur la configuration de notre laboratoire commun.

Résultats de référence à venir : Une fois les projets pilotes terminés, nous publierons des chiffres réels sur la latence, le débit et les coûts.

Schéma du bricolage : Nous rassemblons les configurations Terraform + Helm afin que votre équipe DevOps puisse répliquer la configuration en moins d’une heure.

Prêt à construire ? Donnez-nous vos données

Si vous disposez d’une vaste bibliothèque d’images ou d’une pile de documents ralentissant vos plans d’AI, testons-la. Apportez-nous votre ensemble de données : nous l’exécuterons en direct et vous montrerons ce que cette pile peut faire.

Try FlashBlade

No hardware, no setup, no cost—no problem. Experience the self-service capabilities of FlashBlade.

Take a Test Drive