Logo Zéphyrnet

L'ère de l'IA : les grands modèles nécessitent un meilleur choix de bases de données

Date :

Contenu partenaire Huawei Cloud a organisé une série d'événements lors du MWC24 de Barcelone pour « Accélérer l'intelligence avec tout en tant que service », notamment le Huawei Cloud Summit, le lancement de produits et de solutions et le séminaire Cloud Native Elite Club (CNEC).

Ces occasions ont été conçues pour présenter l'infrastructure de Huawei en tant que pépinière d'innovations en matière d'intelligence artificielle (IA), avec des dirigeants et des experts de divers secteurs réfléchissant à l'impact holistique ainsi qu'aux possibilités révolutionnaires de mélanger l'IA avec des bases de données, des mégadonnées et des services multimédias. et l'architecture informatique.

Huawei Cloud a présenté GaussDB lors des trois événements. Lors du Cloud Summit, Bruno Zhang, CTO de Huawei Cloud, a présenté la base de données relationnelle distribuée GaussDB, couramment utilisée dans les secteurs de la finance, des télécommunications et du gouvernement. « Une base de données solide constitue une base de données solide qui prend en charge les mises à niveau numériques intelligentes », a souligné M. Zhang.

En appliquant les capacités de l'IA à la migration, au déploiement et à la maintenance des bases de données, GaussDB rend le traitement des données plus efficace pour les applications d'IA, a déclaré Huawei.

La dernière itération de la base de données, introduite en 2023, offre une disponibilité du service 4 heures sur XNUMX, des performances élevées et constantes sous de lourdes charges et une stabilité dans des scénarios de concurrence élevée. Il associe également la certification CC EALXNUMX+ à un code source sécurisé et à des mesures de cryptage de bout en bout.

Le Dr Nikos Ntarmos, directeur du laboratoire de bases de données du Huawei Central Software Institute, a souligné que GaussDB, fondée sur plus de 20 années d'expérience de Huawei dans le domaine des bases de données, vise à répondre aux exigences élevées des clients en matière d'intelligence et d'automatisation des bases de données.

Le Dr Ntarmos a ajouté que cet effort implique de renforcer les capacités de « conduite autonome » dans les phases clés du pipeline de données qui englobent le conseil, le développement, l'exploitation et la maintenance (O&M) des bases de données. Pendant la phase de conseil, GaussDB peut générer automatiquement des conceptions de haut niveau (HLD) en connectant des modèles grands et petits pour améliorer l'efficacité de la conception des solutions, par exemple. Selon lui, cet avantage pourrait réduire la période de conception de la solution d'environ deux semaines à environ deux jours.

Dans la phase de développement, GaussDB génère directement des instructions SQL via des capacités de langage naturel vers SQL et SQL vers SQL, avec une identification automatique et des suggestions d'amélioration pour les instructions SQL médiocres. Dans la phase O&M, GaussDB automatise l'inspection, la génération de rapports et la démarcation des défauts tout en fournissant des suggestions de traitement pour les instructions SQL défectueuses.

Le Dr Ntarmos a expliqué que la compatibilité de la base de données avec la syntaxe commune utilisée dans les bases de données commerciales populaires en fait une solution de migration qui minimise les interventions manuelles et les dépenses de migration. GaussDB a été adopté dans les systèmes centraux de grandes banques, banques par actions et sociétés d'assurance en Chine, ainsi que dans les principaux clients Huawei Cloud au Brésil et en Thaïlande.

Huawei Cloud se concentre sur l'IA comme stratégie clé

Jacqueline Shi, présidente du service marketing et commercial mondial de Huawei Cloud, a salué le potentiel convaincant de l'IA pour remodeler presque tout. « Chez Huawei Cloud, l'IA est une stratégie clé », a déclaré Mme Shi. « Vous pouvez obtenir chez nous des solutions d'IA complètes, telles qu'une solution de puissance de calcul IA et des modèles Pangu. Huawei Cloud est l'un des fournisseurs de cloud à la croissance la plus rapide. Nous espérons apporter des technologies de pointe, le meilleur service local et des choix plus nombreux et meilleurs à nos clients.

« Nous assistons à un nouveau niveau d'intelligence, piloté par des modèles de base et l'IA générative », a fait écho M. Zhang. « Il est prévu que d'ici 2026, plus de 80 % des entreprises exploiteront le contenu généré par l'intelligence artificielle (AIGC) en production, transformant 70 % du travail de conception et de développement. D’ici 2028, 75 % des ingénieurs logiciels auront des assistants IA à leurs côtés, contre seulement 10 % début 2023. »

« Les clients veulent une architecture informatique collaborative hétérogène, un calcul cloud natif avec des performances exceptionnelles, un stockage de données de masse, une conformité en matière de sécurité, une gouvernance allégée et un déploiement flexible », a ajouté William Fang, directeur des produits chez Huawei Cloud. « Ce n’est qu’en intégrant l’IA au cloud que des progrès en matière d’intelligence seront possibles. »

Pour aider les clients à accélérer leur parcours vers l'IA, M. Fang a souligné les grands modèles de langage, le Big Data et la puissance de calcul comme facteurs clés de succès dans le développement de l'infrastructure Cloud de Huawei.

De plus, même si les paradigmes de production, de service et les modèles commerciaux pour les applications traditionnelles sont en train d'être redéfinis, accélérer l'intelligence tout en alignant le vaste potentiel de l'IA et sa mise en œuvre sur les objectifs commerciaux nécessite une innovation systématique.

À cette fin, M. Zhang a proposé une stratégie à deux volets. « AI for Cloud utilise l'IA et des modèles de base pour améliorer votre expérience », a-t-il déclaré. « Ils remodèlent les applications industrielles et nos propres services cloud, y compris le développement de logiciels, la production de contenu numérique, et bien plus encore. Cloud for AI rend l’adoption de l’IA transparente et efficace. L’innovation architecturale, le stockage natif de l’IA et la convergence données-IA vous permettent de former et d’utiliser l’IA comme jamais auparavant.

L'innovation systématique et les pratiques industrielles de Huawei Cloud englobent le développement technique dans l'architecture système, le calcul, le stockage, les bases de données, le big data, entre autres, ainsi que les modèles Pangu pour l'automobile, la météo, l'humain virtuel, la R&D, etc.

Alignement systématique IA-business

Expliquant l'essor du Cloud pour l'IA, M. Zhang a déclaré : « Les modèles de base et leurs applications constituent les systèmes logiciels et matériels les plus complexes à ce jour. Par exemple, nous avons découvert de nouveaux défis en matière de calcul. C'est pourquoi nous allons passer d'une architecture centrée sur le processeur à une architecture cloud peer-to-peer hétérogène, où différentes ressources de calcul fonctionnent sur un pied d'égalité.

Zhang a ajouté que les services cloud sont la clé pour obtenir le calcul d'IA hyperscale, stable et robuste requis par les modèles de base. Un tel calcul dépasse de loin la loi de Moore. Huawei Cloud aide les opérateurs télécoms à créer une infrastructure cloud intelligente grâce à son architecture distribuée QingTian, ​​son stockage natif IA, sa sécurité de bout en bout et sa convergence données-IA.

L'architecture QingTian supprime les goulots d'étranglement limitant la progression des clusters de calcul d'IA à grande échelle en permettant un calcul entièrement maillé peer-to-peer. Un bus d'interconnexion à haut débit intègre de manière transparente les communications, la gestion des ressources et les appels de fonctions dans une infrastructure de calcul optimale.

« Nous avons déployé trois grands centres de calcul d'IA et plus de 30 sous-centres sur le continent chinois », a déclaré M. Zhang. « Ils exécutent des clusters hyperscale pour prendre en charge des modèles comportant des milliards de paramètres. Bientôt, notre service cloud d'IA sera mis en service dans la région de Hong Kong pour servir les clients mondiaux.

De plus, le stockage natif de l’IA prend en charge les modèles de formation gourmands en données. Une approche en trois volets comprend le service de mémoire EMS (Expansed Memory Spécification) qui stocke des pétaoctets de paramètres avec une bande passante ultra-large de 220 To et une latence ultra-faible jusqu'à la microseconde. À cela s’ajoutent Scalable File Service Turbo – un service de cache pour un débit élevé et une simultanéité de dizaines de millions d’opérations d’entrée/sortie par seconde – et un lac de connaissances Object Storage Service qui stocke les données de formation et d’inférence de manière rentable.

La sécurité de bout en bout de Huawei Cloud protège les environnements d'exécution de modèles des clients du secteur, les données de formation, les modèles eux-mêmes, le contenu généré et les applications.

Les modèles de fondation prospèrent grâce aux données et aux bases de données

La prolifération des modèles de base a également nécessité la nécessité de fournir des données de qualité de manière plus efficace pour prendre en charge la formation et l'inférence des modèles.

« Nous utilisons LakeFormation, une ressource de données unifiée et une technologie de métadonnées, pour créer un lac de données logique à partir de plusieurs lacs ou entrepôts de données », a déclaré M. Zhang. « Cela signifie qu'une copie des données peut être partagée par plusieurs moteurs d'analyse de données et moteurs d'IA, sans qu'il soit nécessaire de migrer les données. De plus, notre moteur AI4Data rend l’ensemble du processus de gouvernance des données – depuis l’intégration des données, le développement, jusqu’à la gestion de la qualité et des actifs – plus intelligent.

Lors du sommet, Huawei Cloud a également décrit comment ses innovations orientées vers l'IA et sa vaste expertise industrielle des modèles Pangu – y compris le modèle humain virtuel – ont contribué à une infrastructure prête pour l'IA qui remodèle de nombreux secteurs.

Les modèles Pangu combinent des connaissances industrielles et des capacités de modèle de langage étendu (LLM) pour produire un assistant expert susceptible de rendre le travail plus efficace et plus facile pour les industries, les entreprises ou les utilisateurs individuels.

Contrairement aux LLM tels que ChatGPT, les Pangu Models 3.0 de Huawei Cloud présentent une architecture découplée à trois couches, a déclaré la société. La couche L0 se compose de cinq modèles de base, qui fournissent des compétences générales pour alimenter des applications spécifiques à l'industrie. L1 contient des modèles spécifiques à l'industrie qui sont formés à l'aide de données industrielles, tandis que L2 fournit des modèles pour des scénarios et des tâches spécifiques à l'industrie.

M. Zhang a cité des cas où le modèle de télécommunications Pangu a aidé les opérateurs de télécommunications à dépanner automatiquement jusqu'à 90 % des pannes de réseau en quelques minutes, tandis que le modèle de R&D de Pangu permet aux développeurs de générer du code avec une seule invite et de tester des cas en un seul clic. Dans les prévisions météorologiques, Pangu a également été utilisé pour prédire la trajectoire d'un typhon sur une période de 10 jours avec plus de précision et en 10 secondes sur un seul serveur, a-t-il ajouté.

Étonnamment, le modèle humain virtuel de Pangu offre une précision de synchronisation labiale de 95 % pour le service client et la diffusion en direct. Les humains virtuels sont largement utilisés dans des domaines tels que le commerce électronique, la diffusion d’informations, l’éducation et la formation.

Dans l'industrie automobile, Pangu génère automatiquement des cas d'angle pour toutes sortes de scènes de conduite complexes, réduisant ainsi le temps nécessaire aux modèles de conduite autonome pour apprendre de nouvelles scènes. D’autres modèles sont en préparation. Les modèles Pangu et les services cloud associés peuvent être déployés avec une sécurité et une conformité fiables sur un cloud public, une zone dédiée ou un cloud hybride.

Avec ces annonces faites lors du Sommet, Mme Shi a insisté sur les projets de Huawei Cloud d'offrir un écosystème ouvert de services cloud et de nouvelles activités. La société collabore avec des clients et des partenaires pour créer des solutions basées sur des scénarios pour les secteurs verticaux tout en continuant à développer KooVerse, l'infrastructure de Huawei Cloud, à l'échelle mondiale pour un accès facile et des performances élevées.

Cet article a été rédigé par Huawei.

spot_img

Dernières informations

spot_img