هواوي تعلن عن منتجات تخزين جديدة مدعومة بالذكاء الاصطناعي في عصر النماذج الكبيرة

[الصين، شنتشن، 14 يوليو 2023] كشفت شركة Huawei اليوم عن حل تخزين الذكاء الاصطناعي الجديد الخاص بها لعصر النماذج واسعة النطاق، مما يوفر حلول تخزين مثالية للتدريب الأساسي على النماذج، والتدريب على النماذج الخاصة بالصناعة، والاستدلال في السيناريوهات المجزأة، وبالتالي إطلاق العنان لقدرات الذكاء الاصطناعي الجديدة.

في تطوير وتنفيذ تطبيقات النماذج واسعة النطاق، تواجه الشركات أربعة تحديات رئيسية:

أولاً، الوقت اللازم لإعداد البيانات طويل، ومصادر البيانات متناثرة، والتجميع بطيء، وتستغرق المعالجة المسبقة لمئات التيرابايت من البيانات حوالي 10 أيام. ثانيًا، بالنسبة للنماذج الكبيرة متعددة الوسائط التي تحتوي على مجموعات بيانات نصية وصورية ضخمة، تكون سرعة التحميل الحالية للملفات الصغيرة الضخمة أقل من 100 ميجابايت/ثانية، مما يؤدي إلى انخفاض كفاءة تحميل مجموعة التدريب. ثالثًا، تتسبب تعديلات المعلمات المتكررة للنماذج الكبيرة، جنبًا إلى جنب مع منصات التدريب غير المستقرة، في انقطاع التدريب كل يومين تقريبًا، مما يستلزم استئناف آلية نقطة التفتيش للتدريب، مع استغراق عملية التعافي لمدة يوم واحد. وأخيرًا، عتبات التنفيذ العالية للنماذج الكبيرة، وإعداد النظام المعقد، وتحديات جدولة الموارد، واستخدام موارد وحدة معالجة الرسومات غالبًا ما تكون أقل من 40%.

تتماشى هواوي مع اتجاه تطوير الذكاء الاصطناعي في عصر النماذج واسعة النطاق، وتقدم حلولاً مصممة خصيصًا لمختلف الصناعات والسيناريوهات. وهي تقدم جهاز OceanStor A310 Deep Learning Data Lake Storage وجهاز FusionCube A3000 للتدريب/الاستدلال فائق التقارب. يستهدف تخزين بحيرة بيانات التعلم العميق OceanStor A310 سيناريوهات بحيرة البيانات الكبيرة الأساسية وعلى مستوى الصناعة، مما يحقق إدارة شاملة لبيانات الذكاء الاصطناعي بدءًا من تجميع البيانات والمعالجة المسبقة وحتى التدريب النموذجي وتطبيقات الاستدلال. يدعم OceanStor A310، الموجود في حامل واحد مكون من 5 وحدات، عرض نطاق ترددي رائد في الصناعة يبلغ 400 جيجابايت/ثانية وما يصل إلى 12 مليون IOPS، مع إمكانية التوسع الخطي حتى 4096 عقدة، مما يتيح الاتصال السلس عبر البروتوكولات. يعمل نظام الملفات العالمي (GFS) على تسهيل نسج البيانات الذكية عبر المناطق، مما يؤدي إلى تبسيط عمليات تجميع البيانات. تعمل حوسبة التخزين القريب على تحقيق المعالجة المسبقة للبيانات القريبة، مما يقلل من حركة البيانات ويحسن كفاءة المعالجة المسبقة بنسبة 30%.

إن جهاز FusionCube A3000 للتدريب/الاستدلال فائق التقارب، المصمم لسيناريوهات التدريب/الاستدلال على النماذج الكبيرة على مستوى الصناعة، يلبي التطبيقات التي تتضمن نماذج تحتوي على مليارات من المعلمات. فهو يدمج عقد التخزين عالية الأداء OceanStor A300، وعقد التدريب/الاستدلال، ومعدات التبديل، وبرامج منصة الذكاء الاصطناعي، وبرامج الإدارة والتشغيل، مما يوفر لشركاء النماذج الكبيرة تجربة نشر التوصيل والتشغيل للتسليم الشامل. جاهز للاستخدام، ويمكن نشره خلال ساعتين. يمكن توسيع كل من عقد التدريب/الاستدلال والتخزين بشكل مستقل وأفقي لتتناسب مع متطلبات مقياس النموذج المختلفة. وفي الوقت نفسه، يستخدم FusionCube A3000 حاويات عالية الأداء لتمكين تدريب النماذج المتعددة ومهام الاستدلال لمشاركة وحدات معالجة الرسومات، مما يزيد من استخدام الموارد من 40% إلى أكثر من 70%. يدعم FusionCube A3000 نموذجي أعمال مرنين: حل Huawei Ascend One-Stop والحل الشامل لشريك الطرف الثالث مع برامج الحوسبة المفتوحة والشبكات ومنصة الذكاء الاصطناعي.

صرح رئيس خط إنتاج تخزين البيانات في هواوي، تشو يويفينغ، قائلاً: “في عصر النماذج واسعة النطاق، تحدد البيانات مدى ارتفاع ذكاء الذكاء الاصطناعي. وباعتباره ناقلًا للبيانات، يصبح تخزين البيانات البنية التحتية الأساسية لنماذج الذكاء الاصطناعي واسعة النطاق. ستواصل شركة Huawei Data Storage الابتكار، وتوفير حلول ومنتجات متنوعة لعصر نماذج الذكاء الاصطناعي الكبيرة، والتعاون مع الشركاء لدفع تمكين الذكاء الاصطناعي عبر مجموعة واسعة من الصناعات.