Huawei mengeluarkan produk storan AI baharu dalam era model besar

Pada 14 Julai, Huawei mengeluarkan produk storan AI baharu untuk era model besar, menyediakan penyelesaian storan optimum untuk latihan model asas, latihan model industri dan latihan dan penaakulan model senario tersegmen, mengeluarkan momentum AI baharu.

Dalam proses membangunkan dan melaksanakan aplikasi model besar, perusahaan menghadapi empat cabaran utama:

Pertama sekali, penyediaan data mengambil masa yang lama, sumber data berselerak, dan pengumpulan adalah perlahan Ia mengambil masa kira-kira 10 hari untuk mempraproses 100 TB data Kedua, model besar berbilang modal menggunakan teks dan imej besar-besaran sebagai set latihan. dan kelajuan pemuatan semasa fail kecil yang besar tidak mencukupi 100MB/s, kecekapan pemuatan set latihan adalah rendah, parameter model besar sering ditala, dan platform latihan terganggu sekali setiap 2 hari purata, memerlukan mekanisme Checkpoint untuk menyambung semula latihan, dan pemulihan kegagalan mengambil masa lebih daripada satu hari, akhirnya, model besar Ambang untuk pelaksanaan model adalah tinggi, pembinaan sistem adalah rumit, penjadualan sumber adalah sukar, dan kadar penggunaan sumber GPU biasanya; kurang daripada 40%.

Huawei mematuhi trend pembangunan AI dalam era model besar, dan melancarkan penyimpanan tasik data pembelajaran mendalam OceanStor A310 dan latihan FusionCube A3000/menolak mesin semua-dalam-satu hyper-converged untuk aplikasi model besar dalam industri dan senario yang berbeza.

Zhou Yuefeng, Presiden Barisan Produk Penyimpanan Data Huawei

Penyimpanan tasik data pembelajaran mendalam OceanStor A310 berorientasikan kepada senario tasik data model besar asas/industri dan merealisasikan pengurusan data besar proses penuh AI daripada pengumpulan dan prapemprosesan data kepada latihan model dan aplikasi inferens.

OceanStor A310 bingkai tunggal 5U menyokong lebar jalur tertinggi industri sebanyak 400GB/s dan prestasi tertinggi sebanyak 12 juta IOPS, dan boleh dikembangkan secara linear kepada 4096 nod untuk mencapai kebolehoperasian tanpa kerugian dengan berbilang protokol. Sistem fail global GFS merealisasikan jalinan data pintar merentas wilayah dan memudahkan proses pengumpulan data ia merealisasikan prapemprosesan data hampir melalui pengkomputeran memori dekat, mengurangkan pergerakan data dan meningkatkan kecekapan prapemprosesan sebanyak 30%.

Mesin latihan/penumpuan hiper-penumpuan FusionCube A3000 direka untuk senario latihan/inferens model besar industri dan untuk berpuluh-puluh bilion aplikasi model Ia menyepadukan nod storan berprestasi tinggi OceanStor A300, nod latihan/tolak, pensuisan. peralatan, perisian platform AI dan pengurusan dan operasi Perisian ini menyediakan rakan kongsi model besar dengan pengalaman penggunaan kunci dan membolehkan penghantaran sehenti. Ia berfungsi di luar kotak dan boleh digunakan dalam masa 2 jam. Untuk menyesuaikan diri dengan keperluan model dengan saiz yang berbeza, nod latihan dan nod storan boleh dikembangkan secara bebas secara mendatar. Pada masa yang sama, FusionCube A3000 menggunakan bekas berprestasi tinggi untuk berkongsi GPU untuk latihan berbilang model dan tugasan inferens, meningkatkan penggunaan sumber daripada 40% kepada lebih daripada 70%. FusionCube A3000 menyokong dua model perniagaan yang fleksibel, termasuk penyelesaian sehenti Ascend Huawei dan penyelesaian sehenti rakan kongsi pihak ketiga untuk pengkomputeran terbuka, rangkaian dan perisian platform AI.

Zhou Yuefeng berkata bahawa dalam era data besar, data menentukan tahap kecerdasan buatan. Sebagai pembawa data, storan data telah menjadi infrastruktur utama untuk model AI yang besar. Storan Data Huawei akan terus berinovasi pada masa hadapan, menyediakan penyelesaian dan produk yang pelbagai untuk era model besar AI, dan bekerjasama dengan rakan kongsi untuk mempromosikan pemerkasaan AI dalam pelbagai industri. ”

Kandungan di laman web ini (termasuk tetapi tidak terhad kepada teks, gambar, audio dan video), kecuali untuk cetakan semula, adalah hak cipta Times Online. Sesiapa yang melanggar kenyataan di atas akan bertanggungjawab oleh laman web ini untuk liabiliti undang-undang yang berkaitan. Sila hubungi En. Ding (news@time-weekly.com) untuk mendapatkan kebenaran mencetak semula daripada laman web ini, jika media, laman web atau individu lain ingin mencetak semula

Atas ialah kandungan terperinci Huawei mengeluarkan produk storan AI baharu dalam era model besar. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!