Sangfor dan TrendForce bergabung tenaga untuk menggunakan storan berprestasi tinggi untuk menyokong pembangunan model AI yang besar

Baru-baru ini, Beijing Trend Technology Co., Ltd. (selepas ini dirujuk sebagai "Teknologi Trend") dan Sangfor secara rasmi melancarkan penyelesaian bersama. Penyelesaian ini menggabungkan storan berprestasi tinggi Sangfor EDS secara organik dengan perisian pengumpulan sumber pengkomputeran OrionX AI dan platform latihan Gemini AI Ia bertujuan untuk menyepadukan sumber storan dan pengkomputeran untuk membantu pengguna membina platform kecerdasan buatan yang cekap dan menggunakan sumber kecerdasan buatan#. 🎜🎜#

Secara khususnya, pelancaran penyelesaian bersama akan membawa perubahan berikut kepada pembinaan infrastruktur pengguna dalam bidang kecerdasan buatan

Penyelesaian bersama berprestasi tinggi sedia untuk mencipta platform latihan yang lebih cekap

Apabila pembinaan model kecerdasan buatan berskala besar semakin pantas, pengguna mempunyai keperluan yang semakin tinggi untuk kecekapan latihan model kecerdasan buatan. Walau bagaimanapun, disebabkan masalah seperti sumber pengkomputeran GPU yang tidak mencukupi dan prestasi membaca dan menulis fail kecil yang tidak mencukupi dalam storan asas, sejumlah besar tugas latihan dalam platform latihan perlu dibariskan. Kuasa pengkomputeran dan kapasiti storan yang tidak mencukupi memperlahankan kecekapan latihan seluruh platform latihan kecerdasan buatan

Untuk menyelesaikan masalah ini, penyelesaian bersama telah dioptimumkan sepenuhnya. Sebagai tindak balas kepada isu kecekapan platform latihan lapisan atas, perisian pengumpulan sumber pengkomputeran AI OrionX Teknologi Trend membantu pengguna memperuntukkan sumber GPU secara fleksibel mengikut keadaan tugas dengan mencipta kumpulan sumber pengkomputeran untuk mencapai pembahagian sumber, pengagregatan, panggilan jauh dan pemarkahan super, giliran tugasan, pemasangan dan pelepasan dinamik, dan pengumpulan heterogen cip domestik dan keupayaan lain untuk memenuhi sepenuhnya keperluan kuasa pengkomputeran pelbagai tugasan latihan dan mempercepatkan kemajuan tugas. Pada masa yang sama, keupayaan penjadualan yang disediakan oleh platform latihan Gemini AI mengoptimumkan mekanisme pengurusan platform latihan Di bawah penjadualan bersatu, latihan model AI adalah lebih cekap

.

Melalui mekanisme baca hadapan heuristik EDS yang dibangunkan sendiri dan perkhidmatan metadata berbilang langsung, kami boleh menyelesaikan masalah prestasi storan asas dengan berkesan. Walaupun dengan berpuluh-puluh bilion set data, kami masih boleh menyediakan keupayaan membaca dan menulis berkelajuan tinggi. Dengan cara ini, ia bukan sahaja dapat mengurangkan masa menunggu GPU, tetapi juga meningkatkan kecekapan pemprosesan dan latihan latihan gelung jangka pendek

2 Kapasiti dan prestasi boleh dikembangkan pada masa yang sama untuk mencipta penyelesaian storan yang menjimatkan kos

.

Dalam proses latihan set data AI harian, untuk menjadikan model lebih tepat, selalunya perlu menggunakan imej besar, teks dan data lain untuk melatih model AI. Pertumbuhan pesat data telah memberikan tekanan yang besar pada kapasiti dan prestasi storan asas Model storan tradisional yang berkos tinggi dan tidak cekap telah menjadi semakin sukar untuk memenuhi keperluan prestasi dan kapasiti.

Bergantung pada teknologi yang dibangunkan sendiri sepenuhnya seperti algoritma penyimpanan matriks, EDS boleh menyelesaikan masalah sisa ruang dengan berkesan yang disebabkan oleh penguatan tulis fail kecil dalam proses menyimpan fail kecil seperti imej, teks dan video, dan memaksimumkan penggunaan ruang storan Tiga nod Kelompok yang terbentuk boleh memenuhi keperluan storan pasukan latihan AI bersaiz sederhana. Dari segi pengembangan prestasi, juga mendapat manfaat daripada kelebihan seni bina storan yang ditakrifkan perisian, EDS boleh mencapai pengembangan kapasiti dan prestasi serentak semasa pengembangan, secara fleksibel bertindak balas kepada keperluan prestasi perniagaan AI yang berkembang pesat.

3 Pengurusan bersatu dan perlombongan mendalam nilai data

.

Sebelum mengeluarkan penyelesaian, EDS telah berjaya mencapai sambungan lancar dengan platform latihan Gemini AI Trend Micro melalui NFS CSI, S3 dan protokol lain. Melalui penyesuaian mendalam, platform orkestrasi kontena Kubernetes boleh melengkapkan peruntukan dinamik sumber storan dengan lebih pantas. Pengguna boleh terus melangkau kajian kemungkinan penyelesaian semasa penggunaan dan melancarkan tugas latihan AI dengan cepat. Pada masa yang sama, EDS juga menyokong kebolehoperasian data antara pelbagai protokol Pelbagai jenis pelanggan boleh berkongsi sistem storan. Data hasil setiap peringkat tidak perlu disalin merentasi storan, dengan itu mencapai aliran yang cekap dan memastikan pengguna boleh menggunakan dengan berkesan. keputusan data untuk melombong nilai data dengan lebih mudah

Pada masa hadapan, kedua-dua pihak juga akan mengukuhkan kerjasama dalam bidang teknikal dan membantu pengguna mempercepatkan peningkatan dan pembinaan platform latihan AI dengan menyediakan penyelesaian bersama dengan prestasi storan yang lebih tinggi, supaya lebih ramai pengguna boleh mencapai kejayaan di jalan raya kepada latihan AI Kemajuan yang lebih pantas dan lebih stabil

.

Perihal Teknologi Trend: Teknologi Trend komited untuk menyediakan pengguna dengan penyelesaian maya pengkomputeran AI peringkat pusat data terkemuka di dunia dan penyelesaian pengumpulan sumber. Pada masa ini, banyak syarikat dan pengguna terkemuka dalam kecerdasan buatan, Internet, pengendali, kewangan, kereta dan autonomi pemanduan, pendidikan dan industri lain telah menggunakan penyelesaian pengumpulan sumber pengkomputeran OrionX AI

Atas ialah kandungan terperinci Sangfor dan TrendForce bergabung tenaga untuk menggunakan storan berprestasi tinggi untuk menyokong pembangunan model AI yang besar. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!