Amazon SageMaker HyperPod sekarang mendukung konfigurasi siklus hidup simpul berbasis AMI untuk klaster Slurm
Amazon SageMaker HyperPod sekarang mendukung konfigurasi berbasis AMI yang menyediakan simpul klaster Slurm dengan software dan konfigurasi yang diperlukan untuk lingkungan siap produksi untuk menjalankan beban kerja pelatihan AI/ML. Ini menghilangkan kebutuhan untuk mengunduh, mengonfigurasi, atau mengunggah skrip konfigurasi siklus hidup ke Amazon S3. Dengan langkah-langkah operasional yang lebih sedikit untuk menyiapkan klaster dan tidak ada skrip konfigurasi siklus hidup yang dieksekusi selama penyediaan simpul, waktu pembuatan klaster berkurang secara signifikan, sehingga Anda dapat mulai menjalankan pekerjaan lebih cepat.
Konfigurasi berbasis AMI mencakup software yang diperlukan seperti Docker, Enroot, dan Pyxis, dan konfigurasi seperti akuntansi Slurm, pembuatan kunci SSH, rotasi log Slurm dan pengaturan direktori home pengguna. Untuk mengaktifkan konfigurasi berbasis AMI, hilangkan blok LifecycleConfig dari konfigurasi grup instans saat membuat klaster menggunakan API CreateCluster, atau saat menggunakan konsol SageMaker AI, pilih “Tidak Ada” di bawah Skrip siklus hidup di Pengaturan khusus. Untuk penyesuaian tambahan di atas dasar konfigurasi berbasis AMI, skrip ekstensi dapat disediakan, memungkinkan Anda untuk fokus hanya pada kemampuan dan software apa yang akan ditambahkan, seperti konfigurasi pengguna, observabilitas, atau integrasi LDAP.
Skrip ekstensi dapat dikonfigurasi saat membuat klaster melalui API dan konsol AI SageMaker. Menggunakan API CreateCluster, tentukan parameter onInitComplete baru dan sources3URI di blok LifecycleConfig. Melalui konsol, berikan URI S3 ke skrip ekstensi di bidang "File skrip ekstensi di S3" di Pengaturan khusus. Untuk kasus penggunaan lanjutan yang memerlukan kontrol penuh atas penyediaan, skrip konfigurasi siklus hidup kustom tetap didukung sepenuhnya melalui API dan konsol AI SageMaker.
Fitur ini tersedia di semua AWS Region di mana SageMaker HyperPod tersedia. Untuk memulai membuat klaster HyperPod Slurm dengan konfigurasi siklus hidup simpul berbasis AMI, lihat Memulai dengan SageMaker HyperPod menggunakan AWS CLI atau Memulai dengan SageMaker HyperPod menggunakan konsol SageMaker AI di panduan developer SageMaker AI.