Amazon SageMaker HyperPod artık Slurm kümeleri için AMI tabanlı düğüm yaşam döngüsü yapılandırmasını destekliyor
Amazon SageMaker HyperPod artık yapay zeka/makine öğrenimi eğitim iş yüklerini çalıştırmak için üretime hazır bir ortam için gereken yazılım ve yapılandırmaları sağlayan Slurm küme düğümlerini sağlayan AMI tabanlı yapılandırmayı destekliyor. Bu, yaşam döngüsü yapılandırma komut dosyalarını Amazon S3'e indirme, yapılandırma veya yükleme ihtiyacını ortadan kaldırır. Bir küme hazırlamak için gereken operasyonel adımların azalması ve düğüm tedariki sırasında yürütülen yaşam döngüsü yapılandırma komut dosyaları olmaması sayesinde küme oluşturma süresi önemli ölçüde azalır, böylece işleri daha erken çalıştırmaya başlayabilirsiniz.
AMI tabanlı yapılandırma, Docker, Enroot ve Pyxis gibi gerekli yazılımları ve Slurm muhasebesi, SSH anahtar oluşturma, Slurm günlük döndürme ve kullanıcı ana dizini kurulumu gibi yapılandırmaları içerir. AMI tabanlı yapılandırmayı etkinleştirmek için CreateCluster API'sini kullanarak kümeler oluştururken bulut sunucusu grubu yapılandırmasından LifecycleConfig blokunu atlayın veya SageMaker AI konsolunu kullanırken özel kurulumda yaşam döngüsü komut dosyaları altında “Yok” seçeneğini belirleyin. AMI tabanlı yapılandırma taban çizgisinin üzerine ek özelleştirme için, yalnızca kullanıcı yapılandırması, gözlemlenebilirlik veya LDAP entegrasyonu gibi istediğiniz özelliklere ve yazılıma odaklanmanıza olanak tanıyan bir uzantı komut dosyası sağlanabilir.
Uzantı komut dosyaları, hem API hem de SageMaker AI konsolu aracılığıyla küme oluştururken yapılandırılabilir. CreateCluster API'sini kullanarak, LifecycleConfig blokundaki yeni OnInitComplete parametresini ve SourceS3Uri'yi belirtin. Konsol aracılığıyla, Özel kurulumdaki “S3'te uzantı komut dosyası” alanındaki uzantı komut dosyasına S3 URI'yi sağlayın. Tedarik üzerinde tam kontrol gerektiren gelişmiş kullanım durumları için, özel yaşam döngüsü yapılandırma komut dosyaları hem API hem de SageMaker AI konsolu aracılığıyla tam olarak desteklenmeye devam eder.
Bu özellik, SageMaker HyperPod'un mevcut olduğu tüm AWS Bölgelerinde kullanılabilir. AMI tabanlı düğüm yaşam döngüsü yapılandırmasına sahip HyperPod Slurm kümeleri oluşturmaya başlamak için SageMaker AI geliştirici kılavuzundaki SageMaker HyperPod'u AWS CLI kullanarak kullanmaya başlama veya SageMaker AI konsolunu kullanarak SageMaker HyperPod kullanmaya başlama bölümüne bakın.