AWS Glue Interactive Sessions 現在支援適用於互動式工作負載的 Spark Connect

張貼日期: 2026年6月17日

AWS Glue Interactive Sessions 現在支援 Apache Spark Connect,讓您現在可以從偏好的環境開發和執行 Apache Spark 應用程式,包括 Amazon SageMaker Unified Studio 中的受管筆記本,或您偏好的筆記本環境與 IDE,例如 Jupyter、Visual Studio Code,同時在 AWS Glue 的無伺服器基礎設施上執行,而無需管理叢集。

有了 Spark Connect,您可使用精簡型客戶端架構將 Spark 任務提交至 AWS Glue Interactive Sessions,將您的用戶端應用程式與 Spark 執行環境解耦。這可從您已在使用的工具中,解鎖臨機資料探索、反覆逐步除錯,以及部署至正式環境前的增量 PySpark 任務開發等工作流程。Spark Connect 也能透過將用戶端相依性與伺服器端 Spark 執行時期隔離,來簡化升級並提升穩定性。在可觀測性方面,您可透過 Spark UI 進行即時工作階段監控、透過 Spark History Server 追蹤歷史記錄,以及使用 AWS Glue API、CLI 或 SDK 管理工作階段。

搭配 Spark Connect 的 AWS Glue Interactive Sessions 可在以下區域使用:亞太地區 (孟買、首爾、新加坡、雪梨、東京)、加拿大 (中部)、歐洲 (法蘭克福、愛爾蘭、倫敦、巴黎、斯德哥爾摩)、南美洲 (聖保羅)、美國東部 (俄亥俄、維吉尼亞北部) 以及美國西部 (奧勒岡)。

若要開始使用,請從 Amazon SageMaker Unified Studio 中的筆記本、搭配 Python 直譯器的您最喜愛 IDE,或 AWS API、SDK 和 CLI 中,使用 Spark Connect 連線至 Glue Interactive Sessions。若要了解詳情,請造訪 AWS Glue Interactive Sessions 文件