より速いSageMaker AIジョブのためのSOCI インデックス付きイメージの発表

Amazon Web Servicesは「Amazon SageMaker AIトレーニングおよびAmazon SageMaker AI処理ジョブ向けのSeekable OCI（SOCI）インデックスを発表しました[1]」と同社ブログの投稿に記載されています。AWSは「コンテナイメージのダウンロードは単なるオーバーヘッドです。課金対象のジョブ時間でありながら、モデルの進捗をもたらしません。[1]」と記載しました。同社はさらに「ディープラーニングイメージは通常10GB以上になる[1]」と追記しています。AWSによると、この機能は「コンテナを開始するために必要なファイルのみを取得し、コードの実行中に残りをバックグラウンドでストリーミングします[1]」とのことです。同社は、ユーザーは「あらかじめインデックスが付いたAWS Deep Learning Container（DLC）を指す、または独自イメージにインデックスを追加する[1]」ことでこの機能をオンにできると述べています。AWSは「圧縮済みで1.8～35.4GBの8つのイメージをテストしており[1]」、インデックス付きイメージが「トレーニングパフォーマンスに影響を与えなかった[1]」と主張しています。同社は「必要に応じてジョブは常に標準ダウンロードにフォールバックします[1]」ため、インデックスを追加してもジョブが実行されなくなることはありません。AWSはまた「既存のジョブ定義、APIコール、データパイプラインは完全に同じままです[1]」と述べています。AWSは「SOCI インデックス付きイメージはcontainerdベースのランタイムで実行されます[1]」と注意喚起し、ユーザーにDockerに依存するコードについてスクリプトを確認するよう指示しました。AWSによると、この機能は「すべてのAWSリージョンで利用可能です[1]」とのことです。2025年12月、AWSはSageMaker Studioに向けて同じインデックスを発表し、「カスタムイメージを使用した場合、コンテナの起動時間を30～50%削減できた[2]」と述べています。