
AWS Machine Learning Blog は Amazon SageMaker AI 上の TTS システムの自動スケーリング設定の方法を説明しています。例として Kokoro-82M をユーザーコンテナで使用しています。
公開物では、スケーリングポリシーを実行中のエンドポイントの二つの測定値、Q_max(最大帯域幅)と T_total(総時間)から出すことが提案されています。これにより“目視”の閾値の設定に代わるアプローチとなります。
この方法の実用的な意味は、GPUコストと所望の遅延を、特定のシステムの観測可能な特性に結び付けることです。一方、元の資料には測定値自体や閾値の具体値、独立したテストの結果は示されていません。
編集部コメント
なぜ重要か
推測される結果は、測定値を反映したユーザー向け TTS 展開の再現性の高いスケーリング設定となる可能性がある。測定値が実際の作業負荷を反映している場合。今後観察されるサインは公開された式、数値閾値、テスト結果になるだろう。完全なテキストと独立検証の不足のため重大な不確実性は依然として残る。