AI・LLM デイリーブリーフィング
2026年11月3日(火・祝)|一次情報の確認:2026/11/03 08:51(日本時間)
11月2日〜3日朝の直近24時間では、一次情報から重複のない重要な新規イベントを5件確認できませんでした。72時間に広げても不足したため、7日以内の2026年10月29〜30日に公開された5件を選びました。過去のAI BRIEF掲載イベントと重複しない内容です。11月3日に新発表されたという意味ではありません。
最重要はAmazon SageMaker AIのGPUパーティショニングです。複数のEmbedding・Reranker・小型LLMを1基のGPUでハードウェア隔離して実行できるようになり、東京リージョンでも利用できます。ほかにStep FunctionsのMCPツール化、NVIDIAのエッジ推論と分散推論基盤、日本のKiro CLI運用検証を紹介します。
発表日・提供段階・評価条件・料金・利用制限を区別しました。11月2日公開の既存記事の翻訳は新製品発表として数えていません。画像は関連する実在素材の再利用条件と掲載可能な配信経路を確認できなかったため、省略しています。
1. 【最重要】SageMaker AI、GPUを最大7領域に分割して複数モデルを推論
発表日:2026年10月30日|提供開始済みの新機能
AWSはAmazon SageMaker AIのリアルタイム推論エンドポイントでGPUパーティショニングに対応しました。NVIDIA Multi-Instance GPU(MIG)を利用し、1基のGPUを最大7つのハードウェア隔離領域へ分割します。Embedding、Reranker、Classifier、小型のファインチューニングモデルなど、GPU全体を使い切らない推論をまとめられます。
なぜ重要か
RAGのパイプラインでは複数の小さなモデルを併用します。モデルごとにGPUを専有させる構成と比べ、未使用のGPU容量を削減できる可能性があります。MIGはGPUメモリと演算スライスを隔離しますが、ホストCPU・メモリ・ストレージ・ネットワークは共有されます。
開発者向け:API・実装・性能・料金
| 項目 | 公式情報で確認した内容 |
|---|---|
| API設定 | Production VariantのAcceleratorPartitionLayoutsとInference ComponentのAcceleratorPartitionType |
| 新しいAPI操作 | 追加なし。既存の推論呼び出しでInference Component名を指定 |
| 分割例 | P4d/A100 40GBならmig-1g.5gbで最大7領域、P5/H100 80GBならmig-1g.10gbで最大7領域 |
| GPU別制約 | G7/RTX PRO 4500は最大2領域、G7e/RTX PRO 6000は最大4領域 |
| 対応機種 | P4d、P5、G7、G7e |
| リージョン | 東京、シンガポール、バージニア北部、オハイオ、オレゴン、フランクフルト、アイルランド |
| 料金 | GPUインスタンス等は通常課金。新機能固有の追加単価は発表文に記載なし |
| 性能 | 一律のレイテンシ・スループット・コスト削減率は未公表 |
実装上の注意: パーティションのレイアウトはエンドポイント作成時に確定します。稼働中のレイアウトをUpdateEndpointで変更することはできず、新しいエンドポイントが必要です。分割されたエンドポイントは呼び出し・レイテンシ指標を出しますが、GPU・CPU・メモリの使用率メトリクスは提供しないとドキュメントに明記されています。GPU稼働率の比較は別の計測設計が必要です。
評価の考え方: 7分割は7倍の性能を意味しません。モデルの常駐メモリ、同時実行、P95レイテンシ、実際のインスタンス費用を比較してください。
一次情報: AWS公式発表 / SageMaker AI公式実装ドキュメント
2. AWS、Step Functionsの既存業務フローをAgentCoreのMCPツールとして公開
発表日:2026年10月29日|提供開始済みの新機能
AWSは、AWS Step FunctionsのState MachineをAmazon Bedrock AgentCore Gateway経由でMCPツールとして公開できるようにしました。エージェントは「いつ、どの入力で実行するか」を判断し、業務処理の順序と再試行・エラー処理は既存のState Machineに任せます。StandardとExpressの両方に対応します。
なぜ重要か
返金・申請・データ処理などの業務では、LLMに承認手順を自由に変更させるべきではありません。エージェントの判断と、決定論的な業務フローの実行を分離できます。独自LambdaやMCPサーバーを新規実装せずに既存資産を活用できます。
開発者向け:API・実装・料金
| 項目 | 公式情報 |
|---|---|
| コネクタ | connectorId: "states" |
| 操作 | StartExecution、ListExecutions、DescribeExecution、GetExecutionHistory、StopExecutionなど計10操作 |
| State Machine固定 | Gateway TargetのparameterValues.stateMachineArnに指定。エージェントは変更できない |
| 権限 | GatewayサービスロールのIAMでState Machineと実行ARNを制限 |
| Standard | 実行履歴、状態照会、タスクトークンによるコールバックを利用可能 |
| Express | StartSyncExecutionによる同期結果取得に対応。Standard専用の実行履歴APIは非対応 |
| 料金 | Step FunctionsとAgentCore Gatewayの通常の従量料金。追加の固定価格は未発表 |
| 提供 | AgentCore Gateway対応リージョン。両リソースを同一リージョンに配置 |
json{
"mcp": {
"connector": {
"source": { "connectorId": "states" },
"configurations": [
{
"name": "StartExecution",
"parameterValues": {
"stateMachineArn": "arn:aws:states:REGION:ACCOUNT:stateMachine:Workflow"
}
}
]
}
}
}MCPクライアントはtools/listで利用可能なツールを確認し、tools/callで実行します。固定したARNはツールスキーマに現れず、クライアントから上書きできません。
セキュリティ: DescribeExecutionなどは実行ARNを引数に取るため、IAMのリソース制限が重要です。タスクトークン操作はIAMで実行単位の制限ができないため、トークン自体を秘密として扱ってください。性能: 新機能固有のベンチマークは未公表です。
一次情報: AWS公式発表 / Step Functions実装チュートリアル / コネクタAPI仕様
3. NVIDIA、TensorRT Edge-LLMでNemotronをローカルAPI配信 — 生成速度を実測
記事公開:2026年10月30日|実装ガイド(モデルの初発表ではない)
NVIDIAは、TensorRT Edge-LLMでDGX Spark 64GB上にNemotron-3.5 Lightningを導入する手順を公開しました。軽量なC++推論ランタイムとtrtedge CLIでモデルを取得し、TensorRTエンジンを構築できます。開発中はOpenAI互換APIで呼び出し、Jetson Thorなどのエッジ機器への展開を想定しています。
なぜ重要か
クラウドAPIを呼ばず、推論エンジンとモデルをローカル環境に置いてエージェントを開発・検証できます。性能評価の条件が具体的に示されているため、エッジ配備時の設計判断に使えます。
開発者向け:実装とAPI
bashpython -m pip install "tensorrt-edgellm[server]==0.11.1"
trtedge chat nvidia/NVIDIA-Nemotron-3.5-Lightning-30B-A3B-NVFP4
trtedge serve nvidia/NVIDIA-Nemotron-3.5-Lightning-30B-A3B-NVFP4 --host 127.0.0.1 --port 8000
curl -fsS http://127.0.0.1:8000/health/readyローカルの/v1/chat/completionsにChat Completions形式でリクエストできます。初回はモデル約21GBをダウンロードし、エンジンをビルドします。
| 評価条件:DGX Spark 64GB、出力128トークン、batch=1 | DSparkなし | DSparkあり(draft 3) |
|---|---|---|
| HumanEval入力:平均生成速度 | 73.4 tokens/s | 126.9 tokens/s |
| HumanEval入力:TTFT中央値 | 98.1 ms | 98.7 ms |
| SpeedBench 1K:平均生成速度 | 73.3 tokens/s | 108.5 tokens/s |
評価条件: DGX OS 7.6.0、CUDA 13、TensorRT 10.16.1.11、TensorRT Edge-LLM 0.11.1、NVFP4、thinking有効、同時ストリーム1本。DSpark有効時のピーク総メモリはOS込み27.9GBでした。料金: ローカル推論APIの独立したトークン単価はなく、ハードウェア・運用費とモデルのライセンス確認が必要です。利用条件: NVIDIA対応環境が必要で、MacBook Air等のCPUだけで同じ性能が得られるという意味ではありません。
一次情報: NVIDIA公式技術記事
4. 【日本】Kiro CLIの自律開発を1か月検証 — 資格情報・差分・マージの境界設計
記事公開:2026年10月30日|国内開発者の寄稿事例
AWS日本語ブログで、BrightFlowの開発者がKiro CLIを実装担当とする自作BRIDGEの約1か月の運用を報告しました。計画とレビューを行う外部AIと、実際にコードを変更するKiro CLIを分離します。新しいKiro製品の発表ではなく、権限と実行結果を検証する実践的な構成です。
なぜ重要か
AIに「このファイルだけ変更して」と指示しても、それだけで制限は保証されません。資格情報を渡さない、操作を固定する、実差分を検証する、マージするコミットを固定するという境界を、実行基盤で強制する考え方が重要です。
開発者向け:API・実装・評価
| 境界 | 実装 |
|---|---|
| 資格情報 | 計画側AIはGitHubトークン・Kiro APIキーを保持せず、許可されたMCPツールだけを呼ぶ |
| READ/WRITE | inspect_app・inspect_pr等の読み取りと、execute_dev_task等の書き込みを分離 |
| 変更範囲 | タスクごとに許可ファイルを宣言し、実行後のGit差分と照合 |
| OS隔離 | Kiro CLIプロセスをbubblewrapとseccompでサンドボックス化 |
| マージ | レビュー時のexpectedHeadShaをGitHub Merge APIのshaへ渡してHEAD一致を確認 |
運用実績: 2026年9月11日〜10月12日にPR624件、マージ317件(約51%)。未マージPRの多くは差分なし・疎通確認用など、そもそもマージが不要なものでした。これは特定チームの運用ログであり、開発品質の一般的な比較ベンチマークではありません。
API: 独自MCP、Kiro CLI、GitHub API。料金: BRIDGE自体の定価はなく、関連サービスと実行基盤の費用は別途。利用条件: 記事は寄稿者の環境を示すもので、AWSが推奨する標準構成ではありません。2026年10月時点のKiro標準Permissions・Workflows等で代替できる部分も明記されています。
一次情報: AWS日本語ブログの実運用報告
5. NVIDIA、Dynamo推論基盤をKubernetesで再現するAICR Recipeを解説
記事公開:2026年10月30日|分散LLM推論の実装ガイド
NVIDIAは、AI Cluster Runtime(AICR)の検証済みRecipeを使ってDynamoの分散推論環境をKubernetesに展開する方法を公開しました。モデルサーバーだけでなく、GPUドライバー、GPUの割当て、gang scheduling、ノード監視、Gateway APIなどの構成要素を整合させます。
なぜ重要か
LLMの本番運用では、モデルが起動するだけでは不十分です。KV-cacheの再利用、ワーカー配置、リクエスト経路、障害検知まで含めた再現性が、長い会話やAgentic Workflowの応答時間と運用安定性に影響します。
開発者向け:API・構築手順
| 項目 | 公式記事の内容 |
|---|---|
| API | DynamoGraphDeployment CRD(nvidia.com/v1beta1)、AICR CLI |
| バージョン | AICR v1.0.0の検証済みRecipeはDynamo Platform 1.4.2を固定 |
| GPU | NVIDIA GPU Operator、DRA Driver、Node Feature Discovery |
| スケジューラ | KAI Scheduler、Grove |
| 監視 | Prometheus、NVSentinel等 |
| 経路1 | Dynamo FrontendがKV-cacheと負荷を考慮してワーカーへ転送 |
| 経路2 | Gateway API+EPPがワーカーを選び、GatewayがHTTPを転送 |
| 評価対象 | EKS上のGB200/GB300 NVL72向け構成 |
| 料金 | OSS自体の統一料金なし。GPU/EKS/ネットワーク/監視は別途 |
bashaicr snapshot --namespace aicr-validation --output snapshot.yaml
aicr recipe --snapshot snapshot.yaml --intent inference --platform dynamo --output recipe.yaml
aicr validate --recipe recipe.yaml --snapshot candidate-snapshot.yaml --no-cluster --output dry-run.jsonAICRはRecipeに構成要素のバージョン・互換性制約・検証項目を記録します。Kubernetes上でDynamoGraphDeploymentを投入する前に、GPU割当て、スケジューリング、Ingress、監視の適合性を検証できます。性能: KV-cache-aware routingによる再計算削減の仕組みは説明されていますが、あらゆる構成での速度向上率は未公表です。
互換性の注意: 記事で固定されるDynamo 1.4.2と、1.5で導入されるネイティブRust EPPは実装が異なります。最新版を無条件に混在させず、Recipeの互換性検証を優先してください。
一次情報: NVIDIA公式技術記事
今日いちばん注目すべき1件
Amazon SageMaker AIのGPUパーティショニング
1件目のSageMaker AIのGPUパーティショニングを選びます。1基のGPUに複数のEmbedding・Reranker・小型モデルを隔離配置でき、東京リージョンにも対応しています。モデル名を指定する既存の推論APIを変えずに利用できる点も実務上の利点です。
ただし、最大7分割はGPU種別に依存し、7倍の性能を意味しません。分割レイアウトは稼働中に変更できず、分割エンドポイントではGPU使用率メトリクスも提供されません。RAGシステムで採用するなら、P95レイテンシ・メモリ容量・同時実行時の安定性・実際のインスタンス費用を比較することが重要です。
公式資料: AWSの提供開始発表 / SageMaker AIの実装仕様