01インフラ/AWS
SageMaker InferenceがNVIDIA MIGによるGPU分割に対応
AWSは、Amazon SageMaker InferenceでNVIDIA Multi-Instance GPU(MIG)を使ったGPUパーティショニングのサポートを発表しました。物理GPUを独立した区画に分け、各区画に計算資源とメモリを割り当てます。利用できるのはInference Componentsを使うエンドポイントで、単一モデル、サーバーレス、異種インスタンスプールのエンドポイントは対象外です。
発表元の記事を読む(新しいタブで原文を開く) 編集図解 · AI coach発表のポイント
- 発表主体
- AWS
- 機能
- NVIDIA MIGを用いたGPUパーティショニング
- 対象
- Inference Componentsを使用するエンドポイント
- 対象外
- 単一モデル、サーバーレス、異種インスタンスプール
発表からの一節原文引用which uses NVIDIA Multi-Instance GPU (MIG) to divide a physical GPU into independent partitions.
日本語訳NVIDIA Multi-Instance GPU(MIG)を使い、物理GPUを独立したパーティションに分割します。
AWS(新しいタブで原文を開く)出典:AWS(新しいタブで原文を開く)SageMaker Inference now supports Multi-Instance GPU to maximize GPU utilization for model endpoints
02研究/Hugging Face
ロボット学習・評価向け公開シミュレーションToyBlocks
Hugging Face掲載の記事は、ロボット学習を調べるための「FoundationWorlds」と、その最初の環境であるToyBlocksを紹介しました。ToyBlocksはロボットアームと卓上のブロックを対象にした公開シミュレーションで、タスクや訓練デモを自動生成します。高水準の推論モデルと低水準の行動モデルを組み合わせる実験や、未学習タスクへの一般化の評価を想定しています。
発表元の記事を読む(新しいタブで原文を開く) 編集図解 · AI coach発表のポイント
- 発表内容
- FoundationWorldsとToyBlocksの紹介
- 公開形態
- オープンなシミュレーションフレームワーク
- 対象環境
- ロボットアームと卓上ブロック
- データ生成
- タスクとシミュレーション上のデモを自動生成
発表からの一節原文引用Our first foundation world is ToyBlocks: an open simulation framework built around a robot arm and blocks on a tabletop.
日本語訳最初のFoundationWorldであるToyBlocksは、ロボットアームと卓上のブロックを中心に構成したオープンなシミュレーションフレームワークです。
Hugging Face(新しいタブで原文を開く)出典:Hugging Face(新しいタブで原文を開く)ToyBlocks: A controlled world for robot learning and evaluation
03開発/Hugging Face
IBM Design Languageに沿う資料生成モデルPalette
Hugging Face掲載の記事でIBM Researchの著者らは、組織固有のデザイン言語に沿ったスライドを生成する20Bモデル「Palette」を説明しました。LoRAで微調整したモデルを、構成やデザインを決める「designer」と、各スライドのコードを書く「coder」の役割として使います。合成データは約1,000件のデッキ、約1万枚のスライドからなり、生成後には重なりやはみ出しを確認・修復する仕組みを通します。
発表元の記事を読む(新しいタブで原文を開く) 編集図解 · AI coach発表のポイント
- 開発者として記載
- IBM Researchの著者ら
- モデル規模
- 20B
- 学習方法
- LoRAによる微調整
- 合成データ
- 約1,000デッキ、約1万スライド
発表からの一節原文引用a designer plans the deck and a coder draws each slide.
日本語訳デザイナーがデッキを計画し、コーダーが各スライドを描画します。
Hugging Face(新しいタブで原文を開く)出典:Hugging Face(新しいタブで原文を開く)Palette: teaching a small model to build decks in your design language