Myrtle.ai、AMD Alveo V80コンピューティング・アクセラレータカード上で大規模モデルのマイクロ秒レベルのML推論レイテンシを実現

2025-07-29 21:22

ケンブリッジ(イギリス), 2025年7月29日 /PRNewswire/ --Myrtle.aiは、機械学習推論の高速化における先駆的企業として知られており、同社は本日、同社の推論アクセラレータ「VOLLO®」が AMD Alveo™ V80コンピューティング・アクセラレータカードに対応したことを発表しました。

Microsecond ML inference
Microsecond ML inference

VOLLOは、1マイクロ秒未満という業界最先端のML推論計算レイテンシを実現しながら、優れたスループット、電力効率、およびラックスペース効率を提供します。この新しいリリースにより、大規模モデルを扱うML開発者は、単一のFPGA上で動作させることで、極めて低いレイテンシの恩恵を受けることが可能になります。たとえば、2,200万パラメータの3層LSTMモデルは、p99レイテンシが10マイクロ秒未満で動作します。さらに大規模なモデルであっても、複数のFPGAに分割(シャーディング)して実行することで、依然として競合ソリューションよりも低いレイテンシを実現できます。

VOLLOは、金融取引、無線通信、サイバーセキュリティ、ネットワーク管理など、極限まで低いレイテンシでML推論を実行することが、セキュリティ、安全性、収益性、効率性、コスト面での優位性につながる幅広い分野で高い需要があります。

「VOLLOへの需要は両面から来ています。」と、Myrtle.aiのCEOであるPeter Baldwin氏は述べています。「一定のレイテンシ制約があるお客様にとっては、これまで小規模なモデルでしか達成できなかったレイテンシで、より大規模なモデルを実行できるようになったことに大変満足されています。また、特定のモデルに対して可能な限り低いレイテンシを求めるお客様もいらっしゃいます。単一のFPGA上で実行可能なモデルのサイズを拡大できたことは、両者にとって大きな助けとなりました。」

「メモリ集約型ワークロード向けに本番環境対応となったAMD Alveo V80コンピューティング・アクセラレータでVOLLOがサポートされることを大変嬉しく思います。」と、AMDのデータセンター向けFPGA事業ディレクターであるGirish Malipeddi氏は述べています。「AMDの顧客は、VOLLOを用いることで非常に低いレイテンシでML推論を実行できるようになり、また、VOLLOの実行に適したコンピューティング・アクセラレータを購入したい方には、VOLLOがこれまでに対応した中で最大のモデル容量を持つ単一FPGAであるAlveo V80を選択するという選択肢が提供されます。」

Alveo V80カードは、2.6M LUTのロジック密度、32GBのHBM、さらに32GBのDDR4および800Gネットワークインターフェースを備えたAMD Versal™Adaptive SoCをベースにしています。このカードは、アプリケーションに応じてハードウェアを柔軟に適応させるFPGAファブリックを特徴とし、大規模なデータセットやメモリ集約型の計算処理に対応するHBM2eを組み合わせています。

ご興味のある方は、本日よりvollo.myrtle.aiからML向けのVOLLOコンパイラをダウンロードし、ご自身のモデルがAMD Alveo V80コンピューティング・アクセラレータカード上でどのようなレイテンシを達成できるかをお確かめいただけます。

Myrtle.aiについて

Myrtle.aiは、主要なFPGAサプライヤー各社のFPGAベースプラットフォーム上で、世界水準の推論アクセラレータを提供するAI/MLソフトウェア企業です。Myrtleは、あらゆる種類のMLネットワークに対応するニューラルネットワークの専門知識を有しており、FinTech、音声処理、レコメンデーション向けにアクセラレータを提供してきました。

AMDAMDロゴ、AlveoVersal、およびこれらの組み合わせは、Advanced Micro Devices, Inc.の商標です。

写真:https://mma.prnasia.com/media2/2739187/Myrtle_ai.jpg?p=medium600
ロゴ:https://mma.prnasia.com/media2/2739186/Myrtle_ai_Logo.jpg?p=medium600

  1. タイ 2日連続でクレーン落下 2つの現場は同じ建設会社が工事請け負う アヌティン首相は運輸省に契約解除を指示
  2. 大阪知事・市長が辞職表明 ダブル出直し選挙で「都構想」挑戦 吉村知事「大阪の未来・成長のためにも必要だと判断」
  3. “中道勢力”立憲×公明 新党結成で合意 “野合”で解党の歴史も…有権者はからは賛否「期待感」「選挙に勝つため…」【news23】
  4. 【独自】立憲・公明の新党名は「中道改革連合」の方針固める
  5. 国道で多重事故 信号待ちの車列に突っ込んだか 5台巻き込まれる 運転していた60代くらいの男性が意識不明で搬送 50代男性2人も搬送 兵庫・西宮市
  6. ミニストップ Xフライドポテト ベビースターラーメンチキン風味 1/16 ~発売☆ おやつカンパニー共同開発パウダーをふりかけて◎ 期間限定セット割やアプリプレゼントも!
  7. 事故の瞬間映像 タイでクレーン落下 2日連続 30人以上死亡
  8. 「看過できない水準」横浜市現役・人事部長が異例の会見 山中竹春市長にパワハラの疑いがあるとして… 市長は“事実無根”と否定
  9. 山下智久デザイン Onitsuka Tiger『MEXICO 66 NM L9』発表! 山下「日常に寄り添ってくれている友人のような存在」
  10. アサヒビール 去年12月売上高は前年比2割以上減 サイバー攻撃の影響で
  1. 事故の瞬間映像 タイでクレーン落下 2日連続 30人以上死亡
  2. 国道で多重事故 信号待ちの車列に突っ込んだか 5台巻き込まれる 運転していた60代くらいの男性が意識不明で搬送 50代男性2人も搬送 兵庫・西宮市
  3. “中道勢力”立憲×公明 新党結成で合意 “野合”で解党の歴史も…有権者はからは賛否「期待感」「選挙に勝つため…」【news23】
  4. タイ 2日連続でクレーン落下 2つの現場は同じ建設会社が工事請け負う アヌティン首相は運輸省に契約解除を指示
  5. 立憲・公明が「新党結成」で合意 高市総理に走る衝撃、78選挙区で当落逆転の予測も【Nスタ解説】
  6. ミニストップ Xフライドポテト ベビースターラーメンチキン風味 1/16 ~発売☆ おやつカンパニー共同開発パウダーをふりかけて◎ 期間限定セット割やアプリプレゼントも!
  7. 大阪知事・市長が辞職表明 ダブル出直し選挙で「都構想」挑戦 吉村知事「大阪の未来・成長のためにも必要だと判断」
  8. 「看過できない水準」横浜市現役・人事部長が異例の会見 山中竹春市長にパワハラの疑いがあるとして… 市長は“事実無根”と否定
  9. 【なだれ注意報】岡山県・津山市、真庭市、鏡野町に発表(雪崩注意報) 16日04:05時点
  10. アサヒビール 去年12月売上高は前年比2割以上減 サイバー攻撃の影響で
  11. 山下智久デザイン Onitsuka Tiger『MEXICO 66 NM L9』発表! 山下「日常に寄り添ってくれている友人のような存在」
  12. 北海道で最大震度2の地震 北海道・浜中町、根室市