Myrtle.ai、AMD Alveo V80コンピューティング・アクセラレータカード上で大規模モデルのマイクロ秒レベルのML推論レイテンシを実現

2025-07-29 21:22

ケンブリッジ(イギリス), 2025年7月29日 /PRNewswire/ --Myrtle.aiは、機械学習推論の高速化における先駆的企業として知られており、同社は本日、同社の推論アクセラレータ「VOLLO®」が AMD Alveo™ V80コンピューティング・アクセラレータカードに対応したことを発表しました。

Microsecond ML inference
Microsecond ML inference

VOLLOは、1マイクロ秒未満という業界最先端のML推論計算レイテンシを実現しながら、優れたスループット、電力効率、およびラックスペース効率を提供します。この新しいリリースにより、大規模モデルを扱うML開発者は、単一のFPGA上で動作させることで、極めて低いレイテンシの恩恵を受けることが可能になります。たとえば、2,200万パラメータの3層LSTMモデルは、p99レイテンシが10マイクロ秒未満で動作します。さらに大規模なモデルであっても、複数のFPGAに分割(シャーディング)して実行することで、依然として競合ソリューションよりも低いレイテンシを実現できます。

VOLLOは、金融取引、無線通信、サイバーセキュリティ、ネットワーク管理など、極限まで低いレイテンシでML推論を実行することが、セキュリティ、安全性、収益性、効率性、コスト面での優位性につながる幅広い分野で高い需要があります。

「VOLLOへの需要は両面から来ています。」と、Myrtle.aiのCEOであるPeter Baldwin氏は述べています。「一定のレイテンシ制約があるお客様にとっては、これまで小規模なモデルでしか達成できなかったレイテンシで、より大規模なモデルを実行できるようになったことに大変満足されています。また、特定のモデルに対して可能な限り低いレイテンシを求めるお客様もいらっしゃいます。単一のFPGA上で実行可能なモデルのサイズを拡大できたことは、両者にとって大きな助けとなりました。」

「メモリ集約型ワークロード向けに本番環境対応となったAMD Alveo V80コンピューティング・アクセラレータでVOLLOがサポートされることを大変嬉しく思います。」と、AMDのデータセンター向けFPGA事業ディレクターであるGirish Malipeddi氏は述べています。「AMDの顧客は、VOLLOを用いることで非常に低いレイテンシでML推論を実行できるようになり、また、VOLLOの実行に適したコンピューティング・アクセラレータを購入したい方には、VOLLOがこれまでに対応した中で最大のモデル容量を持つ単一FPGAであるAlveo V80を選択するという選択肢が提供されます。」

Alveo V80カードは、2.6M LUTのロジック密度、32GBのHBM、さらに32GBのDDR4および800Gネットワークインターフェースを備えたAMD Versal™Adaptive SoCをベースにしています。このカードは、アプリケーションに応じてハードウェアを柔軟に適応させるFPGAファブリックを特徴とし、大規模なデータセットやメモリ集約型の計算処理に対応するHBM2eを組み合わせています。

ご興味のある方は、本日よりvollo.myrtle.aiからML向けのVOLLOコンパイラをダウンロードし、ご自身のモデルがAMD Alveo V80コンピューティング・アクセラレータカード上でどのようなレイテンシを達成できるかをお確かめいただけます。

Myrtle.aiについて

Myrtle.aiは、主要なFPGAサプライヤー各社のFPGAベースプラットフォーム上で、世界水準の推論アクセラレータを提供するAI/MLソフトウェア企業です。Myrtleは、あらゆる種類のMLネットワークに対応するニューラルネットワークの専門知識を有しており、FinTech、音声処理、レコメンデーション向けにアクセラレータを提供してきました。

AMDAMDロゴ、AlveoVersal、およびこれらの組み合わせは、Advanced Micro Devices, Inc.の商標です。

写真:https://mma.prnasia.com/media2/2739187/Myrtle_ai.jpg?p=medium600
ロゴ:https://mma.prnasia.com/media2/2739186/Myrtle_ai_Logo.jpg?p=medium600

  1. “睡眠の新常識”世界的な権威が解説、エアコンはタイマー?朝まで使う?寝つけないときは?【Nスタ解説】
  2. 約14年間家賃を払い続け…電気代未払いで発見 神戸冷凍庫の切断遺体 逮捕の元妻は「言い分はありません」 殺害もほのめかす
  3. 「眠れない時に布団で悶々はNG?」「布団なしは?」夏の睡眠のギモンに世界的権威が回答【Nスタ解説】
  4. 東京・北区の小学校火災 音楽担当の女性教員が「洗濯物を乾かしていた」趣旨の説明 火元近くにはハンガーが20点以上…電気ストーブも通電状態
  5. 内田梨瑚被告が控訴しない方針固める 北海道・旭川の女子高校生転落死事件めぐり懲役27年の判決 旭川地裁は「殺人の実行行為にあたる」指摘
  6. ドン・キホーテの店員をボンネットに乗せたまま走行…車から振り落とす 40代の男女2人を逮捕 レギンス1着盗み逃走図る 名古屋市
  7. 紀子さま佳子さま 障害あるアーティストの作品鑑賞 おふたり揃って装いにもアート取り入れ
  8. 法廷に響く息子のむせび泣く声…訓練中の事故で死亡した陸自レンジャー隊員の遺族が国を相手取り提訴 妻は「夫の命は杜撰な訓練によって奪われた」
  9. バレー男子日本代表が無傷の5連勝!髙橋藍が最多22得点 記録的酷暑で“特別ルール”のフランスR初戦、セルビアに3-1勝利【ネーションズリーグ】
  10. 今年はお得!うなぎ500円値下げ!サクランボは「去年の半額」に?
  11. 「人だとは思わなかった」 軽貨物車で女性はね重傷負わせ逃走か 会社経営者の男(47)逮捕 茨城・守谷市
  12. 「ノンレム睡眠が長いほど良いわけではない」“睡眠の新常識”世界的な権威が解説、井上貴博キャスターの脳波を計測【Nスタ解説】