Myrtle.ai、AMD Alveo V80コンピューティング・アクセラレータカード上で大規模モデルのマイクロ秒レベルのML推論レイテンシを実現

2025-07-29 21:22

ケンブリッジ(イギリス), 2025年7月29日 /PRNewswire/ --Myrtle.aiは、機械学習推論の高速化における先駆的企業として知られており、同社は本日、同社の推論アクセラレータ「VOLLO®」が AMD Alveo™ V80コンピューティング・アクセラレータカードに対応したことを発表しました。

Microsecond ML inference
Microsecond ML inference

VOLLOは、1マイクロ秒未満という業界最先端のML推論計算レイテンシを実現しながら、優れたスループット、電力効率、およびラックスペース効率を提供します。この新しいリリースにより、大規模モデルを扱うML開発者は、単一のFPGA上で動作させることで、極めて低いレイテンシの恩恵を受けることが可能になります。たとえば、2,200万パラメータの3層LSTMモデルは、p99レイテンシが10マイクロ秒未満で動作します。さらに大規模なモデルであっても、複数のFPGAに分割(シャーディング)して実行することで、依然として競合ソリューションよりも低いレイテンシを実現できます。

VOLLOは、金融取引、無線通信、サイバーセキュリティ、ネットワーク管理など、極限まで低いレイテンシでML推論を実行することが、セキュリティ、安全性、収益性、効率性、コスト面での優位性につながる幅広い分野で高い需要があります。

「VOLLOへの需要は両面から来ています。」と、Myrtle.aiのCEOであるPeter Baldwin氏は述べています。「一定のレイテンシ制約があるお客様にとっては、これまで小規模なモデルでしか達成できなかったレイテンシで、より大規模なモデルを実行できるようになったことに大変満足されています。また、特定のモデルに対して可能な限り低いレイテンシを求めるお客様もいらっしゃいます。単一のFPGA上で実行可能なモデルのサイズを拡大できたことは、両者にとって大きな助けとなりました。」

「メモリ集約型ワークロード向けに本番環境対応となったAMD Alveo V80コンピューティング・アクセラレータでVOLLOがサポートされることを大変嬉しく思います。」と、AMDのデータセンター向けFPGA事業ディレクターであるGirish Malipeddi氏は述べています。「AMDの顧客は、VOLLOを用いることで非常に低いレイテンシでML推論を実行できるようになり、また、VOLLOの実行に適したコンピューティング・アクセラレータを購入したい方には、VOLLOがこれまでに対応した中で最大のモデル容量を持つ単一FPGAであるAlveo V80を選択するという選択肢が提供されます。」

Alveo V80カードは、2.6M LUTのロジック密度、32GBのHBM、さらに32GBのDDR4および800Gネットワークインターフェースを備えたAMD Versal™Adaptive SoCをベースにしています。このカードは、アプリケーションに応じてハードウェアを柔軟に適応させるFPGAファブリックを特徴とし、大規模なデータセットやメモリ集約型の計算処理に対応するHBM2eを組み合わせています。

ご興味のある方は、本日よりvollo.myrtle.aiからML向けのVOLLOコンパイラをダウンロードし、ご自身のモデルがAMD Alveo V80コンピューティング・アクセラレータカード上でどのようなレイテンシを達成できるかをお確かめいただけます。

Myrtle.aiについて

Myrtle.aiは、主要なFPGAサプライヤー各社のFPGAベースプラットフォーム上で、世界水準の推論アクセラレータを提供するAI/MLソフトウェア企業です。Myrtleは、あらゆる種類のMLネットワークに対応するニューラルネットワークの専門知識を有しており、FinTech、音声処理、レコメンデーション向けにアクセラレータを提供してきました。

AMDAMDロゴ、AlveoVersal、およびこれらの組み合わせは、Advanced Micro Devices, Inc.の商標です。

写真:https://mma.prnasia.com/media2/2739187/Myrtle_ai.jpg?p=medium600
ロゴ:https://mma.prnasia.com/media2/2739186/Myrtle_ai_Logo.jpg?p=medium600

  1. 卒業式の間に…卒業生の財布から現金盗まれる 50人以上が被害に 高校生活最後、ハレの日の犯行…「最悪です、今かよって」 栃木・宇都宮市の県立高校
  2. 【再逮捕】「XG」プロデューサー「SIMON」やエイベックス社員の2人の男ら4人 コカイン使用疑い 「SIMON」は容疑認める 警視庁
  3. 東急東横線 菊名駅と元町・中華街駅間 停電で運転見合わせ 停電の原因不明で調査中 運転再開見込み立たず
  4. 「船舶・貨物が人質にされ戦争の道具に」ペルシャ湾に日本人船員24人含む45隻の日本関連船舶が取り残されている 日本船主協会理事長
  5. 【 訃報 】声優・池田昌子さん(87) 脳出血で死去 「銀河鉄道999」メーテル役で一世を風靡 オードリー・ヘプバーンやメリル・ストリープの吹替も
  6. アメリカ・CIAが中国軍に“スパイ勧誘動画”「指導者が守るのは自身の利益だけ」幹部の相次ぐ失脚など中国軍の混乱続く中
  7. 大阪の幹線道路「新御堂筋」通行止め 2日ぶり一部(高架部分のみ)解除 下水道工事で鋼鉄管突出 下道部分の通行止め解除のめどは立たず
  8. 特急列車と乗用車が踏切で衝突 乗用車運転の男性死亡 特急の乗客乗員約560人にけがなし 茨城・水戸市 JR常磐線一部で一時約4時間半にわたり運転見合わせ
  9. 東急東横線 菊名~元町・中華街駅間で運転見合わせ 原因不明の停電の影響 運転再開は午後8時半以降か 乗客約1000人が降り徒歩で駅へ
  10. 【 10万人に1人の難病・間瀬翔太 】救急搬送された詳細を報告「金属のハンマー?で何かを叩いてる様な音が 聞こえてきたんです」【脳動静脈奇形】
  11. JR東日本あす(14日)民営化後初の運賃値上げ 定期券を駆け込み購入する人も 平均値上げ7.1% 「山手線」初乗り運賃 切符の場合150円から160円に 増収分は安全対策に
  12. イラン情勢でガソリン高騰…被災地でも嘆き ホルムズ海峡に機雷も?「日本のイージス艦も沈めれる」 一方で米西海岸が攻撃されるおそれも【news23】