用語集High Bandwidth MemoryHBMHBMとは、GPU上のメモリダイをロジックチップと積層して近距離に配置する高帯域幅メモリ技術です。通常のGDDR6メモリと比べて、単位面積当たりのメモリ帯域幅が大幅に高く、大規模AIモデルの学習・推論時に必要な大量データを高速にGPUコアへ供給できます。H100にはHBM3、A100にはHBM2eが採用されています。LLMの推論ではメモリ帯域幅がボトルネックになりやすいため、HBMの世代と容量はGPU選定において重要な指標のひとつです。用語集一覧に戻る