
心理戦の非マス化。
新しいGPU出るのはやいなー。
ビット数がどんどん小さくなってくる。
Mixed PrecisionでFP16に、TPUではBF16に、そしてHopperではFP8か。
計算するときのビット数が少なくなれば、計算速度ももちろん、
搭載メモリの使い出も上がる。
心理戦の非マス化。
新しいGPU出るのはやいなー。
ビット数がどんどん小さくなってくる。
Mixed PrecisionでFP16に、TPUではBF16に、そしてHopperではFP8か。
計算するときのビット数が少なくなれば、計算速度ももちろん、
搭載メモリの使い出も上がる。