AI算力膨脹

目前AI最大的難題在於算力的快速膨脹,AI算力需求每3.4個月會翻一倍,然而硬體的進展摩爾定律每兩年翻一倍。

即便使用堆晶片數量方式,也只是杯水車薪,今年可以16個晶片在一台主機上,明年能256片嗎? 後年能4096片嗎? 堆晶片可以說幾乎只有一次性的效果。