热门话题
#
Bonk 生态迷因币展现强韧势头
#
有消息称 Pump.fun 计划 40 亿估值发币,引发市场猜测
#
Solana 新代币发射平台 Boop.Fun 风头正劲
感觉这个话题没有得到足够的关注!如果是真的并且正在推出,那可真是大事。你已经听到GPU/ASIC的专家谈论跨数据中心的扩展。这不仅仅是位于州界附近的数据中心。谈论的是超过1000公里的距离。
如果是真的,这提供了一种潜在的解决方案,克服一些物理基础设施/电力限制,因为你不需要在一个地点拥有所有的MW/GW,而可以在多个地点(以及那些约束较少的地方)之间更有效地联网。谁会接受,谁不会?让我们听听。
分布式训练来了?"@EpochAIResearch的研究表明,在两个十几个地点进行10GW的训练运行是可行的——这些地点通过一个跨越数千公里的网络连接。利用未充分利用的发电作为电力可用性的代理,我们识别出美国一个4800公里的23个地点的网络,理论上可以支持一个10GW的分布式AI集群……进行大规模去中心化的训练运行是可行的,而不会大幅增加训练时间或预算。"



热门
排行
收藏

