Thom_Wolf· @Thom_Wolf · X·· 1 天前AI 评分
microagi 机器人数据传输
来自 @microagi 关于传输 PB 级机器人数据的文章中的一个有趣数据： 他们将一个仅做了小幅改动的 239 GB 数据集重新上传到 Hugging Face。实际通过网络传输的只有 2.6 MB，大约一分钟就完成了（！） 而且在大规模场景下，这种方式依然很划算，因为机器人录制内容高度重复（相同场景、相同装置）。随后由 @Cloudflare workers 将其分发到任意云端，>1 PB 只需约 $500 团队的精彩文章：microagi.ai/articles/deliver…
fun stat from @microagi’s write-up on shipping petabytes of robot data:
they re-uploaded a 239 GB dataset with small changes to Hugging Face. only 2.6 MB went over the network, done in about a minute (!)
and it keeps paying off at scale, because robot recordings are super repetitive (same scenes, same rigs). then @Cloudflare workers fan it all out to any cloud, >1 PB for ~$500
great write-up by the team: microagi.ai/articles/deliver…
来源：Thom_Wolf · x.com