rohanpaul_ai· @rohanpaul_ai · X·· 1 小时前AI 评分
SKY-001 发布面向工程设计的世界模型,单张照片生成零件树
Skyfall AI 发布面向工程设计的世界模型 SKY-001,可将一张发动机或汽车照片展开为完整零件树,并生成构建每个零件的分步草图。该模型由两个部分协作:Hierarchical Composer 逐层决定物体由什么组成,Construction World Model 将每个叶子零件展开为有序视觉状态,包括每次操作后的实体和连接状态的 2D 草图。
世界模型大多被用于生成游戏、视频和机器人训练场景。
但 SKY-001 发布了一个用于解决工程设计的世界模型:它能将一张发动机或汽车的照片转化为完整的零件树,以及构建每个零件的分步草图。
Skyfall AI 表示,在 CAD 和平面图设计方面,专用世界模型的成本比最强的通用 LLM 低 150 到 185 倍,同时精度相当。
它接收一张产品图像,将其展开为装配体和零件的树状结构,然后预测构建每个零件的草图与操作序列。
两个模型分工协作。一个分层组合器(Hierarchical Composer)逐层决定物体由什么构成。
一个构建世界模型(Construction World Model)将每个叶子零件展开为有序的视觉状态:每次操作后的实体,以及将一个状态转变为下一个状态的 2D 草图。
从一张 VMS-85 发动机的照片出发,组合器生成了一个五层零件树,一直细化到隐藏在外壳内部的衬套和轴。
来源:rohanpaul_ai · x.com