作者|子川
来源|AI先锋官
该论文的研究获得了最近ACM 用户界面软件和技术研讨会(UIST 2024)的最佳论文。打开手机,对着物理试卷拍张照片,再用鼠标轻轻一点,试卷里面的小车就自己滑下来了。物理作为公认的抽象性学科。如果能给电路图通上点,是不是就能摆脱抽象这个标签了!再回到运动学,如果物理试卷上的小人偶会自己滑下来,那是不是就不用绞尽脑汁的想该如何计算出人偶下落的时间是多久!如果能这样学物理,似乎高考物理提升个20分应该问题问题不大吧!上述所演示的画面以及技术均来自下面的这篇论文——“基于静态的教科书图表创建交互式和嵌入式的物理模拟”目前该技术还是处于白纸黑字的阶段,并没有相应的产品出来。也不确定需要多久才能与大家见面。不过相较于还是一篇论文,更让人感到好奇的是,这么牛叉叉的技术是如何实现的。该论文主要介绍了一种名为“Augmented Physics”的新技术。当你看到一幅静态的物理图示,比如牛顿运动定律的图解时,可能会看到一个球体在斜面上滚动的图。虽然图示很好,但你只能在脑海里疯狂的想象这个球如何移动,如何加速。而“Augmented Physics”这项技术的目的就是为了解决这道难题。让物理课本上静态图示变得动起来,变成可以实际操作的模拟体验。该技术的核心是一个管道,当用户上传一张图片,先对这张图片进行解读。系统就会利用图像处理算法,例如“Segment Anything”模型,从原始图像中“切割出”不同的部分,例如球体、斜面和箭头。一旦分割完成,系统会识别这些组件的性质,比如哪些是动态的(比如滚动的球体),哪些是静态的(比如不动的斜面)接下来,系统就会为这些分割出的元素分配特定的物理角色。例如,将球体标记为“动态对象”和“受重力影响”,而斜面则标记为“静态对象”。系统就像在给每个角色编写简历,告诉它们在模拟中要扮演什么样的角色。完成角色分配后,系统开始构建可互动的物理模拟。比如使用像 MatterJS 这样的物理引擎,这是一种能够模拟物理现象(如重力、碰撞、摩擦等)的工具。那实际的效果到底如何呢?成功率到底是多少?
在论文中,该团队公布了技术评估的结果,显示不同元素的模拟成功率为:运动学64%、光学44%、电路40%(经过小幅调整可提高至62%)、动画66%。
成绩还不错,不过,在这里小编还是得轻轻朝你泼一桶凉白开。
你都没有实物,莫不是在学我老板一样画大饼。
扫码邀请进群,我们带你一起来玩转ChatGPT、GPT-4、文心一言、通义千问、讯飞星火等AI大模型,顺便学一些AI搞钱技能。
往期文章回顾