每日学术速递3.13
创始人
2024-06-02 14:34:47
0

CV - 计算机视觉 |  ML - 机器学习 |  RL - 强化学习 | NLP 自然语言处理  

Subjects: cs.CV

1.PAC-NeRF: Physics Augmented Continuum Neural Radiance Fields for Geometry-Agnostic System Identification(ICLR 2023)

标题:PAC-NeRF:用于几何不可知系统识别的物理增强连续体神经辐射场

作者:Xuan Li, Yi-Ling Qiao, Peter Yichen Chen, Krishna Murthy Jatavallabhula, Ming Lin

文章链接:https://arxiv.org/abs/2303.05512

项目代码:https://sites.google.com/view/PAC-NeRF

摘要:

        现有的视频系统识别方法(估计物体的物理参数)假设已知物体的几何形状。这排除了它们在对象几何形状复杂或未知的绝大多数场景中的适用性。在这项工作中,我们的目标是从一组多视图视频中识别表征物理系统的参数,而无需对对象几何或拓扑进行任何假设。为此,我们提出了“物理增强连续体神经辐射场”(PAC-NeRF),以从多视图视频中估计高度动态对象的未知几何形状和物理参数。我们将 PAC-NeRF 设计为仅通过强制神经辐射场遵循连续介质力学守恒定律来产生物理上合理的状态。为此,我们设计了神经辐射场的混合欧拉-拉格朗日表示,即,我们对 NeRF 密度和颜色场使用欧拉网格表示,同时通过拉格朗日粒子对流神经辐射场。这种混合欧拉-拉格朗日表示法将高效的神经渲染与材料点法 (MPM) 无缝融合,以实现稳健的可微分物理模拟。我们验证了我们提出的框架在各种材料(包括弹性体、橡皮泥、沙子、牛顿和非牛顿流体)上的几何和物理参数估计的有效性,并在大多数任务中展示了显着的性能提升。

2.Open-world Instance Segmentation: Top-down Learning with Bottom-up Supervision

标题:开放世界实例分割:自下而上监督的自上而下学习

作者:Tarun Kalluri, Weiyao Wang, Heng Wang, Manmohan Chandraker, Lorenzo Torresani, Du Tran

文章链接:https://arxiv.org/abs/2303.05503

项目代码:https://tarun005.github.io/UDOS/

摘要:

        许多自上而下的架构(例如分割)在预定义的封闭世界分类法上进行训练和测试时取得了显着的成功。然而,当部署在开放世界中时,它们表现出对可见类的显着偏见并且性能显着下降。在这项工作中,我们提出了一种用于开放世界实例分割的新方法,称为自下而上和自上而下的开放世界分割 (UDOS),它在自上而下的学习框架内结合了经典的自下而上分割算法。UDOS 首先使用受自下而上分割的弱监督训练的自上而下网络预测部分对象。自下而上的分割是类别不可知的,不会过度适应特定的分类法。然后将部分掩码送入基于亲和力的分组和细化模块,以预测稳健的实例级分割。UDOS 既享有自上而下架构的速度和效率,又享有自下而上监督对不可见类别的泛化能力。我们从 5 个具有挑战性的数据集(包括 MS-COCO、LVIS、ADE20k、UVO 和 OpenImages)验证了 UDOS 在多个跨类别和跨数据集传输任务上的优势,全面实现了对最先进技术的显着改进.

3.3D Video Loops from Asynchronous Input

标题:来自异步输入的 3D 视频循环

作者:Ioannis Siglidis, Nicolas Gonthier, Julien Gaubil, Tom Monnier, Mathieu Aubry

文章链接:https://arxiv.org/abs/2302.01660v2

项目代码:https://github.com/ysig/learnable-typewriter

摘要:

        循环视频是可以无限循环播放的短视频剪辑,没有明显的接缝或瑕疵。它们提供了一种非常有吸引力的方式来捕捉自然场景的动态。现有方法主要限于二维表示。在本文中,我们向前迈进了一步,提出了一种实用的解决方案,可以在动态 3D 循环场景上实现身临其境的体验。关键挑战是考虑来自异步输入的每个视图循环条件,同时保持 3D 表示的视图一致性。我们提出了一种新颖的稀疏 3D 视频表示,即 Multi-Tile Video (MTV),它不仅提供了视图一致的先验,而且大大减少了内存使用,使 4D 体积的优化变得易于处理。然后,我们引入了一个两阶段流水线来从完全异步的多视图视频构建 3D 循环 MTV,没有时间重叠。在优化过程中采用了一种基于视频时间重定向算法的新型循环损失来循环 3D 场景。我们框架的实验表明,即使在移动设备上也能实时成功生成和渲染逼真的 3D 循环视频。

更多Ai资讯:公主号AiCharm
在这里插入图片描述

相关内容

热门资讯

华富成长企业精选股票基金财报解... 华富成长企业精选股票型证券投资基金2024年年报已发布,各项关键数据变动值得投资者关注。报告期内,该...
滚动更新丨美股三大期指跌势不止... 18:53 美股三大期指跌势不止,道指期货、纳斯达克100指数期货、标普500指数期货均跌超3%。其...
【我们的节日·清明(新绿)】追... 转自:荔枝新闻在雨花台烈士纪念馆内展陈着一张冷少农烈士亲属的合照。在照片后排,冷少农的儿媳怀抱着一位...
2025年电动汽车百人会启示:... 转自:上观新闻日前,中国电动汽车百人会论坛(2025)在北京钓鱼台国宾馆举行。作为全球新能源汽车领域...
河北3市最新任免!区长、副县长... 石家庄石家庄市桥西区第十七届人民代表大会第六次会议公告石家庄市桥西区第十七届人民代表大会第六次会议于...
商务部:中方敦促美方取消单边关... 来源:人民网 人民网北京4月4日电 (记者孙阳)据商务部消息,美东时间4月2日,美方宣布对包括中国在...
【地评线】荔枝网评:清明祭英烈... 特约评论员/刘连福青柳吐新,纸灰化蝶,又是一年清明至。这个绵延2500余年的传统节日,既承载着“墓前...
江苏扬州政府大院清明假期继续敞... 中新网扬州4月4日电 (朱晓颖 崔佳明)为了让游客出行更加便利,清明假期,江苏扬州市政府大院继续“开...
知名女演员官宣:捐赠全部资产! 71岁的中国香港资深演员陈喜莲近日宣布将其全部资产捐赠给慈善机构这位曾在20世纪80年代与周润发搭档...
民革党员忆台湾“寻亲”之旅:缅... 来源:中国新闻网 中新网杭州4月4日电 (郭其钰)青山处处埋忠骨,时至清明寄哀思。清明节之际,浙江杭...
AUDI 首款概念车 亮相上汽... 转自:上观新闻近日,豪华电动品牌AUDI首款概念车AUDI E惊喜亮相位于上海静安的上汽奥迪进取汇,...
商务部就中方在世贸组织起诉美“... 转自:商务部网站4月4日,商务部新闻发言人就中方在世贸组织起诉美“对等关税”措施答记者问。问:据悉,...
可能是利川籍!在韩中国人民志愿... 转自:恩施发布让英魂归故里,让更多志愿军烈士回到祖国、找到亲人,是全社会的共同心愿!为此,退役军人事...
以军在加沙地带北部开展地面行动 新华社耶路撒冷4月4日电(记者陈君清 王卓伦)以色列国防军4日说,以军当天开始在加沙地带北部的舒加艾...
大调整!“国泰君安”官宣! 本报记者 罗辑 北京报道4月3日晚间,国泰君安正式更名国泰海通后,发布首份公告“官宣”了新一届领导班...
上海的这些农村基层一线书记们,... 转自:上观新闻实施乡村振兴战略、推进城乡融合发展走在前列,走出一条超大城市城乡融合发展的新路子,是上...
【地评线】新华时论︱相信中国就... 春日的中国,绿意盎然。习近平主席在会见国际工商界代表时的话语掷地有声:“中国推进改革开放坚定不移,开...
中方宣布对美国所有进口商品加税 【#中方宣布对美国所有进口商品加税#】#对原产美国所有进口商品加征34%关税##中国出手反制美国# ...
11箭齐发!中方坚决反制美“对... 美东时间4月2日,美方宣布对所有贸易伙伴征收“对等关税”。中方对此坚决反对,并表示将坚决采取反制措施...
中国14颗卫星驰援缅甸!为何天... 转自:北京日报客户端3月28日缅甸突发7.9级地震,造成重大人员伤亡和财产损失,日前中国的救援队伍已...