来自浙江大学、上海科技大学、 重庆大学、 阿里巴巴集团和哈尔滨工业大学的研究团队推出HyperLLaVA，它是一种用于增强多模态大型语言模型（MLLMs）性能的技术。HyperLLaVA的目标是改进现有的MLLMs，如LLaVA，通过动 ...... 阅读全文

慕尼黑大学的研究团队发布论文介绍了一种名为Zigzag Mamba（ZigMa）的新型扩散模型，它是为了解决现有扩散模型在处理视觉数据时的可扩展性和计算复杂性问题。扩散模型是一种深度学习技术，用于生成图像、视频等内容 ...... 阅读全文

谷歌发布论文介绍了一个名为RadSplat的方法，它是一种用于实时渲染复杂场景的轻量级技术。实时渲染是指能够即时生成图像的过程，这对于视频游戏、虚拟现实和增强现实等应用非常重要。RadSplat结合了辐射场（Radiance ...... 阅读全文

这篇论文介绍了一种新颖的方法，使用进化算法来自动化创建强大的基础模型。基础模型（Foundation Models）是指那些经过大量数据训练，能够处理多种任务的人工智能模型，比如语言理解和生成、数学推理等。在人工智能 ...... 阅读全文

来自悉尼大学的研究团队论文介绍了一种名为EfficientVMamba的轻量级视觉模型，它是一种结合了全局和局部特征提取能力的网络架构。想象一下，你有一个超级助手，它能够在保持图像细节的同时，快速地从大量图片中识别 ...... 阅读全文

这篇论文介绍了一种名为NeuFlow的新型光学流估计架构，这是一种在机器人和其他边缘设备上实时、高精度估计图像中物体运动的技术。光学流估计在计算机视觉领域扮演着重要角色，它帮助我们理解图像中物体是如何移动的 ...... 阅读全文

这篇论文介绍了一个名为Uni-SMART的创新模型，它是一个万能的科学多模态分析和研究转换器，专门设计用于深入理解科学文献中的多模态内容。随着科学知识的快速增长，学术论文的数量急剧增加，这使得深入分析文献变得 ...... 阅读全文

这篇论文介绍了一个名为VideoAgent的系统，它模仿人类理解长视频的认知过程，使用大型语言模型（LLM）作为中心代理，来迭代地识别和编译关键信息以回答问题。VideoAgent将视频理解过程视为一系列状态、动作和观察的 ...... 阅读全文

这篇论文介绍了一个名为VideoAgent的多模态智能代理，它是为了更好地理解和解释视频内容而设计的。想象一下，你有一个视频，里面有很多人和物体在移动，还有很多事情发生。VideoAgent就像一个超级助手，能够理解视频 ...... 阅读全文

这篇论文介绍了一个名为MindEye2的新型模型，它能够从大脑活动（fMRI）中重建出人们所看到的视觉图像。这个模型的出现，标志着我们离理解人类视觉感知的神经基础又近了一步。MindEye2的创新之处在于，它能够使用仅有 ...... 阅读全文

来自清华大学、新加坡国立大学和中国科学院大学推出大型多模态模型LLaVA-UHD，它能够高效地处理任意宽高比和高分辨率的图像。在现实世界中，图像的宽高比和分辨率多种多样，这对于大型多模态模型（LMMs）在理解和处 ...... 阅读全文

IBM推出新型大语言模型Larimar，它通过引入一个分布式的情节记忆系统来增强LLM的能力。Larimar的记忆系统允许动态、一次性地更新知识，而不需要进行计算成本高昂的重新训练或微调。例如，如果我们有一个提供天气预报 ...... 阅读全文