由北大-兔展AIGC联合实验室共同发起Open-Sora计划，目标是复现OpenAI的Sora模型。该计划通过结合视频VQ-VAE、Denoising Diffusion Transformer和条件编码器等关键技术组件，以实现Sora模型的核心功能。 项目主页与GitHub链接： 项目主页：https://pku-y... 阅读全文

Snap、加州大学默塞德分校、特伦托大学的研究人员发布论文介绍了一个名为Panda-70M的大型视频数据集，它包含了7000万个视频片段，每个片段都配有高质量的文本描述（即标题）。这个数据集的创建是为了提高视频理解和生成相关任务的性能，例如视频字幕生成、视频和文本检索以及文本驱动的视频生成。 项目主页：https://... 阅读全文

Lightrick公司宣布了其最新创新——LTX Studio，这是第一代生成式AI电影制作平台。对于那些想要在视频制作中引入AI元素的创作者来说，这是一个令人兴奋的消息。 LTX Studio不仅允许用户借助AI生成短片，还提供了对脚本、角色、镜头、风格、对话和情节等内容的详细编辑功能。这意味着，无论你是初学者还是专... 阅读全文

Video Background Removal tool是一款由推特网友@Mr_AllenT制作，在Hugging Face Spaces上运行的视频背景去除工具，该工具可以保留视频的主题去除复杂的背景，从而生成可以生成绿幕视频。不过在线版经常出现等待GPU的情况，或者直接报错，如果你的显卡好，可以尝试本地版。 Pi... 阅读全文

Morph x Stability AI联手推出创新视频创作方案。新世代技术助您轻松将创意化为生动视频。只需输入文字、图片或现有视频素材，Morph Studio的一站式生成工具即可帮助您打造精彩故事。无缝衔接各环节，每个灵感瞬间均可通过多重并行处理快速成片。... 阅读全文

来自清华大学、华为诺亚方舟实验室、中国科学院的研究人员推出VastGaussian，它用于大型场景的高质量重建和实时渲染。想象一下，你想要创建一个虚拟城市或者重现一个历史遗迹，并且希望这个虚拟场景能够以照片般真实的质量实时显示。VastGaussian就是为了解决这样的挑战而设计的。 项目主页：https://vast... 阅读全文

来自微软和理海大学的研究人员发布论文，基于已经发布的内容和他们自己的逆向工程，全面回顾了 Sora 的背景、相关技术、新兴应用、当前的局限性和未来的机遇。首先，追踪了Sora的开发历程，并深入研究了构建这个“世界模拟器”所使用的基础技术。接着，详细阐述了Sora在多个行业中的应用场景和潜在影响，涵盖电影制作、教育、营销... 阅读全文

Videotok是一个基于AI的短视频创作工具，只要输入文本即可创建适用于TikToks和Reels的短视频，自动匹配由AI生成的图片、声音和音乐。 地址：https://www.videotok.app... 阅读全文

CapCut（剪映海外版）推出视频生成功能，可以通过文本生成4秒的视频，支持多种4:3、9:16等多种比例的视频类型，支持中文提示词，每人每天可以免费生成五次。从生成效果来看尚可，但目前排队情况严重，生成一个视频可能要排队近100分钟，网站还出现打不开的情况，想试用的朋友可以等等看。    ... 阅读全文

OpenAI公开了AI视频生成（文生视频）模型Sora，它可以创建长达 60 秒的视频，其中包含高度详细的场景、复杂的摄像机运动和具有生动情感的多个角色。以下是介绍： 模型介绍： 功能特点： Sora能够创建包含多个角色、特定运动动作以及细腻主题和背景细节的复杂场景。它不仅能解析文本说明，还能深刻理解这些元素如何在物理... 阅读全文

阿里旗下达摩院打造的 I2VGen-XL，可以根据用户输入的静态图像和文本生成目标接近、语义相同的视频，生成的视频具高清 (1280 * 720)、宽屏 (16:9)、时序连贯、质感好等特点。目前在 HuggingFace space 和魔搭上线了 Demo，大家可以去试试。 项目主页：https://i2vgen-x... 阅读全文