12月24日,探讨AI生成视频与3D内容的全球最新趋势!硅谷新公司/最新技术/创业机遇|嘉程创业流水席第204期
12.18.2023 | 嘉程资本:创新者的第一笔钱 | 嘉程创业流水席
北京时间本周日上午10:00,与Luma AI产品与增长负责人戴高乐、清华大学北京信息科学与技术国家研究中心副研究员赵黎、AI.Talk创始人赵汗青深度探讨AI生成视频与3D内容的全球最新趋势!在学习中开启圣诞,嘉程祝席友们圣诞快乐!

在以Stable Diffusion为代表的文生图模型大火一年多后,最近一个月又涌动了一些浪潮:我们看到AI视频生成的技术和产品加速爆发!
近日,新推出的AI工具Pika 1.0发布后引发热议,让视线再次聚焦于AI生成视频领域。Pika 1.0的效果与Runway的Gen-2相媲美,网上流出的第一批内测用户生成的视频在连贯性、一致性、逼真度上都非常惊艳;其亦专注于C端用户,让用户更轻松地创作高水准的视频内容。Pika公司在前6个月便成功筹集了总计5500万美元的资金,成为备受瞩目的新秀。最近,李飞飞的斯坦福团队也同谷歌合作,推出了用于生成逼真视频的扩散模型W.A.L.T(Window Attention Latent Transformer)。
在此之前,Transformer 架构已经在许多不同领域取得了巨大成功,但图像和视频生成式建模领域的主导范式是扩散模型。而WALT将Transformer架构引入了视频生成,首次在公共基准上通过实验证明 Transformer 在隐视频扩散中具有卓越的生成质量和参数效率。
除此之外,各种AI视频剪辑工具也在海内外蓬勃发展。AI自动剪辑视频工具OpusClip,能够将长视频自动剪辑为多条短视频,在YouTube引发热烈讨论,不少博主都参与进该项工具的评测和使用中;同时,海外版剪映——Cap Cut在今年1月份月活已经超过2亿,并登顶多个地区和国家的应用商店,取得傲人成绩。企业/个人用户对于视频剪辑工具的需求爆发,也正预示着AI视频制作工具在市场上有着巨大的潜力和发展空间。
某种意义上来讲,视频和3D内容,都是二维内容的另一维延伸——一个向时间轴延伸,一个向空间Z轴延伸。近日,Stability AI推出了Stable Zero 123,可以从常规图片创建3D图像。「太极」编程语言作者胡渊鸣团队发布文生3D新产品Meshy AI,能够提供三种易上手的使用方式,包括文本转 3D、图像转 3D以及从文本到纹理。另在最近的一篇论文中,研究者们提出了“MeshGPT”,受大语言模型进步的启发,MeshGPT开发了一种基于序列的方法,将三角形网格作为三角形序列进行自回归生成。这种方法能生成干净、连贯和紧凑的网格,具有边缘锐利和高保真的特点。其本质是将Transformer算法加入3D生成算法里,生成干净、连贯和紧凑的三角形网格,显著提高了生成 3D 网格的质量。
嘉程资本为持续迸发的多模态AI生成创新感到激动:
  • 包含视频、3D资产生成在内的行业都具有非常庞大的市场和内容供需基础。视频是使用最广泛的创意媒体,在社媒、娱乐和教育平台上占据主导地位;3D资产亦广泛应用于游戏、影视、建筑等行业,这些行业中3D内容资产生成仍然没有形成规模化、标准化的供给,高度依赖“手工”。
  • 模型本身的进展在加快。一方面,我们看到Transformer作为已经在NLP领域发挥了巨大作用的架构,正被有才华的研究者们应用在视频和3D生成领域,并都做出了很好的demo。另一方面,不同算法的叠加和优化使得demo推理速度变得更快、推理成本不会随模型性能而同比例规模化发展。
  • 但同时,我们也深知,AI视频和3D模型生成工具尚未完全达到商用级别。一方面,在现有算力条件下,多模态内容生成成本高昂;另一方面,视频、3D等模态的训练数据远少于单纯的文字和图片。从生成效果来讲,目前生成的视频时长有限,较低的分辨率、模糊、锯齿、不自然等等缺陷也使得AI生成视频/3D内容无法达到人类视觉水平,相比于文字、图片和音频,AI生成视频/3D内容还有更大的价值和潜力以待开发。另外,视频和3D内容生成天然需要更多算力,对初创公司尤其具有挑战,初创公司需要在研发的同时,高度重视商业化,尽快找到PMF,缩小短期由高昂的模型训练和推理成本带来的亏损。
北京时间12月24日,本周日上午10:00,热爱创新的嘉程资本开启嘉程创业流水席第204席!我们邀请了Luma AI产品与增长负责人戴高乐、清华大学北京信息科学与技术国家研究中心副研究员赵黎、AI.Talk创始人赵汗青,一起深度探讨AI生成视频与3D内容的全球最新趋势!欢迎各位AI领域的从业者、创业者、投资人和行业专家一起参加!

再次邀请上车!

嘉程资本Next Capital是一家专注科技领域的早期投资基金,作为创新者的第一笔钱,我们极度信仰科技驱动的行业创新,与极具潜力的未来科技领袖共同开启未来。

我们的投资涵盖人工智能、硬科技、数字医疗与健康、科技全球化、生物科技与生命科学、企业服务、云原生、专精特新、机器人等领域。投资案例包括元气森林、熊猫速汇、寻找独角兽、店匠、士泽生物、芯宿科技、未名拾光、橄榄枝健康、硅基仿生等多家创新公司。

嘉程资本旗下的创投服务平台包括「嘉程创业流水席」,「NEXT创新营」、「未来联盟」等产品线,面向不同定位的华人科技创新者,构建了大中华区及北美、欧洲和新加坡等国家地区活跃的华人科技创新生态,超过3000位科技行业企业家与巨头公司高管在嘉程的平台上分享真知灼见和最新趋势。

嘉程资本投资团队来自知名基金和科技领域巨头,在早期投资阶段富有经验,曾主导投资过乐信(NASDAQ:LX)、老虎证券(NASDAQ:TIGR)、团车(NASDAQ:TC)、美柚、牛股王、易快报、PingCAP、彩贝壳、云丁智能等创新公司的天使轮,并创办过国内知名创投服务平台小饭桌。

嘉程资本是创新者思考的伙伴,成长的伙伴。

 

嘉程资本
握手未来商业领袖
BP 请发送至 BP@jiachengcap.com
微信ID:NextCap2017