图形学专家童欣加盟Meshy,联手胡渊鸣探索AI驱动的3D新范式
童欣加入Meshy,图形学两代人联手
童欣正式出任AI 3D公司Meshy的首席科学家。这位在微软亚洲研究院工作了25年的图形学资深研究者,将负责制定Meshy的长期科研战略。他的加入,意味着华人图形学界最具代表性的两代人——童欣与Meshy创始人胡渊鸣——开始在同一战线上合作。

童欣的研究覆盖材质捕捉、纹理合成、三维几何处理、真实感绘制等多个方向。他在顶会发表大量论文,Google Scholar引用超过21000次。更重要的是,他长期扎根一线,既能深入技术细节,又能用通俗语言解释复杂问题。他曾自嘲:“家人只认可我做的饭,不理解我为何对着屏幕上的茶壶和兔子自High。”

这种既严谨又接地气的风格,恰好契合Meshy当前的发展阶段。这家公司由胡渊鸣从MIT博士毕业后创立,核心目标是把文字和图片变成可交互的3D模型。目前用户已超1200万,客户包括全球市值前十企业中的一半。今年7月,Meshy完成近4亿美元B轮融资,估值突破百亿人民币,成为AI 3D领域估值最高的公司。

“AI for Fun”的底层逻辑

胡渊鸣提出的愿景听起来有点特别:AI for Fun。他认为,当AGI接管大部分生产力任务后,人类的核心问题将转向“如何创造、表达、连接,以及如何获得意义”。而AI驱动的新颖体验,将成为未来快乐和意义感的重要来源。

要实现这一点,关键在于让想象能被高效、准确地具象化。这正是Meshy想解决的问题。但胡渊鸣强调,他们要做的不是简单优化现有图形管线,而是“基于生成式AI重塑图形学,找到将想象具象化的全局最优解”。
这个目标与童欣的理念高度一致。早在2016年,童欣就提出要解决图形内容生产的“everyone everywhere”问题——让任何人随时随地都能创造可视媒体。十年后的今天,这一目标演变为“用一句话生成一个可进入、可互动的世界”。
重新发明图形学:跳出三角形的束缚
Meshy当前的技术探索集中在三个层面。首先是重新发明图形学。传统GPU渲染依赖三角形网格作为基本单元,但这种方法可能只是局部最优解。团队希望借助AI,构建一套不依赖三角形的全新表示和生成体系。
其次是搭建导演系统。如果把新图形学比作一个剧组,那么导演系统就是负责制定世界运行规则、编排剧情和角色行为的中枢。它需要能实时响应用户输入,动态调整场景逻辑。
最后是基础设施。低延迟、高画质、低成本的三维生成与渲染架构至关重要。胡渊鸣早年开发的Taichi编程语言,正是为高性能图形计算而设计,如今成为Meshy底层infra的重要基础。
这些方向并非空谈。今年8月发布的Meshy-7模型,在几何对齐上取得明显进展:有机角色能还原面部表情和皮肤褶皱;机械零件各部件位置准确、互不粘连;阴刻文字和浮雕图案清晰到可直接用于工业激光雕刻。这些能力直指当前AI 3D最头疼的“可控性”问题。
Mora架构:分层协作超越世界模型
就在童欣加盟消息传出的同时,胡渊鸣发布了Meshy的新项目——Mora(Multimodal Open-world Real-time Architecture)。这个架构由三部分组成:Coding agent负责生成游戏世界的逻辑骨架和运行代码;Meshy的3D生成模块丰富场景细节,并为视频模型提供空间控制信号;视频模型则最终输出画面和音效。
这一设计是对当前“世界模型”热潮的直接回应。今年初Google Genie 3发布时,市场一度认为“游戏引擎将被淘汰”。但胡渊鸣试遍所有demo后,总结出现有互动视频模型的八大缺陷:空间一致性弱、互动简单、物理解算能力差、体验时间短、无法支持复杂剧情、以单人为主、难与程序生成结合、延迟高。
在他看来,这些问题源于视频模型本质仍是“高级渲染器”,缺乏真正的空间理解和逻辑推理能力。强行用它构建可玩世界,最终只能做出“散步模拟器”。Mora的思路是让各模块各司其职:Coding agent管逻辑,Meshy管空间结构,视频模型管视觉表现。这样既能保证稳定性,又能实现深度互动。
三维还是视频?边界正在模糊
Mora的出现,也回应了童欣近年提出的一个关键问题:“三维是否只是视频生成的特例?”如果一段视频已经能从任意角度观察物体,是否还需要显式的三维模型?
目前的答案似乎是:不必二选一。在Mora框架下,3D生成和视频模型可以协同工作。3D提供精确的空间骨架和物理约束,视频模型在此基础上生成高质量动态画面。这种分层协作,或许比端到端的视频生成更接近实用。
这种思路背后,是对图形学本质的重新思考。过去几十年,图形学经历了多次范式冲击:从手写规则到神经渲染,从依赖3D管线到生成式AI直接出图,再到视频模型凭空涌现动态世界。每一次新技术都叩问着传统方法的必要性。
童欣亲历了这些变革。如今他选择再次出发,不是固守旧有体系,而是与新一代探索者一起,寻找图形学在AI时代的新形态。正如他常说的,图形学是应用学科,问题永远来自实际需求和新设备、新数据的出现。而今天,最大的新变量就是生成式AI。
从学术传承到产业落地
童欣的加入,不仅带来技术积累,也延续了学术传承。他在微软亚研院培养了一批华人图形学中坚力量:浙大的周昆、清华的徐昆、北大的王鹏帅等,都在三维几何、神经渲染等领域有重要贡献。这种“传帮带”的传统,或许也会在Meshy内部延续。
值得注意的是,Meshy并未止步于工具层面。其内部已孵化出Game Studio,并推出首款产品《黑箱:无限重构》。这表明团队正从底层技术向完整体验延伸,真正践行“AI for Fun”的理念。
当然,挑战依然巨大。如何平衡生成速度与质量?如何实现多人实时协作?如何让AI理解复杂叙事?这些问题都没有现成答案。但童欣和胡渊鸣的组合,至少提供了一种可能路径:既有深厚的图形学根基,又有大胆的AI原生思维。
图形学的未来或许不再是关于如何更逼真地渲染三角形,而是关于如何让人类的想象力无障碍地变成可感知、可互动的世界。这条路才刚刚开始。