MiniMax发布H3多模态视频生成模型:原生立体声、2K分辨率、15秒视频
MiniMax于2026年7月31日正式发布通用多模态视频生成模型H3,支持文本、图像、视频、音频统一输入,输出带原生立体声的2K分辨率视频(时长4–15秒)。该模型已上线API及Hailuo AI消费级应用,暂未开源权重。技术亮点包括上下文全模态表征、H3-VAE高倍率压缩、H3-Omni Transformer架构优化及内置上下文再生机制。
全模态统一架构:不止是文本驱动
MiniMax H3并非传统意义上的‘文本到视频’(text-to-video)模型叠加插件,而是一个真正意义上的通用多模态生成模型。它将文本、图像、视频与音频作为单一统一上下文进行联合理解与生成,直接输出含原生立体声的视频片段。输出规格为2K分辨率、时长严格限定为整数秒(4–15秒),不支持小数秒或更长片段。
与此前行业主流做法——将视频生成任务拆分为文本到视频、图像到视频、首尾帧生成、主体参考、运动参考、视频编辑等独立子任务并分别训练专家模型——不同,H3通过单一预训练范式整合全部能力。其核心在于:所有参考与编辑关系均以自然语言指令表达。例如,官方示例提示语即为:‘参照视频1的镜头运动,让图像2中的人物演唱,并将人声与音频3对齐’。
已商用落地:API先行,终端暂未开放
H3已于2026年7月31日上线,当前唯一可用路径为MiniMax平台API(模型ID:MiniMax-H3)及消费级应用Hailuo AI。官方明确表示,模型暂不支持本地硬件部署,亦未同步开源权重——‘将在未来数日内发布开放权重’,但截至报道时仍未兑现。
面向产业场景的垂直应用
MiniMax将H3定位服务于广告、品牌建设、电商、产品设计、UI/UX、游戏开发,以及影视前期可视化和零售商品图谱制作。具体用例包括:广告变体批量生成、商品详情页短视频、动态海报、电影片头序列、网站首屏循环视频、角色一致性的游戏过场动画,以及视频到视频的运动迁移。
API接口设计与输入约束
API提供三类入口模式:文本到视频、首尾帧图像到视频、参考式生成。所有请求经由同一端点,采用异步三步流程:创建任务 → 轮询task_id → 下载content.url。关键输入限制如下:最多9张参考图像;最多3段参考视频(单段2–15秒,总时长≤15秒);最多3段参考音频(但音频必须与图像或视频配对上传);混合输入文件总数上限12个;提示词长度≤7000字符;请求体≤64MB(推荐使用URL方式上传大文件)。单文件大小限制:视频≤50MB、图像≤30MB、音频≤15MB;格式支持H.264/H.265视频,JPG/PNG/WEBP/HEIC/HEIF图像,WAV/MP3音频。
四大核心技术突破
- 上下文全模态表征(Contextual Omni Representation):重构字幕生成逻辑,使其描述输入上下文与目标视频间的关联,而非仅描述目标本身;平均将约100K tokens的原始上下文压缩至约4K tokens,语言成为从固定任务集转向开放式描述的关键桥梁。
- H3-VAE:全新设计的全模态编码器,高压缩比带来4倍有效序列长度提升,显著降低训练与推理成本,是实现经济可行的原生2K输出的核心使能技术。
- H3-Omni Transformer:摒弃前代Hailuo-02架构,专为应对多模态输入导致的序列长度方差扩大三倍而设计;将理解与生成负载分离,分别优化硬件利用率,实测端到端训练吞吐量提升近30%。
- 上下文内再生(In-Context Regeneration):不依赖外挂超分模块,而是让基础模型在原始多模态上下文中自我重生成低分辨率输出,从而精准恢复小字号文字、品牌标识等细节——这对品牌与产品视觉呈现至关重要。
性能与市场定位
MiniMax宣称:H3在2K分辨率下每秒生成成本不足主流模型的三分之一;768p分辨率下亦低于主流720p模型一半价格。第三方追踪数据显示其2K按秒计费单价为0.13美元/秒(15秒约1.95美元),但MiniMax官网付费页面当时仅显示Hailuo 2.3版本定价体系,该报价属第三方报道数据。据Artificial Analysis评估,H3在视频编辑能力上位居第一,但在文本到视频任务上落后于Google Gemini Omni Flash,在图像到视频任务上则次于Seedance 2.0与Gemini Omni Flash。
编者观点
H3标志着多模态生成正从‘功能拼接’迈向‘原生统一’,其将音频、运动、构图、品牌元素等要素深度耦合于单一模型架构,为中国企业在AI视频工业化生产中提供了更可控、更一致的技术路径——尤其利好需高频产出高质量品牌短视频的营销与电商领域。
本文为企业智脑(优秘智能)编译整理自公开资讯,信息与观点以原文为准,仅供参考。