超越Sora!全球首个带背景音乐,文生1080超高清视频模型 siyushenqi.com • 2025 年 8 月 13 日 下午9:17 • 行业动态 • 阅读 442 全球社交巨头Meta发布最新大模型Movie Gen,正式进军文生视频领域 摘要 Movie Gen拥有300亿参数,能够每秒生成16帧的16秒1080P超高清视频,并具备视频剪辑、个性化功能和不同宽高比适配等多元化功能。 Movie Gen基于Transformer架构,优化了文本到图像和文本到视频的生成,能够推理对象运动和相机运动,生成合理动作的视频内容。 网友对Movie Gen的全面化功能表示震惊,认为Meta在文生视频领域超越了OpenAI的Sora。 尽管Meta尚未公布是否开源Movie Gen模型,但已有人表现出迫不及待的态度,期待使用这一强大的文生视频模型。 全球社交巨头Meta发布最新大模型Movie Gen,正式进军文生视频领域。 Movie Gen共有300亿参数,能以每秒16帧直接生成16秒的1080P超高清视频,还提供精准的视频剪辑、个性化功、不同宽高比适配等多元化功能。 最大技术亮点是,Movie Gen能直接生成带精准配乐的视频,目前Sora、Runway、Luma等一线产品都无法提供该功能。 有网友对Movie Gen的全面化功能相当震惊,表示,Meta比OpenAI更高的发布了Sora。 基本上都是一片Amazing,足以看出Movie Gen的超强性能。 Sora掀起了文生视频风口,但是它自己却莫名消失了~ 目前,Meta还没有公布开源该模型,但已经有人迫不及待了。 这是目前最强的文生视频模型,我们很快能用它制作电影了。 Movie Gen功能简单介绍 文生视频是Movie Gen的核心模块,是基于Transformer架构开发而成,专门优化了文本到图像和文本到视频的生成。Movie Gen能够生成长达16秒、每秒16帧的1080P超高清视频,支持73K token上下文。 通过理解文本提示,结合预训练时学习到的视觉知识,生成与文本描述相匹配的视频内容。这一模块的技术创新在于其能够推理对象运动、主体-对象交互和相机运动,从而生成各种概念的合理动作。 在训练过程中,Meta采用了大规模的互联网图像、视频和音频数据,通过复杂的数据策划和过滤流程,确保了模型训练数据的多样性和质量。 此外,为了提高生成视频的质量和一致性,Meta还引入了监督式微调,使用人工策划的高质量视频数据对模型进行进一步的训练。 个性化视频生成是在基础视频模型上进行了扩展,支持生成包含特定人物身份的视频内容。例如,输入一个人的图像和文本提示,模型能够生成包含该人物并具有丰富细节的视频。 Meta使用了一种全新的训练策略,通过在模型训练中加入人脸图像和文本提示的配对数据,使模型学会如何将特定的人物身份信息融入到视频生成过程中。 精确视频编辑是Movie Gen的另外一大技术创新,允许用户通过文本提示对视频进行精确编辑。 Meta通过创新的训练方法,使模型能够理解文本提示中的编辑指令,并将其应用于视频内容的修改中。包括添加、移除或替换视频中的元素,以及进行背景或风格等全局性的修改。 能生成带背景音乐的视频,流匹配和DiT是关键技术。流匹配是一种创新的生成式建模方法,通过构建一个最优传输路径来指导生成过程,从而确保生成的内容既连贯又富有创意。与传统的扩散模型相比,流匹配不仅提高了训练效率,还增强了推理阶段的表现力。 DiT一种经过调整的变压器架构,能够更好地处理音频数据。通过对归一化层输出进行缩放和偏移,并对自注意力及前馈网络层输出进行缩放,实现了对音频信号更精细的控制。同时,通过一个多层感知机来预测调制参数,进一步优化了模型性能。 为了适配不同的设备,针对视频中的位置信息编码问题,Movie Gen使用了一种因子化的可学习位置嵌入方式。这种方法可以灵活地适应不同尺寸、宽高比以及视频长度的输入,避免了传统固定长度位置编码带来的限制。 Movie Gen通过将空间坐标以及时间坐标转化为独立的嵌入向量,再将它们相加得到最终的位置表示,从而有效减少了因位置编码不当导致的画面扭曲或变形现象,尤其是在时间维度上表现尤为明显。 为了降低性能消耗,Movie Gen引入了多维度并行化策略,包括数据并行、张量并行、序列并行以及上下文并行。这种三维并行化设计允许模型在参数数量、输入token数和数据集大小三个轴向上进行扩展,同时也能横向扩展至更多的GPU设备上。 特别是在处理高分辨率视频时,由于自注意力机制本身的计算复杂度较高,因此高效的并行化策略对于减少所需的计算资源至关重要。 相关阅读外贸展会后怎么跟进客户?72小时、7天、30天的完整SOP网易辟谣:王怡未离职,部分营销团队并入事业部OpenAI内部信"摊牌":微软联盟已成枷锁,将押注亚马逊合作突围哔哩哔哩首次全年盈利、友谊时光靠女性向小游戏扬眉吐气丨9家游戏公司财报深度拆解群核科技开启全球招股;众擎机器人完成2亿美元B轮融资;红熊AI完成2.1亿元A轮融资丨投融资周报需要日本PayPal代付;社交APP伊拉克支付提现渠道;收巴西各类流量;海外买量|私域神器每周合作精选No.201一周要闻NO.195丨恶意软件入侵谷歌商店;9家游戏公司财报深度拆解;非洲市场又一电商巨头退场;Meta首个"超级智能"模型亮相微软或考虑将《使命召唤》移出Xbox Game Pass泡泡玛特进军巴西:先打假冒伪劣智元机器人,一分为四! 本文源自「私域神器」,发布者:siyushenqi.com,转载请注明出处:https://www.siyushenqi.com/32601.html 赞 (0) 打赏 微信扫一扫 支付宝扫一扫 0 0 生成海报 关于作者 siyushenqi.com 关注私信 13.9K 文章 0 评论 425 问题 18 粉丝 私域神器:海外私域营销拓客软件 融资、投流、造血,大模型“新星”开启变现竞速 上一篇 2025 年 8 月 13 日 下午9:17 AI 时代,语音会成为主流交互方式吗 下一篇 2025 年 8 月 13 日 下午9:18 相关推荐 PAGC 2025丨展会推荐官 Crazy Maple Studio 副总裁 南亚鹏、中文在线集团 AI动漫部总经理 周立强、APUS AI实验室首席科学家 张旭 邀您参与万人出海展会 PAGC 2025丨展会推荐官 Crazy Maple Studio 副总裁 南亚鹏、中文在线集团 AI动漫部总经理 周立强、APUS AI实验室首席科学家 张旭 邀您参与万人出海展会 siyushenqi.com 2025 年 8 月 17 日 • 行业动态 440000 行业动态 具身智能百日内"吸金"超345亿元 具身智能领域融资热潮持续,百日内发生269起融资事件,披露金额约345亿元。银河通用、星海图等明星企业获大额融资,"世界模型"成投资新热点,但行业仍面临技术瓶颈与商业化挑战。 转自扬帆出海 2026 年 4 月 18 日 223000 阿里之后,抖音出海东南亚,再爆新风口 不放弃探索任何可能性。 siyushenqi.com 2025 年 8 月 13 日 • 行业动态 481000 对话坚果资本孙鸿达:做DTC品牌不等于做独立站,优秀的电商企业必将同时也是优秀的科技公司 判断企业的优质与否核心在于是否能为用户提供价值,而实现价值则涉及如何真正的去触达消费者,根据消费者的需求来高效地组织供应链和产品。 siyushenqi.com 2025 年 8 月 25 日 • 行业动态 490000 四年前的黑马,如今仍能登上畅销Top 3 这个五一假期,我被《明日方舟》淹没了。 siyushenqi.com 2025 年 8 月 24 日 • 行业动态 463000 国产SLG进一步抢占美国市场,iOS平台品类收入占比超56% 我们都知道国内有多款SLG产品在海外的成绩很好,在欧美多个成熟市场都占据了一席之地。 siyushenqi.com 2025 年 8 月 26 日 • 行业动态 484000 行业动态 FunPlus《曙光防线》上线7日iOS预估流水580万元 | 新游数据 过去接近5年的时间《State of Survival》累计流水已超过100亿人民币,并且至今还保持着接近千万美元(折合人民币约7000万)的月流水。 siyushenqi.com 2025 年 8 月 18 日 532000 10亿日活,TikTok复制抖音小店,字节电商要在全球做5000亿大闭环 TikTok电商要闭环了。 siyushenqi.com 2025 年 8 月 13 日 • 行业动态 467000 社交文娱出海搞钱新思路:语音房、细分群体与AI社交 综合财报信息和市场信息看,中东社交娱乐市场仍旧遍地黄金,尤其是语音房产品为企业带来可观的营收。同时,人工智能和细分垂直市场的社交产品正在成为下一个文娱出海的新机遇。 siyushenqi.com 2025 年 8 月 18 日 • 行业动态 563000 行业动态 2025年10月中国手游发行商全球收入排行榜 Sensor Tower商店情报平台显示,2025年10月共32个中国厂商入围全球手游发行商收入榜TOP100,合计吸金20.1亿美元,占本期全球TOP100手游发行商收入35.6%。 siyushenqi.com 2025 年 11 月 7 日 775000 行业动态 暴雪发布《守望先锋》手游《Overwatch Rush》 2月24日半夜,暴雪官宣《守望先锋》手游《Overwatch Rush》,将开启特定地区测试,复刻经典体验,团队自研,机遇挑战并存。 siyushenqi.com 2026 年 2 月 26 日 311000 行业动态 《2020出海投资新观察》——真格基金- 副总裁兼华南区负责人-关山行 《2020出海投资新观察》演讲视频完整回放 siyushenqi.com 2025 年 8 月 3 日 430000 行业动态 私域神器每周合作精选 No.86|国内竖屏短剧全球授权;畅读寻海外优质短剧;多款游戏产品寻合作/流量 本期精选的合作类型涵盖国内竖屏短剧全球授权;畅读寻海外优质短剧;多款游戏产品寻合作/流量。接下来就一起看看吧~ siyushenqi.com 2025 年 8 月 18 日 470000 行业动态 2024年10月中国手游发行商全球收入排行榜 2024年10月共34个中国厂商入围全球手游发行商收入榜TOP100,合计吸金18.5亿美元,占本期全球TOP100手游发行商收入35.6%。 siyushenqi.com 2025 年 8 月 17 日 452000 腾讯成立新洛杉矶工作室,加速布局海外游戏 十年磨一剑 siyushenqi.com 2025 年 8 月 25 日 • 行业动态 487000 行业动态 端侧 AI 新篇章!商汤科技发布「速度最快」的端侧模型 4月23日,商汤发布了日日新 5.0 大模型体系,其中,商量端侧模型 SenseChat-Lite 成为了此次发布的亮点。 siyushenqi.com 2025 年 8 月 13 日 421000 私域神器首发:ironSource宣布将以 4 亿美元收购程序化广告变现平台 Tapjoy ironSource表示将以约 4 亿美元的价格收购广告平台 Tapjoy Inc.。 siyushenqi.com 2025 年 8 月 15 日 • 行业动态 568000 积累超百万玩家,一年3款高口碑新游,他们认为当下算好的创业时间点? 今年是不平静的一年,游戏行分外不景气。作为一家矢志开发科普游戏,缺乏大型商业化作品的初创小团队,Muccy Games又是如何走过这一年的呢? siyushenqi.com 2025 年 8 月 24 日 • 行业动态 441000 行业动态 夸克回应在华留学生无法领取免费会员:高度重视,将尽快给出合理解决方案 私域神器9月9日讯,夸克《开学AI第一课》在中国人民大学首站启动。在活动现场的问答环节,有留学生表示自己是夸克AI的用户,并询问在华留学生群体何时能够免费领取会员,享受和中国学生一样的待遇。对此夸克相关人员现场表示:公司高度重视在华留学生群体的这一诉求,并将尽快给出合理的解决方案,感谢留学生群体对于夸克的喜爱和支持。 据了解,夸克官方在8月底发布了“教育计划… siyushenqi.com 2025 年 8 月 13 日 下午9:17 442000 怎么过年都在玩“蛋仔”?!这款新晋国民手游即将出海 2023蛋仔也要出国留学啦 siyushenqi.com 2025 年 8 月 24 日 • 行业动态 586000 行业动态 英伟达全力发展AI Agent!开源专属大模型,最强AI工厂 英伟达与Oracle合作,提供160多种原生AI工具和100多个微服务,帮助企业构建复杂且无缝衔接的Agent应用,实现数字业务的自动化。 siyushenqi.com 2025 年 8 月 13 日 453000 行业动态 整个东南亚电商都乱成一锅粥了 没人知道这场东南亚电商大混战会如何演变,人们甚至不确定关键玩家是否已全部就位。 siyushenqi.com 2025 年 8 月 12 日 406000 行业动态 俄罗斯手游市场正在扩张,把握机遇,顺势起航! 2023年,俄罗斯移动应用下载量全球排名第六,手游下载总量达到27.3亿次,手游收入突破28亿美元,预计2025年将达到40亿美元。 siyushenqi.com 2025 年 8 月 17 日 450000 2021中国网文出海操作手日记·内容及选品 网文出海无疑是出海圈的新赛道,在疫情的推动下更是加速了移动阅读的发展,海外市场也全球开花。 siyushenqi.com 2025 年 8 月 3 日 • 行业动态 401000 倒计时1天 | 6.15-6.16第三届PAGC聚焦广州 共赏这场出海人的饕餮盛宴 开幕在即,大咖云集。6月15日-16日 广州,PAGC 2023|第三届全球产品与增长大会即将启程 siyushenqi.com 2025 年 8 月 21 日 • 行业动态 444000 行业动态 网易筹备6个月,《魔兽世界》提前开服 今天上午6点48分,原定于今天12点开服的《魔兽世界》国服正式服提前开服,但依旧难顶压力,“开服即炸服”。更早之前,网易雷火称,为迎接国服回归已筹备6个多月。 siyushenqi.com 2025 年 8 月 18 日 470000 行业动态 6月“国产+进口”版号下发,腾讯、莉莉丝、蓝飞互娱均在其列! 今日,国家新闻出版署公布了6月版号名单,其中包含国产版号147个,进口版号11个,数量上可以说是近半年新高。 siyushenqi.com 2025 年 8 月 15 日 407000 行业动态 4399拿《菇勇者》打法“发海彼的游戏”? 早在今年四月,4399便发行过《射射英雄》的欧美版本《Zombie.io》。如今,《射射英雄》的港澳台版本上线十天拿下超1000万元的收入。 siyushenqi.com 2025 年 8 月 18 日 397000 行业动态 Jaco UG与BI负责人 王恺宁 确认担任 PAGC 2025丨第五届全球产品与增长展会 非游应用出海增长峰会演讲嘉宾! Jaco UG与BI负责人 王恺宁 确认担任 PAGC 2025丨第五届全球产品与增长展会 非游应用出海增长峰会演讲嘉宾! siyushenqi.com 2025 年 8 月 17 日 460000 行业动态 上线10个月,凭食品扫描功能狂揽80万美金,美国人的小众健康需求又被验证了? 健不健康,扫一扫就知道。 siyushenqi.com 2025 年 10 月 23 日 407000 发表回复 请登录后评论...登录后才能评论 提交