近日网络上发布了一个用AI技术生成的《西游记》,近4分钟动画短片展现了石猴从降生到拜师学艺的过程,这段视频发布在抖音和bilibili上,在bilibili有超70万观看。这和另一个百万播放量的《大闹天宫》有异曲同工之妙。
这些AI视频皆是通过大模型技术自动生成的,不仅降低了制作成本,还提升了视频生成的效率。为了让企业可以更便捷的打造大模型应用,降低视频制作技术使用门槛,腾讯云特别推出了大模型视频创作引擎工具。
腾讯云大模型视频创作引擎通过PaaS接入方式,简化数据工程、模型精调、应用开发的流程,让企业能够更高效、简单地将大模型能力应用于生产、销售和服务等场景。
腾讯云大模型视频创作引擎
大模型视频创作引擎,是一款提供视频生成和视频处理能力的API技术服务。该服务基于腾讯视频生成大模型等一系列领先的音视频AI技术。既能帮助专业视频创作者降低制作成本、发现视频创意,又能提升视频社交娱乐的趣味性,可广泛应用于短视频平台、影视制作、广告营销、社交媒体、游戏等领域。
产品优势
技术领先
基于混元、优图等腾讯多个Lab的技术支持,涵盖视频、音频、文本等数十种领先的自研算法。确保视频的生成和处理效果佳、性能高。
能力丰富
持续上线多种视频生成、视频处理能力,不限于视频风格化、视频转译、运动笔刷、图片跳舞等能力,满足各类场景的业务需求。
专业效果
生成的视频清晰度高、画面自然流畅、符合物体运规律,同时具备美学特点。视频可用性更强,为创作者提供高质量的视频内容。
应用广泛
能够帮助创作者降低制作成本、发现创意,又能提升视频社交娱乐的趣味性。广泛适用于短视频、影视制作、广告营销、社交媒体等场景。
视频创作引擎的功能与场景
1、视频转译功能
视频转译能够非常自然地,将说话人的语言翻译成指定语种。翻译后的视频,实现说话人音色与原视频保持一致,说话人口型与目标语种匹配的效果。适用于短剧出海、视频本地化、跨境电商、语言教育等场景。
产品优势
保留人物音色特征。通过腾讯TTS大模型技术,快速复刻发音人音色,变换后音色相似度高、自然度高。
声音口型匹配。说话人口型与音频内容匹配,视觉、听觉关联,体验流畅自然。
保留视频背景音。基于领先的人声分离技术,保留原始视频更多信息。
支持翻译内容人工校验。支持对中间过程中的翻译文本,进行人工校验。
应用场景
使用者可以借助AI能力,将说话人的语言翻译成指定语种,对外推广产品、促进文旅宣传,在境外市场开展电商销售、短视频带货,制作新闻资讯媒体采访等对外宣传素材,帮助官媒扩大影响力,提升传播效率;对内引入娱乐、科技、教育、访谈等各类境外视频的本地化翻译,同时可双语对比,提升语言学习体验和效率。
出海电商。出海商品视频素材,一键变换语种,效果自然,用户接受程度更高。
视频本地化。娱乐、科技、教育、访谈等各类海外的本地化翻译。
对外宣传。新闻资讯媒体采访等对外宣传素材的制作,受众体验好,传播效率高。
2、视频生成功能
视频生成包括视频风格化、画布拓展、运动笔刷、图片跳舞等功能。
视频风格化是基于混元视频生成大模型技术,支持将输入视频生成特定风格的视频。生成后的视频画面流畅自然,支持2K分辨率,时序一致性强。
图片跳舞则是输入单张全身人像照片并选择舞蹈模板,即可生成对应模板的跳舞视频。生成后的视频,表情自然、动作流畅,娱乐性强,也不需要担心复杂背景、复杂建筑等。
运动笔刷是能够根据视频画面的相关性,来拓展画面区域,能够精准理解画面景深、物体局部、物体运动属性,支持高宽比从1:4到4:1的大比例拓展范围,适用于各类场景。
应用场景
创作者使用该产品将普通视频转换为动漫、3D动画等风格,使之具有独特的艺术特点,为短视频制作、社交媒体运营提供丰富素材,帮助产品、品牌、活动宣传,吸引用户的兴趣。
广告制作。高质量广告素材生成,满足多样的投放载体、投放人群、投放形式。
社交娱乐。可玩性强,美且出众,让单调的图片&视频,秀起来!
专业视频制作。赋能传统剪辑工具,突破创意瓶颈,一飞冲天。
3、人脸融合功能
人脸融合是将人脸图融合到模板视频中的人物上,生成的图片既兼具图片人脸特征,也保持了模板视频中人物姿态、表情、动作等属性。
其中图片人脸融合支持将一张人脸图像对应的人脸特征融合到模板图像中的特定人物上,生成的图片既兼具指定图像和模板图像中的人脸特征,也保持了模板图像中人物的姿态、表情、动作等属性。目前有基础版和专业版2种产品能力,具体对比见下。
而视频人脸融合支持将用户身份特征转移到模版视频上,生成的视频既兼具指定视频中的人脸特征,也保持了模板视频中人物的姿态、表情、动作等属性。目前有短视频版、长视频版基础版、长视频专业版及影视级离线服务4种产品能力,具体对比见下。
通过对腾讯云大模型视频创作引擎的深度分析,我们不难看到,这项技术正在为视频创作领域带来革命性的变革。借助大模型技术,视频创作不仅成本更低、效率更高,而且能够呈现出更加多样化、个性化的风格。腾讯云的大模型视频创作引擎,通过提供丰富的API技术服务,让专业创作者和广大用户都能轻松享受到这一技术带来的便利。
值得一提的是,云巴巴作为腾讯云的重要合作伙伴,一直保持着紧密的合作关系。在大模型领域,我们也在不断地进行打磨和提升,以提供更加优质的服务和解决方案。云巴巴也将继续与腾讯云保持紧密的合作关系,共同推动大模型技术的发展和应用,为行业的进步贡献自己的力量。
云巴巴作为一家国内领先的企业数字化转型的服务平台,致力于帮助企业实现数字化升级和优化。作为行业佼佼者,云巴巴积累了丰富的实践经验和深刻的行业洞察力,为不同行业、不同规模的企业提供个性化的解决方案。
云巴巴客户群体广泛,包括金融、医疗、零售、制造等多个行业,并为众多企业创造了数字化转型的成功案例。为了更好地服务客户,云巴巴组建了一支专业的团队,具备多年的行业经验和专业技能,同时也与多个合作伙伴建立了紧密的合作关系。
云巴巴作为腾讯云的重要合作伙伴,双方携手共同为企业用户提供更多优质的产品与服务。目前腾讯云大模型视频创作引擎已在云巴巴平台上线,如需了解更多产品信息,请扫描下方二维码与我们联系!
更多产品了解
欢迎扫码加入云巴巴企业数字化交流服务群
产品交流、问题咨询、专业测评
都在这里!
1月16日,2025腾讯产业合作伙伴大会在三亚召开。云巴巴,荣膺“2024腾讯云卓越合作伙伴奖—星云奖”和“2024腾讯云AI产品突出贡献奖”双项大奖
腾讯TAPD作为国内领先的敏捷研发管理平台,可以说是最早拥抱MCP的研发管理工具之一,凭借其全生命周期的研发管理能力,成为AI代码助手的“最强外挂”,其创新功能直击开发痛点。
基于预设规则和对象特征,让消息推送更智能更精准,帮助企业打通内外部系统的数据系统,实现更多灵活、更个性化的营销和服务能力开发。
海纳嗨数凭借其专业的数据分析能力,为企业提供从数据采集到深度洞察的一站式解决方案,助力活动策划与执行实现质的飞跃。
网宿科技全站加速产品以弱网优化与源站灾备技术矩阵,构建全链路加速体系,通过核心技术为多场景提供端到端保障,实现弱网效率跃升、源站切换无感,助企业突破网络桎梏。