智谱清影是智谱AI推出的一款AI视频生成工具。它可以通过输入文字或图片生成高精度的视频。用户只需输入一段文字或选择图片,并选择视频风格,清影就能在30秒内生成一个6秒的1440×960 清晰度的高精度视频。
清影支持多种视频风格,包括卡通风格、真实摄影风格、二次元动漫风格等。它还可以生成动态效果,比如让老照片“动起来”。目前,清影已经在智谱清言的PC端、移动应用端以及小程序端上线,用户可以免费体验。
智谱清影 – 领先的AI文生视频和图生视频生成器
智谱清影亮点与特性
- 文生视频:用户输入文本描述或脚本,AI根据这些文本信息生成视频内容。
- 图生视频:用户上传一张或多张静态图像,AI分析图像内容后生成动态视频。
- 添加背景音乐:支持为生成的视频添加背景音乐,包括安静、轻松欢快、伤感、史诗、搞怪等类型。
- 快速生成:与市场上其他同类产品相比,清影能够显著缩短生成视频的时间。用户仅需等待约30秒,就能获得一段6秒的视频,推理时间从以往的分钟级压缩到了秒级,大大提高了效率。
- 高可控性:清影通过优化技术和自研的端到端视频理解模型,提升了对用户指令的遵循能力,使得生成的视频更贴近用户的创意意图。用户通过详细描述场景、镜头语言和细节,可以得到满意的结果,减少了“试错”次数。
- 风格多样:用户可以选择不同的风格进行创作,包括但不限于卡通3D、黑白、油画和电影感等,满足个性化和创意表达的需求。
- 全民可用:清影智能体对所有用户开放,无论是普通用户还是开发者,都能轻松使用。企业和开发者还可以通过API调用,集成文生视频和图生视频能力到自己的应用中。
- 自带配乐:清影还提供配乐功能,用户生成的视频可以自动配上音乐,简化了视频创作流程,使得即便是没有专业技能的用户也能快速产出有声有色的视频内容。
- 技术基础:清影背后的技术支撑是智谱AI自研的视频生成大模型CogVideoX,该模型采用了类似于Sora的DiT结构,能够融合文本、时间和空间信息,优化后的模型推理速度比前代提升了6倍。
从目前的一些 Demo,以及简单试用的情况看来,智谱 AI 的「清影」具有如下特点:
在风景、动物、科幻、人文历史等类型的视频内容上生成的表现较好;
擅长生成的视频风格包括卡通风格、真实摄影风格、二次元动漫风格等;
实体类型呈现效果上看,动物 > 植物 > 物品 > 建筑 > 人物。
它既可以文字生成视频,也可以完成图生视频,生成的风格覆盖奇幻动画风格。
文生视频
提示词:低角度向上推进,缓缓抬头,冰山上突然出现一条恶龙,然后恶龙发现你,冲向你。好莱坞电影风。
提示词:一个法师正在海浪中施展法术,宝石将海水都聚集过来,打开了一道魔法传送门。
提示词:蘑菇变成小熊。
图生视频
除了文本生成视频,也可以到清影上玩图片生成视频。图生视频带来了更多的新玩法,包括表情包梗图、广告制作、剧情创作、短视频创作等。同时,基于清影的「老照片动起来」小程序也会同步上线,只需一步上传老照片,AI 就能让凝练在旧时光中的照片灵动起来。
提示词:图中男子站起来,风吹着他的头发。
再到现代艺术:
提示词:摄像机围绕着一大堆老式电视旋转,这些电视播放着不同的节目 ——20 世纪 50 年代的科幻电影、恐怖电影、新闻、静态、70 年代的情景喜剧等,背景设在纽约博物馆的一个大型画廊里。
可以看出,清影各类风格都可以拿捏,还有更多的玩法等待人们来发掘。只需要在智谱清言 PC/APP 上,点击「清影智能体」功能,就可以让你的每一个创意在瞬间化为现实。
如何使用智谱清影生成视频
1.访问平台:打开智谱清言官网 chatglm.cn/video,注册并登录账号。
2.选择生成方式:在清影智能体中选择“AI文生视频”或“AI图生视频”功能。
3.输入提示词:
- 文生视频:输入详细的文本描述或脚本。提示词越详细,生成的视频质量越高。例如,与其输入“一个小男孩喝咖啡”,不如输入“摄影机平移,一个小男孩坐在公园的长椅上,手里拿着一杯热气腾腾的咖啡。他穿着一件蓝色的衬衫,看起来很愉快,背景是绿树成荫的公园,阳光透过树叶洒在男孩身上”。
- 图生视频:上传一张或多张静态图像,并选择图像风格。可以使用清影提供的智能体来生成提示词,确保描述准确且详细。
4.选择视频风格和参数:选择想要生成的视频风格,包括卡通3D、黑白、油画、电影感等。还可以设置情感氛围和运镜方式。
5.添加背景音乐:清影支持为生成的视频添加背景音乐,包括安静、轻松欢快、伤感、史诗、搞怪等类型。
6.生成视频:点击生成视频按钮,预计排队1分钟左右,即可生成视频结果。清影能够在30秒内完成6秒视频的生成。
优化提示词:提示词结构要尽可能清晰,复杂公式可以包括镜头语言、光影、主体描述、主体运动、场景描述和情绪/氛围。例如:“摄影机平移,一个小男孩坐在公园的长椅上,手里拿着一杯热气腾腾的咖啡。他穿着一件蓝色的衬衫,看起来很愉快,背景是绿树成荫的公园,阳光透过树叶洒在男孩身上”。