快手可灵大模型开放视频续写功能

2024-07-06 08:33:15 阅读(6182)

快手的视频生成大模型“可灵”自面世以来,引来外界广泛关注。6月21日,全媒体记者获悉,可灵再度进化,正式推出图生视频功能,支持用任意静态图像生成5s视频,并且可搭配不同的文本内容,实现丰富的视觉叙事。

同时,可灵还发布了业内领先的视频续写功能,可为已生成的视频(含文生视频及图生视频)提供便捷的一键续写和连续多次续写,将视频最长可延伸至约3分钟,极大地拓展了视频大模型的创作边界。

据了解,得益于其基础模型架构中的3D时空联合注意力机制,可灵在构建复杂时空运动方面也展现了卓越能力。这使得模型在转换静态图像为动态视频时,能够细腻而准确地实现大幅度运动场景。例如只需上传一张牧羊犬追球的静止照片,模型就能生成一段生动的视频:牧羊犬活灵活现地奔跑追逐网球,其耳朵轻轻晃动,毛发随风飘扬,而网球则在空中弹跳,视频整体自然而流畅。

另外,可灵图生视频模型还融入了强大的提示词融合技术,深化了对图像语义与用户指令的理解整合。举例来说,当使用一张女孩的照片生成视频,模型默认生成的效果可能是轻风中她发丝轻轻飘动,周遭花朵摇曳,水面闪烁着细腻的波纹。

如果用户具体输入“女孩转身背对镜头”,视频便会智能添加女孩优雅转身的动作,并细腻捕捉到转身瞬间的微笑和眨眼,展现了自然而生动的细节处理能力。

此外,可灵图生视频模型支持不同风格的图像输入,不论是自然写实还是风格化图像都能轻松处理,同时兼容各种长宽比的图像输入,展示出强大的灵活性和适应性。

记者了解到,如今,可灵大模型新推出了业内领先的视频续写功能,用户只需一键操作,即可在已生成视频的基础上延续生成约5秒内容,该功能同时适用于文生视频和图生视频。值得一提的是,通过连续多次续写,能够最长生产约3分钟的连贯视频。

此次升级的一大亮点是集成文本控制机制于视频续写中,这意味着用户能够通过自定义提示词,为每段视频续写注入个性化创意。得益于此,模型利用高效的提示词融合技术,平滑地在场景间过渡,响应用户的每一个灵感火花。

举例来说,一个关于古堡的视频片段,用户既可以选择让它先“太阳落下去,天空变暗”,继而“太阳升起来,天空变亮”,亦可探索另一路径:“太阳落下去,天空变暗,灯光渐亮”,随后“灯光亮起,雾气氤氲”,以此创造出各具特色的连续视觉叙事,完美贴合用户的多样化需求。

6月6日,可灵文生视频大模型正式亮相,还在快影App上启动了邀测体验,截至目前,已有累计超过14万人排队申请。据悉,在7月举行的2024世界人工智能大会(WAIC)上,快手将发布最新的大模型技术与应用战略,包括快手大模型技术矩阵全景、基座模型技术创新、应用和落地情况等。

相关阅读
拓展阅读
拼多多稳定出评,一号一拍,指定评语和晒图,出评率95%以上。
2023-09-01
从抖音矩阵账号准备,如何低成本制作视频以及在进行内容制作时,如何高效运作批量账号等大家比较关心的话题,给你一一讲明白。
2023-12-01
关注有礼、定向促销、收藏加购、动态红包、预热打折、智能推荐、手机海报、评价管理等等....淘宝拼多多开店必备!现在免费送!
2022-04-01
抖音生活服务最近也是上线了大家都比较关注的探店会用到的撮合产品“探店宝”,而且它会同步在全国的34个城市里上线,这个产品最简单的就是规范了商达准入的标准,让合作双方可以获得更有保障的结果。
拼多多大促通常都是一个活动或者两个活动联合,而这次也是迎来了三连大促,所以,这次的活动时间和热度也是非常高的,作为商家来说现在已经可以开始报名了,在接下来的国庆期间可以期待下。
2023-09-17 10:15:24 阅读(10198)
快手在AI上也是做了很多的功课,之前也是推出了对话功能,此次也在短视频区域宣布测试快手AI玩评功能,大家可以尝试输入内容,让系统自动生成图文让给大家可以更好的在评论区里互动。
2023-09-16 15:46:50 阅读(10867)
抖音电商节盟计划相信有部分商家听说过,而就在今年抖音这边也对节盟计划进行了升级,曝光了全新的计划,目的也是为了帮助品牌方共同实现营销目标的大促,但凡是想参与的商家其实现在都可以开始报名了。
9月也是消费的高潮期,为此抖音生活服务也是开始整活了,通过官方直播间联合商家为用户提供官方优化商品,带用户们了解各地优质的商品,深入文化旅游的期间也为大家带来更多出行的介绍。
抖音电商最近也是上线了品牌力标准内容,通过系统对于几个指标的考核为各品牌打分,商家们可以通过品牌力知道自己目前的大概情况,而且品牌力也是分了标准的,大家可以根据标准来调整。
抖音app最近也是做功能和板块的测试,比如说就有媒体曝出最近在测试“不喜欢”和“长视频”板块的功能,通过这些板块的反馈,其实,可以更好的了解用户的需求,再之后的功能设置上,平台也会更有针对性。
2023-09-12 11:33:29 阅读(10054)
抖音生活服务频道主要是为了下线的商家服务,当然随着抖音知名度的提升,其实不少的餐饮商家也意识平台的重要性,进入平台的也越发多了起来为了更垂直的发展,抖音也上线了生活服务饮品经营解决方案。
如今的食品生鲜行业也是各大平台都非常重视的,比如说淘宝天猫也是在呼唤召开双11视频生鲜行业大会,平台这边也宣布投入数亿元来支持商家们,这也是目前来说平台在这个行业里最大规模的投入。
京东“9.9超省日”主会场也是又一轮的低价活动,对于此次活动比较期待的朋友们可以在今晚8点进入到会场里去看看,目前参与的商品也是几乎覆盖了全品类,而且活动期间还有不少优惠券送出。
2023-09-09 15:15:53 阅读(5931)
热门文章
推荐阅读
最新专题