快手光合大会公开全模态大模型AIGC解决方案 人机协同助力创作全流程提效

电商报
2023-08-12 14:52

8月10日,2023快手光合创作者大会在上海召开。大会以“热爱,让收获更多”为主题,深入解读快手创作者成长及内容生态走势,重点阐释平台好内容背后的AI技术支持,帮助创作者更好地提升短视频内容的创作力和生产力。

在大会“AI赋能,守护创作”板块,快手生产&社交业务负责人肖新攀、快手AI&用户增长业务负责人王仲远分别发表了主题演讲,从技术角度解析了如何借助AI生产短视频好作品。快手在演讲中还首次正式公开了大模型方面的进展并重点介绍了AIGC数字人解决方案。

AI技术加码好作品生成,视频创作也可以很简单

对于一个好的短视频作品来说,好内容和好形式缺一不可。那么如何用短视频的方式将好内容呈现出来呢?这就需要借助对于分镜和构图、片段剪辑、转场、背景音乐等形式设计来做出更好的视听效果,而这也无疑对创作者提出了更高的要求。

format-jpg

一直以来,快手始终致力于让所有人都可以用短视频轻松地记录、表达和社交,并为此打造好用的视频创作工具,满足广大创作者的需求。伴随着AIGC等新技术的出现,快手也在不断优化技术产品功能、上新产品,为创作者们提供更便捷、高效的创作服务。

在肖新攀看来,AIGC能够让视频创作变得更简单。具体而言,对于专业创作者来说,AIGC能够大幅降低视频制作的成本,让大家把更多时间放在打磨创意和内容上;对于有好想法,但在创作视频上有所欠缺的普通用户来说,通过AIGC也能够轻松制作出效果精美的视频,成为一名视频创作者。

在降低创作者视频制作成本方面,借助AI技术,快手不仅可以帮助创作者将繁琐复杂的操作简单化,还能通过AI生成海量图片、视频、贴纸、音色素材、文案等供创作者们使用。例如,当创作者在剪辑时需要用到“飞机划过天空”的图片素材,但相册中没有、当下又没有条件拍这样的素材时,就可以借助快影上的AI文生图功能,实时生成所需素材。

据肖新攀介绍,在过去一段时间里,快手不仅在AI技术方面投入了大量的资源,还在快手App、快手官方剪辑工具快影,以及官方拍摄工具一甜相机上线了一系列创作功能、素材和效果玩法。“接下来,我们还计划在快影和一甜相机上线AI四格漫画、AI生成影视解说脚本、AI生成商品介绍脚本、AI一键Vlog剪辑等一系列AIGC能力,赋能更多的创作者。”

全模态大模型AIGC解决方案亮相,人机共创提升创造力和生产力

为了更好地服务广大创作者,快手持续迭代更新AIGC技术能力,以帮助创作者解决创作过程中的各种痛点。王仲远表示:“快手AIGC以创作者为核心,人机共创,全流程提升短视频内容的创造力和生产力。”

format-jpg

目前,快手AI团队致力于用AIGC能力去帮助广大的快手创作者解决创作过程中的各种痛点,提升创造力和生产力。快手AI团队打造的“全模态、大模型AIGC 解决方案”,基于强大的自研基座AI大模型,具备文本生成、图像生成、3D素材生成、音频音乐生成、视频生成等全模态AIGC能力,覆盖从灵感启发到创意生成、从多元素材提供到智能化制作的创作全流程,通过人机协同,让创意更新奇、素材更多元、制作更轻松。

在创意激发方面,快手基于自研语言大模型,强化了计算机系统对自然语言的理解和生成能力,能够根据用户一个指令,在一分钟内完成故事撰写、脚本整理,并基于场景主题生成对应图片和配乐,从而节省创作者的时间和精力,同时提供更多视角的灵感和创意。快手的语言大模型在同等规模参数下,在行业里主流的绝大部分基准模型测试中取得第一(例如侧重英文综合能力的MMLU,侧重中文综合能力的C-Eval、C-MMLU,侧重代码能力的Human-Eval),在相关人工评测中也表现优异,擅长内容创作、逻辑推理、解数学题等任务。

据凤凰网科技报道,快手基于自研大语言模型的「快手AI对话」已经于8月8日开启内测。「快手AI对话」以搜索场景为入口,依托于快手丰富的内容生态训练,用户可以通过对话互动的形式,查找快手站内的短视频、达人、百科等内容,是一种全新的搜索形态。「快手AI对话」在多元内容的呈现上,相比传统的搜索将有更多可能性,有望在未来大大降低用户的搜索使用门槛,让新技术带来的便利惠及更广泛的人群。

在素材挖掘方面,快手自研文生图大模型,基于强大的图像生成能力,能够帮助创作者生成对应主题的图片素材,让创意和想象力可以被更好地描绘。同时,该模型提供对图片素材进行局部修改、全局魔改、图像多方位拓展、多张图像融合等图像编辑能力,灵活高效地满足创作者们对AI素材的“再创造”需求。

而针对创作者们对多元化音乐素材的需求,快手在歌词和旋律两方面提供强大的音乐生成能力。从歌词的“形”、“意”、“蕴”入手,快手设计并实现了基于预训练的可控歌词生成系统,可以根据主题AI生成歌词,再完成结构化旋律生成。

在剪辑和制作方面,快手AIGC视频生成解决方案可以实现一键制作特效大片,生成的视频帧间稳定不抖动,支持各种风格和时空转场,还可以单图输入生成高品质表情姿态。

format-jpg 

本次大会上快手还重点介绍了AIGC数字人解决方案——快手智播。快手智播支持用户快速制作自己的孪生数字人,并使用其快速开直播、做短视频,可在本地消费、本地生活、电商直播等场景落地,部分场景效果可以接近真人实拍。

快手智播使用也非常便捷,最低只需要3分钟的视频和音频素材(5分钟以上更佳),就可以制作相应的数字孪生形象,同时快手还将提供整套的SaaS服务工具,不需要用户另外采购任何硬件设备,真正做到一键开播。这套流程在当前的技术能力下,仅需千元即可完成,而此前传统数字人制作费用一般需10万元以上。

王仲远表示,身处这场 AI 技术变革之中,快手坚信AIGC将赋予普通用户更多的创作权力和自由,也坚信AIGC正在成为短视频内容生产的基础设施。通过不断升级技术能力、优化产品功能,快手将为创作者提供更便捷、更智能的创作体验。

1、该内容为作者独立观点,不代表电商报观点或立场,文章为作者本人上传,版权归原作者所有,未经允许不得转载。
2、电商号平台仅提供信息存储服务,如发现文章、图片等侵权行为,侵权责任由作者本人承担。
3、如对本稿件有异议或投诉,请联系:info@dsb.cn
相关阅读
8月10日消息,在光合创作者大会上,AI、用户增长业务负责人王仲远展示了全模态、大模型AIGC解决方案和AIGC数字人产品智播,还首次正式公布了大模型方面的进展。
8月10日消息,据报道,在光合创作者大会上,今日首次正式公布大模型方面的进展,AI、用户增长业务负责人王仲远展示了全模态、大模型AIGC解决方案和AIGC数字人产品“智播”。此外,该公司“智播系统”软件著作权已于今年2月获得登记批准,当前版本号为V1.0。
2023光合创作者大会近日举行,大会以“热爱,让收获更多”为主题,重磅发布创作者服务战略。另AIGC数字人产品“智播”发布,AI四格漫画、AI生成影视解说脚本、AI一键Vlog剪辑等功能也内测在即。
8月27日消息,主站业务与社区科学线负责人盖坤在2024光合创作者大会上披露,AI正不断深入创作者的内容生产环节。截至目前,已有超过160万人使用过的视频生成大模型可灵AI,并累计生成超1600万视频。7月30日,可灵AI正式面向全球上线会员体系,成为全球首个用户可用的真实影像级视频生成大模型。
今日举办2022光合创作者大会大数据研究院与创作者服务团队联合发布《2022创作者生态报告》。
光合创作者大会上,主站业务与社会科学负责人于越表示,未来一年将投入超4000亿流量扶持优质创作者。
8月27日消息,2024光合创作者大会上,手电商事业部兼商业化事业部负责人王剑伟表示,创作者是内容与商业的重要一环,也是客户与用户之间的连接器、放大器。据介绍,今年上半年,商业客户合作的达人订单量同比增长160%,客户对于达人商业内容的复购率达90%。
4月22日消息,在今日的光合创作者大会上,高级副总裁、内容运营负责人严强提到,选择了一条不一样的路,“我们不认为未来的一切的事情都由算法决定,我们不认为算法可以凌驾于创作者之上。”严强表示,人和人之间的信任,感情的连接是非常有力量、非常有价值的。此外,严强还宣布,今年的主要目标将围绕构建直播时代,推进泛生活服务,以及提升平台的社区及社交价值三个层面展开。
4月22日消息,在今日的光合创作者大会上,高级副总裁马宏彬表示,创作者已成为链接品牌和用户的关键桥梁,过去一年,品牌投放需求以及创作者广告收入均实现了高速增长,2021年,磁力引擎 将帮助创作者实现100亿广告收入。同时,马宏彬透露,磁力聚星的客户数量、客户对创作者的需求和投入均实现了高幅增长。据马宏彬介绍,磁力引擎也将持续聚焦为创作者提供商业撮合、加速成长与变现的解决方案。