本发明涉及ai短视频制作,具体而言,涉及一种基于ai图像的短视频创作方法及系统。
背景技术:
1、短视频的发展在近年来呈现出快速增长的趋势,特别是在移动互联网普及的背景下,短视频成为人们获取信息和娱乐的重要方式。同时短视频也成为人们记载生活的一种方式,通过拍摄视频和图像等,绘制成短视频记载生活中的点点滴滴。
2、在通过短视频记录生活的同时也将短视频分享于网络之中,因此延伸出拍摄短视频的各种方式。图像作为记录旅游和生活的一个重要载体,也被广泛的发布短视频平台上。
3、但通常图像的发布仅仅配有多张图像和音乐,使得短视频内容单调。
技术实现思路
1、为了增加由图像短视频的内容丰富性,本申请提供一种基于ai图像的短视频创作方法及系统。
2、第一方面,本申请提供一种基于ai图像的短视频创作方法,采用如下的技术方案:
3、一种基于ai图像的短视频创作方法,所述方法包括:
4、接收用户输入的图像素材和用户选定的基础画风数据,并根据所述基础画风数据和所述图像素材,建立初步漫画图像数据;
5、根据所述初步漫画图像数据和用户输入的所述短视频内容信息,生成初步短视频数据;
6、接收用户输入的语音修订信息,并根据所述语音修订信息对所述初步短视频数据进行修订,生成核稿短视频数据。
7、可选的,在所述接收用户输入的图像素材和用户选定的基础画风数据之前,还包括:
8、接收用户输入的剪辑动态漫信息,并根据所述剪辑动态漫信息生成人物构建基础信息和物件构建基础信息;
9、接收用户输入的指定人物刻画信息和指定物件刻画信息,并根据所述指定人物刻画信息、所述指定物件刻画信息以及所述剪辑动态漫信息,生成基础画风数据,所述基础画风数据包括初步人物构建信息和初步物体构建信息。
10、可选的,所述根据所述基础画风数据和所述图像素材,建立初步漫画图像数据之前,还包括:
11、获取对应当前用户账号的,在同一目标基础画风下的多个历史核稿短视频数据;
12、根据多个所述历史核稿短视频数据构建动画制作数据库,所述动画制作数据库包括人物身份信息数据集和物体图像数据集。
13、可选的,所述根据多个所述历史核稿短视频数据构建动画制作数据库,包括:
14、获取多个所述历史核稿短视频数据对应的历史图像素材和历史短视频内容信息;
15、根据多个所述历史图像素材和对应的历史短视频内容信息,捕获出人物身份信息和物体图像信息,所述人物身份信息包括人物社会关系信息和人物面部特征信息;
16、根据所述历史核稿短视频数据捕获出多个历史拟态人物数据、多个历史拟态物体数据;
17、建立多个所述历史拟态人物数据和多个所述人物身份信息之间一对应的映射关系,并汇总生成人物身份信息数据集;
18、建立多个所述历史拟态物体数据和多个所述物体图像信息之间一一对应的映射关系,并汇总生成物体图像数据集。
19、可选的,所述根据所述基础画风数据和所述图像素材,建立初步漫画图像数据,包括:
20、捕获当前接收所述图像素材中的人物图像和物体图像;
21、根据所述人物图像、初步人物构建信息以及所述人物身份信息数据集,生成动态漫画人物模型数据;
22、根据所述物体图像、所述初步物体构建信息以及所述物体图像数据集,生成动态漫画物体模型数据;
23、基于所述动态漫画人物模型数据和所述动态漫画物体模型数据,生成初步漫画图像数据。
24、可选的,所述根据所述初步漫画图像数据和用户输入的所述短视频内容信息,生成初步短视频数据,包括:
25、根据所述初步漫画图像数据和所述短视频内容信息,生成多个虚拟场景构建图像;
26、根据所述短视频内容信息在预设的语音包数据库中,匹配对应的一个或多个语音包数据,并根据多个所述语音包数据生成匹配语音独白数据;
27、根据所述初步漫画图像数据、虚拟场景构建图像以及匹配语音独白数据,生成初步短视频数据。
28、可选的,所述根据所述初步漫画图像数据和所述短视频主题信息,生成多个虚拟场景构建图像,包括:
29、根据所述短视频内容信息中的故事情节划分出多个故事情节段落;
30、根据目标故事情节段落、所述基础画风数据以及所述动画制作数据库,生成虚拟场景构建图像。
31、第二方面,本申请提供一种基于ai图像的短视频创作系统,采用如下的技术方案:
32、一种基于ai图像的短视频创作系统,所述短视频创作系统包括,
33、漫画图像建立模块,用于接收用户输入的图像素材和用户选定的基础画风数据,并根据所述基础画风数据和所述图像素材,建立初步漫画图像数据;
34、短视频构建模块,用于根据所述初步漫画图像数据和用户输入的所述短视频内容信息,生成初步短视频数据;
35、短视频修订模块,用于接收用户输入的语音修订信息,并根据所述语音修订信息对所述初步短视频数据进行修订,生成核稿短视频数据。
36、第三方面,本申请提供一种智能终端,采用如下的技术方案:
37、一种智能终端,所述智能终端包括处理器和存储器,所述存储器中存储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、所述至少一段程序、所述代码集或指令集由所述处理器加载并执行以实现如第一方面所述的基于ai图像的短视频创作方法中智能终端的处理。
38、第四方面,本申请提供一种计算机可读存储介质,采用如下的技术方案:
39、一种计算机可读存储介质,所述存储介质中存储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、所述至少一段程序、所述代码集或指令集由处理器加载并执行以实现如第一方面所述的基于ai图像的短视频创作方法中智能终端的处理。
40、综上所述,本申请包括以下至少一种有益技术效果:
41、在用户上传图像素材之后,用户还能够通过选定基础画风数据和短视频内容信息,将图像素材转换成动漫图像,并结合短视频内容信息制作生成初步短视频数据,从而在增强短视频内容的同时,还增加了短视频中动漫图像的可自由调整度,从而使得短视频的内容丰富,可创作性增强;
42、利用直接截取剪辑动态漫信息的方式,降低了制作不同风格动漫图像的难度,使得用户的选择更加丰富;
43、通过建立人物与动态漫画人物模型数据之间的对应关系,使得系统在识别到面部特征后能够直接匹配动态漫画人物模型数据,降低了系统数据处理强度,同时使得用户账号下同一人物对应的漫画人物形象统一,增强了用户账号下短视频数据的专业性和可识别强度。
1.一种基于ai图像的短视频创作方法,其特征在于,所述方法包括:
2.根据权利要求1所述的方法,其特征在于,在所述接收用户输入的图像素材和用户选定的基础画风数据之前,还包括:
3.根据权利要求2所述的方法,其特征在于,所述根据所述基础画风数据和所述图像素材,建立初步漫画图像数据之前,还包括:
4.根据权利要求3所述的方法,其特征在于,所述根据多个所述历史核稿短视频数据构建动画制作数据库,包括:
5.根据权利要求4所述的方法,其特征在于,所述根据所述基础画风数据和所述图像素材,建立初步漫画图像数据,包括:
6.根据权利要求5所述的方法,其特征在于,所述根据所述初步漫画图像数据和用户输入的所述短视频内容信息,生成初步短视频数据,包括:
7.根据权利要求6所述的方法,其特征在于,所述根据所述初步漫画图像数据和所述短视频主题信息,生成多个虚拟场景构建图像,包括:
8.一种基于ai图像的短视频创作系统,其特征在于,所述短视频创作系统包括,
9.一种智能终端,其特征在于,所述智能终端包括处理器和存储器,所述存储器中存储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、所述至少一段程序、所述代码集或指令集由所述处理器加载并执行以实现如权利要求1至7任一所述的基于ai图像的短视频创作方法中智能终端的处理。
10.一种计算机可读存储介质,其特征在于,所述存储介质中存储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、所述至少一段程序、所述代码集或指令集由处理器加载并执行以实现如权利要求1至7任一所述的基于ai图像的短视频创作方法中智能终端的处理。
