一种根据知识点对英文电影自动切割生成配音素材的方法与流程

1.本发明涉及配音技术，尤其涉及配音素材自动技术。

背景技术：

2.作为一种创新的外语学习方式，如趣配音等外语教学软件和网站会向学习者提供一种特殊的视频片段，这种视频片段一般取自经典的外语原版电影或电视剧等，该视频片段已经预先分离了人声和背景，同时还可提供中外语字幕。外语学习者可亲自为这种视频片段配音，并通过这种方式对配音内容进行学习。相对于被动的、以听为主的传统外语学习方式，这种主动的、身临其境的外语学习方式可有效提高学习者的参与感，使学习者更有效地掌握配音内容包含的外语材料。
3.但是准备这种教学用的配音素材需要精通外语和视频处理技术的专业人员，消耗大量的时间用于视频材料的剪辑、原声的分离、外语字幕的生成等，成本较高，需时较长，难以大量生成。进一步地，对于中小学的学生使用者，如何将英文电影自动生成与中小学英语教学中的知识点相匹配的配音素材，也是本领域的技术人员亟待开发的技术。

技术实现要素：

4.有鉴于现有技术的上述缺陷，本发明所要解决的技术问题是对一部完整的电影根据中小学知识点自动切割出需要的视频片段和字幕，并对视频片段分离出人声和背景，对获取到的视频进行转码转为配音素材。
5.为实现上述目的，本发明首先提供了一种根据知识点对英文电影自动切割生成配音素材的方法，其包括步骤：
6.(1)电影入库，并通过网络采集电影字幕；
7.(2)对电影进行ai听译，获取ai字幕，与采集的多个电影字幕进行相似度比对，获取较准确的字幕，并对字幕时间轴进行校正确认；
8.(3)根据中小学英文知识点，将字幕文件分割为多个小段；
9.(4)根据分割后的字幕小段，对电影进行切割，得到与各字幕小段相对应的电影视频片段；
10.(5)从各视频片段中分离出音频，并对音频文件进行人声和背景音分离，获取配音素材所需的背景音和原音；
11.(6)对视频片段进行背景音和字幕合成及转码，得到最终的配音素材。
12.进一步地，还包括步骤(7)，即将配音素材上线到配音平台app。
13.进一步地，步骤(4)中，采用ffmpeg方法进行在线可视化视频剪辑。
14.进一步地，步骤(5)中，采用spleeter方法进行人声背景音分离。
15.进一步地，转码后的视频素材包括标清、高清、蓝光和超清多码率。
16.本发明还提供了一种一种根据知识点对英文电影自动切割生成配音素材的系统，包括字幕采集模块、字幕比对选取模块、字幕时间轴校正模块、字幕分割模块、视频分割模
块、音频分离模块、视频合成转码模块；其中，字幕采集模块用于通过网络采集入库的电影字幕；字幕比对选取模块用于对电影进行ai听译，获取ai字幕，与采集的多个电影字幕进行相似度比对，获取较准确的字幕；字幕时间轴校正模块用于对字幕时间轴进行校正确认；字幕分割模块用于根据中小学英文知识点，将字幕文件分割为多个小段；视频分割模块用于根据分割后的字幕小段，对电影进行切割，得到与各字幕小段相对应的电影视频片段；音频分离模块用于从各视频片段中分离出音频，并对音频文件进行人声和背景音分离，获取配音素材所需的背景音和原音；视频合成转码模块用于对视频片段进行背景音和字幕合成及转码，得到最终的配音素材。
17.进一步地，视频分割模块采用ffmpeg方法进行在线可视化视频剪辑。
18.进一步地，音频分离模块采用spleeter方法进行人声背景音分离。
19.进一步地，该系统被设置为将生成的配音素材上线到配音平台app。
20.进一步地，转码后的视频素材包括标清、高清、蓝光和超清多码率。
21.本发明可自动获取网络上的电影字幕，解决人工字幕文件的时间成本；可规模化的生产配音素材，大大的丰富了“英语趣配音”的配音资源；用户在线可视化操作，简单的对字幕进行校对和信息完善，操作方便；通过自动化电影切割，大大节省公司资源生产成本。
22.以下将结合附图对本发明的构思、具体结构及产生的技术效果作进一步说明，以充分地了解本发明的目的、特征和效果。
附图说明
23.图1是本发明的一个较佳实施例中的流程图；
24.图2是本发明的一个较佳实施例中的字幕处理的系统操作界面图；
25.图3是本发明的一个较佳实施例中的视频剪辑的系统操作界面图；
26.图4是本发明的一个较佳实施例中的音频分离的系统操作界面图；
27.图5是本发明的一个较佳实施例中对视频进行信息补充的操作界面图。
具体实施方式
28.以下参考说明书附图介绍本发明的多个优选实施例，使其技术内容更加清楚和便于理解。本发明可以通过许多不同形式的实施例来得以体现，本发明的保护范围并非仅限于文中提到的实施例。
29.如图1所示，本发明的根据知识点对英文视频自动切割生成配音素材的方法包括步骤：
30.(1)对需要电影进行入库，采集符合该电影的字幕文件。字幕文件也可通过网络自动采集，也可由人工上传。操作界面如图2所示。
31.(2)对电影进行ai听译，获取ai字幕，与采集的多个字幕文件进行相似度对比，以获取较准确字幕，并对字幕时间轴进行校正。在一个优选实施例中，本发明采用了基于阿里的智能语音识别技术。系统操作界面如图3所示。
32.(3)字幕确认后，根据中小学知识点对字幕文件进行预切割，分割成多个字幕片段。其中中小学知识点可根据教科书的教学大纲确定，也可由教学者自行确定。在一个优选
实施例中，本发明采用了基于ffmpeg在线可视化视频剪辑技术。
33.(4)根据字幕片段，对视频进行编辑，从视频片段中分离音频，确定最终视频片段。在一个优选实施例中，本发明采用了基于spleeter人声背景音分离技术。系统操作界面如图4所示。
34.(5)对视频片段进行信息补充。系统操作界面如图5所示。
35.(6)对各视频片段转码打水印，完成配音素材。
36.(7)上架到资源库，供app用户使用配音。
37.本发明可自动获取网络上的电影字幕，解决人工字幕文件的时间成本；可规模化的生产配音素材，大大的丰富了“英语趣配音”的配音资源；用户在线可视化操作，简单的对字幕进行校对和信息完善，操作方便；通过自动化电影切割，大大节省公司资源生产成本。
38.以上详细描述了本发明的较佳具体实施例。应当理解，本领域的普通技术无需创造性劳动就可以根据本发明的构思作出诸多修改和变化。因此，凡本技术领域中技术人员依本发明的构思在现有技术的基础上通过逻辑分析、推理或者有限的实验可以得到的技术方案，皆应在由权利要求书所确定的保护范围内。

技术特征：

1.一种根据知识点对英文电影自动切割生成配音素材的方法，其特征在于，包括步骤：(1)电影入库，并通过网络采集电影字幕；(2)对电影进行ai听译，获取ai字幕，与采集的多个电影字幕进行相似度比对，获取较准确的字幕，并对字幕时间轴进行校正确认；(3)根据中小学英文知识点，将字幕文件分割为多个小段；(4)根据分割后的字幕小段，对电影进行切割，得到与各字幕小段相对应的电影视频片段；(5)从各视频片段中分离出音频，并对音频文件进行人声和背景音分离，获取配音素材所需的背景音和原音；(6)对视频片段进行背景音和字幕合成及转码，得到最终的配音素材。2.如权利要求1所述的根据知识点对英文电影自动切割生成配音素材的方法，其中，还包括步骤(7)，即将配音素材上线到配音平台app。3.如权利要求1所述的根据知识点对英文电影自动切割生成配音素材的方法，其中，转码后的视频素材包括标清、高清、蓝光和超清多码率。4.如权利要求1所述的根据知识点对英文电影自动切割生成配音素材的方法，其中，步骤(4)中，采用ffmpeg方法进行在线可视化视频剪辑。5.如权利要求1所述的根据知识点对英文电影自动切割生成配音素材的方法，其中，步骤(5)中，采用spleeter方法进行人声背景音分离。6.一种根据知识点对英文电影自动切割生成配音素材的系统，其特征在于，包括字幕采集模块、字幕比对选取模块、字幕时间轴校正模块、字幕分割模块、视频分割模块、音频分离模块、视频合成转码模块；其中，字幕采集模块用于通过网络采集入库的电影字幕；字幕比对选取模块用于对电影进行ai听译，获取ai字幕，与采集的多个电影字幕进行相似度比对，获取较准确的字幕；字幕时间轴校正模块用于对字幕时间轴进行校正确认；字幕分割模块用于根据中小学英文知识点，将字幕文件分割为多个小段；视频分割模块用于根据分割后的字幕小段，对电影进行切割，得到与各字幕小段相对应的电影视频片段；音频分离模块用于从各视频片段中分离出音频，并对音频文件进行人声和背景音分离，获取配音素材所需的背景音和原音；视频合成转码模块用于对视频片段进行背景音和字幕合成及转码，得到最终的配音素材。7.如权利要求6所述的根据知识点对英文电影自动切割生成配音素材的系统，其中，视频分割模块采用ffmpeg方法进行在线可视化视频剪辑。8.如权利要求6所述的根据知识点对英文电影自动切割生成配音素材的系统，其中，音频分离模块采用spleeter方法进行人声背景音分离。9.如权利要求6所述的根据知识点对英文电影自动切割生成配音素材的系统，其中，该系统被设置为将生成的配音素材上线到配音平台app。10.如权利要求5所述的根据知识点对英文电影自动切割生成配音素材的系统，其中，转码后的视频素材包括标清、高清、蓝光和超清多码率。

技术总结

本发明公开了一种根据知识点对英文电影自动切割生成配音素材的方法，其包括步骤：(1)电影入库，并通过网络采集电影字幕；(2)对电影进行AI听译，获取AI字幕，与采集的多个电影字幕进行相似度比对，获取较准确的字幕，并对字幕时间轴进行校正确认；(3)根据中小学英文知识点，将字幕文件分割为多个小段；(4)根据分割后的字幕小段，对电影进行切割，得到与各字幕小段相对应的电影视频片段；(5)从各视频片段中分离出音频，并对音频文件进行人声和背景音分离，获取配音素材所需的背景音和原音；(6)对视频片段进行背景音和字幕合成及转码，得到最终的配音素材。终的配音素材。终的配音素材。