首页 >> 快讯 >

Adobe的字幕AI很好但这个免费的Resolve插件有更多的潜力

2023-03-15 10:34:57 来源: 用户: 

我喜欢人们关心他们的字幕。YouTube上没有足够的人这样做,从基本的可访问性角度来看,它非常重要。更重要的是,很多人(包括我自己)更喜欢看带字幕的电影。虽然转录过程本身可能很乏味,但您可以通过创作字幕以获得戏剧效果,特别是描述性字幕,从元文本中获得很多乐趣。所以我想谈谈我在DaVinciResolve中使用的工具StoryToolkitAI,它不仅简化了流程,而且实际上内置了一些基本的翻译服务。

不过,在我们开始之前,我们必须先谈谈字幕格式。SRT(又名SubRip字幕文件)是目前最常见的字幕格式之一。这是一个带有聊天和时间码的简单文本文件,Youtube、VLC等可以轻松理解。还有大量其他格式,包括一种具有高级格式化、颜色和位置功能的格式,主要由动漫和日本电视迷使用(对适当命名的AdvancedSubStationAlpha或.ass格式大喊大叫),但SRT文件很容易被DaVinciResolve等程序文件处理和理解。

首映与解决

一般来说,我不是视频编辑软件Adob​​ePremiere的粉丝。我认为这是一个破烂、昂贵的软件,具有非常烦人和掠夺性的订阅模式,在这一点上,DaVinciResolve(几乎)以功能对功能胜过它。最初在Resolve上卖给我并让我将整个工作流程转移过来的主要功能实际上是在其中编写字幕是多么高效和容易,与Premiere相比,Premiere是一场噩梦并且一直崩溃。

从那时起,Premiere在做一件事上得到了迅速改进:转录采访。即使我仍然不喜欢使用产品,尤其是不喜欢为产品付费,他们也会在这里投入一些时间来改进产品。毫无疑问,在Premiere上完成的最有趣的工作与其涉及转录的云功能有关。使用起来很愉快,当它起作用时,它就会起作用。你将不得不花很多时间照看它,任何结果显然都需要编辑再次通过,但它大大减少了为这些事情计时的工作流程。他们还以非常有趣的方式对其进行迭代,特别是“基于文本的编辑”,尽管我发现处理字幕的实际过程远不如达芬奇有趣。DaVinci的字幕编辑器始终比Premiere的更直观、更流畅、布局更好、更灵活。

添加一个非常方便的功能

因此,目前,Resolve的功能集与Premiere相比存在一个Transcription-shaped漏洞。过去,我使用了一个名为pyTranscriber的Python驱动的转录器,它通过GoogleSpeechRecognitionAPI运行您的音频。幸运的是,有人以Whisper的形式提供了解决方案,这是OpenAI的一个项目。我们之前已经讨论过用于转录的Whisper。从那时起,一些人将代码应用到多个项目并添加了几个UI前端。最近和有趣的一个是StoryToolkitAI。

StoryToolkitAI不是由BlackmagicDesign构建的软件。它是开发人员Octimot的GitHub项目,运行在OpenAI的Whisper和Python上,并使用Resolve的API。因此,安装起来有点挑剔。我个人在安装时遇到了真正的麻烦,直到我检查了repo上的问题页面,意识到我安装了冲突的Python版本,卸载并重新安装了正确的版本并让它工作。

为了让它运行,您需要确保Resolve正在运行并启用脚本,然后安装并打开该软件。它将进行一些安装,安装依赖项,然后启动并运行。从那里,StoryToolkitAI将需要将您在Resolve中的时间轴的粗略版本导出到您选择的文件夹,它将使用Whisper根据可用的众多语言模型之一运行转录。完成后,您可以查看和搜索您的成绩单,让成绩单与您在Resolve中的时间线同步,放入SRT文件,等等。

StoryToolkitAI对我来说有两个巨大的优势:它是免费的,并且它在本地运行,这意味着您不需要向Adob​​e付费或使用他们的服务器或他们称为Adob​​eSensei的机器学习软件。我承认Adob​​e的产品目前使用起来更流畅、更灵活,但是对于GitHub存储库上免费提供的东西,StoryToolkitAI运行得非常好。在我的测试中,StoryToolkitAI在确定说话时间、转录、识别专有名词以及在正确的时间放置这些字幕方面做得非常可靠,尽管几乎总是会出现一些错误。特别是,你确实需要在剪辑开始和结束时照看,因为有时字幕会比它应该挂的时间长。我发现它很难处理多个扬声器、串音,并且有时会被背景噪音和长时间的静音所干扰。

最重要的是,StoryToolkitAI还能够获取转录、搜索转录并将转录的各个部分转化为标记。这意味着您可以根据演讲者提到特定单词或主题的时间来搜索和标记时间线,这是一个非常方便的功能,可以与Adob​​e的工具集相媲美。即使在Adob​​e之外,像Trint这样的类似服务也会让你花费更多,尽管此时可靠性是一个因素。

StoryToolkitAI还有一项值得注意的功能:翻译。

  免责声明:本文由用户上传,与本网站立场无关。财经信息仅供读者参考,并不构成投资建议。投资者据此操作,风险自担。 如有侵权请联系删除!

 
分享:
最新文章