聊聊关于自动剪辑的思路

恋旧

最近在负责一个花卉类型抖音视频剪辑，不太需要视频质量，但数量要求很大。网上所谓的自动剪辑还是需要自己导入素材，那我觉得跟自己手动剪差别不大。于是萌生出自己写一个自动剪辑软件的想法啊。
我想要的效果是类似于剪映的一键成片，给软件输入文案，软件自己匹配本地素材生成视频草稿。剪辑用到的软件是剪映，这里就不用ffmpeg了，因为我自己之前写过不少关于剪映的软件，所以自动导入素材，自动剪辑和自动生成草稿就比较好搞定，所以这里只讨论文案如何比较精准的匹配素材。比如一篇关于兰花的文案，别给我匹配成荷花的素材。
整体思路
将手头的素材先按照动词、名词、形容词的形式整理成标签数据库，例如【浇水、兰花、美丽】，然后利用阿里云的NLP自然语言处理将句子和这些标签匹配，匹配度高的就留下，一句一句形成最终草稿。
1、句子分割
当用户输入文案后，首先用标点作为分割符分割成一个一个句子
2.词语分割和词性标注
利用阿里云nlp词性标注api，例如“美丽的兰花也是需要浇水的”这句话的返回值下图所示

VA意思是谓语形容词，NN是其他名词等等，我们先根据词性留下动词名词和形容词，将没用的“的”、“是”、句末助词、语气词等过滤
3.本地匹配
我们得到了这些关键行的词后，按照动词匹配动词，名词匹配名词的形式，直接匹配本地的标签数据库，如果能匹配到就直接用在这一句，也就不用向下继续进行了。但往往这些词语并不会直接出现，例如“美丽”在文案中可能是“漂亮”，“浇水”在文案中是“浇灌”
4.词向量匹配
利用阿里云nlp词向量来取第2步词语的词向量，例如“兰花”

返回值为50维度的向量矩阵，然后利用余弦相似度公式匹配标签

大家可以将这一步理解为近义词匹配
总结
大体的思路就跟上边一样，其实中间我还省略了一些，比如中心词提取，动词名词形容词、花类植物、绿叶植物、产品之间的优先级策略等，这里就不展开讲了。不知道有大神看一下我这个思路行吗，还有就是有些没有主体性的句子和一些过渡性的句子该怎么匹配？

x27xjox27xjo

老哥关于剪映你写没写那个根据文字生成视频的

阿博哥哥

gap那种ai应该来的更简单吧

恋旧

不要再艾特我了 发表于 2023-12-12 16:46
前面能看懂 后面一个公式完全看不懂········

要是用图片的话，我就直接用剪映的一键成片就完事了，那还用费这些事，而且你要是用过ai成图的话就知道这很不现实，你必须很具体的描述出画面才能得到理想的图片，但往往文案并不会这么具体，例如“温度低了还是要放在温暖的室内最好”这句话，直接给ai没他会生成什么？再去单独调整效果不好还比自己手动剪辑更麻烦

怀念ob

遇事不决 ChatGPT

不要再艾特我了

前面能看懂 后面一个公式完全看不懂········