从视频文件名提取结构化信息用什么训练好呢

3 天前
 shinonome

正则提取名字和集数感觉怎么都有上限, 很多视频文件名(主要是动漫)千奇百怪, 想来问问想要自已跑一个简单的模型有什么选择呢? 目前的需求是:

1: 95 以上的准确率 2: n100 可跑 ( 是最后的目标, 前期主要是准确率)

主要在 BERT 和 LSTM(RNN) 中选,

纠结 BERT 主要还是数据真不够, 1w 就累死我了, 还有就是太大了,

LSTM 则是想效果会不会很一般

目前还是整理数据的阶段, 想请大佬指点一下 大概是这样 input: " [幻樱字幕组] [ 4 月新番] [古见同学有交流障碍症 第二季 Komi-san wa, Komyushou Desu. S02 ] [ 22 ] [ GB_MP4 ] [ 1920X1080 ] " output: '{"group": "幻樱字幕组", "title_en": "Komi-san wa, Komyushou Desu.", "resolution": "1920X1080", "episode": 22, "season": 2, "title_zh": "古见同学有交流障碍症", "sub": "", "title_jp": "", "season_raw": "", "source": ""}'

535 次点击
所在节点    问与答
10 条回复
renmu
3 天前
其实字幕组一共就那么几个,多做几个匹配就可以
SimonDing
3 天前
关注
aminobody
3 天前
调 LLM API, 某国产的便宜的就像不要钱.
shinonome
3 天前
@renmu #1 常用的是没什么问题的,但总会有些奇怪的
例如
[推しの子] 久保同学不放过我 / Kubo-san wa Mob wo Yurusanai - 10 (Sentai 1920x1080 AVC AAC MKV) [复制磁连]
还有各种格式
目前试过一遍, 没一个能大部份覆盖的
gaobh
3 天前
只有大模型不行,加上豆瓣信息
gaobh
3 天前
@gaobh #5 或者加上国外的那个叫什么来着
shinonome
3 天前
@gaobh #5 我只是把文件名结构化一下, 不用豆瓣或 tmdb 吧
shinonome
3 天前
@aminobody #3 不会提示, 效果不是很好 TVT
mumbler
3 天前
用大模型,给个格式示例,就全部给你结构化了,喂给免费的 gemini flash 模型 api ,一次分析 1 万个文件名,每天可用 1500 次
liulicaixiao
2 天前
大模型力大砖飞,你可以提示词里指明你需要什么属性,让它输出成什么格式,一般的大模型最擅长输出的格式是 json ,给个写的好一点的例子,然后测试几遍,如果偶尔出现问题就再写个检测,失败时再重新调用几遍。

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/1093208

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX