免责声明：本帖及相关模型只适用于AI学习交流，本人对模型生成的内容及使用模型造成的结果不负任何责任
技术交流贴看这里https://white-plus.net/read.php?tid=1919449，本帖主要谈谈效果
我这边只微调了生成中字的功能，如果需要日字的话，建议用原版的large-v2模型，参考最后的相关项目

=========8.19=========
用日语音声的汉化数据，微调了一个whisper-medium模型，可以从音声直接生成中文字幕，效果还行          
和之前用whisper的流程主要有两点不同吧：
1. 不需要先把音声转日文字幕，再机翻成中文，而是直接出中字
2. 在特定数据上微调，所以识别ASMR特有的词汇比较准

=========8.27更新=========
训练数据增加到了500小时，效果略有提升
微调后的模型放在这里，想试试的+人可以弄下来玩      

此帖售价 0 SP币,已有 4495 人购买

若发现会员采用欺骗的方法获取财富,请立刻举报,我们会对会员处以2-N倍的罚金,严重者封掉ID!

(cpu版应该windows都能跑，但是很慢，要点耐心；gpu版需要nvidia显卡)


=========已知问题=========
1. 超过一小时的音频，生成字幕格式有问题；lrc格式待修复，后续增加其他字幕格式

=========相关项目=========
需要日文字幕的话，已经有很多的项目可用了，列出一些供参考：
1. 乃木坂46字幕组的项目(推荐) N46Whisper/README_CN.md at main · Ayanaminn/N46Whisper (github.com)
2. faster-whisper(比原版快一点，我是基于这个开发的) guillaumekln/faster-whisper: Faster Whisper transcription with CTranslate2 (github.com)
3. openai的原版模型 openai/whisper-large-v2 · Hugging Face
4. 类似N46whisper，whisper+gpt zh-plus/openlrc: Transcribe (whisper) and translate (gpt) voice into LRC file. 使用whisper和gpt来转录、翻译你的音频为字幕文件。 (github.com)
5. 打包成exe Purfview/whisper-standalone-win: Standalone executables for those who don't want to bother with Python. (github.com)
6. 微调脚本 jumon/whisper-finetuning: [WIP] Scripts for fine-tuning Whisper (github.com)  
（最近有点忙，没啥空优化了，想优化的+人可以自己微调试试。运行代码在前面压缩包的_internal/src目录，运行问题可以自己改代码）

先收着 以后看

mark

马克下，明天整整

mark，明天看看

牛的     

嫩牛啊 马克

技术贴支持，我之前都是用这个生成日语字幕后，再去找那些chatgpt翻译的小软件来翻译。

牛逼了 测试了下 可以说效果拔群

最近秒传爆了，不太好下音声，想找更多训练数据有点麻烦了  

秀

牛的，想试试但是不知道怎么从头开始部署

mark

已经用上了，谢谢大佬

更新了OD链接，重新打包了一个exe，可以直接运行

大佬厉害，这下人人有丹炼了

马克，等会试试

我回来了，试了一下的确是还可以的，比原本的转录日文在机翻好很多，至少色色挺准的。
后续有优化了记得踢我一脚，谢谢大佬

资源过期了

支持大佬

大佬，资源过期了，麻烦更新一下，谢谢！

牛批     

太有技术了

太硬核了大佬

补了，链接已更新

失效了 拜託大佬補個