5秒内克隆你的声音,并生成任何内容,这个开源工具细思极恐
开源前线(ID:OpenSourceTop) 猿妹整编
综合自:https://github.com/babysor/MockingBird
大家应该都知道声音克隆技术,通俗的来说就是借助深度学习算法,可以完全模拟某个人的声音,而且由机器合成的语音连情绪都能够完美表达出来,基本可以以假乱真,只要不见面,你根本就察觉不出来向你发出声音的知识一个机器。
语音克隆最大的创新之一是减少创建语音所需的原始数据量。过去,该系统需要数十甚至数百小时的音频。但是,今天猿妹要和大家分享的这个工具5秒钟就可以克隆成功,这个工具名叫——MockingBird 。
MockingBird已经登上Github热榜,收获3.5K 的Star,累计分支 303 (Github地址:https://github.com/babysor/MockingBird )
MockingBird具有如下特性:支持普通话并使用多种中文数据集进行测试适用于 pytorch,已在 1.9.0 版本(最新于 2021 年 8 月)中测试,GPU Tesla T4 和 GTX 2060支持 Windows + Linux仅使用新训练的合成器(synthesizer)就有良好效果,复用预训练的编码器/声码器
MockingBird如何使用
MockingBird的安装要求如下:首先,MockingBird需要Python 3.7 或更高版本安装 PyTorch安装 ffmpeg。运行pip install -r requirements.txt 来安装剩余的必要包。安装 webrtcvad 用 pip install webrtcvad-wheels。
接着,你需要使用数据集训练合成器:下载 数据集并解压:确保您可以访问 train 文件夹中的所有音频文件(如.wav)使用音频和梅尔频谱图进行预处理:python synthesizer_preprocess_audio.py 可以传入参数 --dataset {dataset} 支持 adatatang_200zh, magicdata, aishell3预处理嵌入:python synthesizer_preprocess_embeds.py /SV2TTS/synthesizer训练合成器:python synthesizer_train.py mandarin /SV2TTS/synthesizer当你在训练文件夹 synthesizer/saved_models/ 中看到注意线显示和损失满足您的需要时,请转到下一步。
使用预先训练好的合成器,如果没有设备或者不想慢慢调试,可以使用网友贡献的模型。
训练声码器预处理数据: python vocoder_preprocess.py 训练声码器: python vocoder_train.py mandarin
启动工具箱
然后你可以尝试使用工具箱:python demo_toolbox.py -d
秀操作仅用25行Python代码,即可实现人脸检测在本文中,我们将介绍一种使用Python和开源库OpenCV进行人脸识别的非常简单的入门方法。注意事项1)确保使用的是OpenCVv2。2)有一个可用的网络摄像头,以便此脚本可以正
11代酷睿IPC提升高达19,所以该怎样配呢?3月30日,第11代英特尔智能酷睿处理器正式开始发货。其中包含了i511400i511400Fi511600KFi711700i711700Fi711700KKFi911900K等
顶级华人交易员分享如何交易多个时间框架并提升交易胜率此前我们曾发布过许多知名交易员关于推荐何种时间框架交易的文章,根据自己交易系统的不同,有的选择日线图,有的选择4小时图,甚至更低级别的时间框架图表。本文是新加坡知名华人交易员Ray
克林顿政府高官美元霸权恐毁于自身JeffreyGarten近日,曾在克林顿政府担任美国商务副部长的耶鲁大学管理学院前院长杰佛里加藤(JeffreyGarten)在接受中国香港东方日报采访时称,美元作为全球首席储备
惊呆了!高频交易员每年让投资者损失50亿美元高频交易(HFT)每年致使全球投资者损失约50亿美元。这一数据来自近期发表在经济学季刊上的一篇论文QuantifyingtheHighFrequencyTradingArmsRac
防通胀与股市崩盘,亿万富豪称投资组合中至少配置20的黄金NaguibSawiris埃及亿万富豪OrascomInvestmentHolding董事长NaguibSawiris表示,全球关注通胀及股市可能崩盘之际,黄金是一项不错的投资。黄
顶级交易员导师付费内容详解交易心理反转和市场反转布雷特斯坦伯格(BrettSteenbarger)是美国知名交易心理导师,曾在华尔街多家顶级培训机构担任交易员心理导师。作为一名心理学教授和资深交易员,布雷特对交易心理的理解远胜他
顶级华人交易员分享5种有效的波段交易实战技巧RaynerTeo是独立交易员,曾经是一名自营交易员。他交易历史也有12年左右了。如今他自己的交易博客相当受欢迎。他主要跟随趋势进行交易。他认为,除了交易技巧和策略之外,交易者能否
传美国司法部对USDT高层展开刑事调查据彭博社消息,美国司法部针对泰达币(USDT)发行商Tether的高管展开一项刑事调查,调查该数字货币背后的高管是否在与银行合作时隐瞒了交易与加密货币有关的情况。泰达币是由Teth
顶级华人交易员分享交易反转图表形态必备指南在图表模式中有很多反转形态,比如头肩顶双顶以及三重顶等。但是,当你尝试交易这些反转图表形态时,你发现自己又一次陷入了趋势下的陷阱。然后,你懊恼地问自己为什么我总是被失算?这些反转图
突破交易须知小心这6种经典的陷阱图表形态任何爱好图表形态的交易者都应该熟悉牛市陷阱图表形态(与熊市陷阱相对应),因为它们在外汇期货及股票等市场上非常普遍。牛市陷阱(BullTrap)的另一个含义叫向上推(upthrust