推荐区
加入

Spirit LM

4个月前发布 4 00
收藏 0

多模态语言模型，融合文本和语音

收录时间：
2025-01-16
前往网站
Spirit LMSpirit LM
Spirit LM前往网站

Spirit LM是一个基础多模态语言模型，能够自由混合文本和语音。该模型基于一个7B预训练的文本语言模型，通过持续在文本和语音单元上训练来扩展到语音模式。语音和文本序列被串联为单个令牌流，并使用一个小的自动策划的语音-文本平行语料库，采用词级交错方法进行训练。Spirit LM有两个版本：基础版使用语音音素单元（HuBERT），而表达版除了音素单元外，还使用音高和风格单元来模拟表达性。对于两个版本，文本都使用子词BPE令牌进行编码。该模型不仅展现了文本模型的语义能力，还展现了语音模型的表达能力。此外，我们展示了Spirit LM能够在少量样本的情况下跨模态学习新任务（例如ASR、TTS、语音分类）。

数据评估

Spirit LM浏览人数已经达到4，如你需要查询该站的相关权重信息，可以点击"5118数据""爱站数据""Chinaz数据"进入；以目前的网站数据参考，建议大家请以爱站数据为准，更多网站价值评估因素如：Spirit LM的访问速度、搜索引擎收录以及索引量、用户体验等；当然要评估一个站的价值，最主要还是需要根据您自身的需求以及需要，一些确切的数据则需要找Spirit LM的站长进行洽谈提供。如该站的IP、PV、跳出率等！

关于Spirit LM特别声明

本站趣搜呀提供的Spirit LM都来源于网络，不保证外部链接的准确性和完整性，同时，对于该外部链接的指向，不由趣搜呀实际控制，在2025年1月16日 14:30收录时，该网页上的内容，都属于合规合法，后期网页的内容如出现违规，可以直接联系网站管理员进行删除，趣搜呀不承担任何责任。

趣搜呀致力于优质、实用的网络站点资源收集与分享！本文地址https://qusoya.com/sites/19113.html转载请注明

相关导航

暂无评论

none
暂无评论...