MOSS团队携图像与TTS模型开展AMA问答
原文:We’re MOSS, the team behind MOSS-Image, MOSS-TTS, and more — Ask Us Anything!
大家好,r/LocalLLaMA!我们是 MOSS,语音、音频、图像和视频领域 MOSS 模型家族背后的团队。有些人可能通过 MOSS-TTS 认识我们,或者看到过我们最近发布的 MOSS-Image。今天,我们把“有问必答”中的“任何”理解得相当字面。语音、声音、音乐、图像、视频——我们带来了整个 MOSS 模型家族!我们总部位于上海,根植于复旦大学的 OpenMOSS 研究团队和上海创智学院。你可以在我们的网站上探索我们的模型、研究和工具。我们更广泛的研究目标是构建能够理解周围正在发生什么的人工智能:人们在说什么、在看什么,以及情况如何随时间变化。这让我们涉足语音生成、音频和视觉理解,以及同步音视频生成。🎨 MOSS-Image MOSS-Image 是我们的文生图模型,拥有 5B DiT 骨干、中英文文字渲染和 JSON 布局控制。基础版和 SFT 权重及捆绑的推理代码以 Apache 2.0 许可发布。MOSS-Image 一直位居 Hugging Face 上最热门的文生图模型之列。其 ComfyUI 版本已录得 3,702,490 次下载。🎙️ 语音和声音生成 - MOSS-TTS——语音合成和声音克隆。- MOSS-TTSD——多说话人对话、长篇对话和播客。- MOSS-TTS-Realtime——面向对话应用的流式语音生成。- MOSS-TTS-Nano——轻量级 1 亿参数语音生成,支持 CPU 友好的流式推理。- MOSS-VoiceGenerator——根据文字描述设计声音,无需参考音频。- MOSS-SoundEffect——根据文字生成音效。🎧 音频理解 - MOSS-Transcribe-Diarize——带说话人标签和时间戳的转录。- MOSS-Audio——理解和推理语音、环境声音和音乐。- MO