近日,趣丸科技集团发布全球首个多模态配乐大模型“天谱乐”,该模型不仅支持文生音乐、音频生音乐,还首创图片/视频生音乐功能,多模态输入能力超越Suno。目前,天谱乐大模型已全面接入趣丸科技旗下唱鸭APP,面向所有用户开放。用户可登陆唱鸭官网(https://ai.singduck.cn)或下载APP限时免费体验。
用户不再局限于通过文字或音频来生成音乐,而是可以上传图片或视频,生成与图像内容和基调高度契合的包括人声唱词的完整歌曲,生成效果达到了专业级水准。这种多模态输入的方式,极大地丰富了用户的创作手段,使得音视频作品的创作更加灵活多样。
天谱乐大模型的成功推出,标志着趣丸集团在AI音乐生成技术上取得了重大突破。该模型由趣丸集团唱鸭团队自主研发,团队中汇聚了大量技术与音乐背景兼具的复合型人才。他们通过自研的“多模态音乐生成大模型”技术,使模型能够精准识别视频画面的明暗、色彩、情绪变化,并结合音乐的和弦、旋律、歌词、演唱风格等复杂特征,生成高度契合的配乐。这种技术创新不仅打破了AI在音乐理解和生成上的局限,更为音乐创作领域带来了新的可能性。
趣丸集团通过技术创新降低音乐创作门槛,让用户不再受限于专业的乐理知识,复杂的音乐制作流程和昂贵的版权费用,就可以轻松通过音乐创作记录生活的切片,在创作中提升审美自觉和音乐生产能力。
天谱乐大模型让同步视听生成变成现实,独创的“视频生成歌曲”功能,支持上传图片以及MP4、MOV等多种视频格式,生成的音乐曲风丰富、歌词与人声兼备。同时支持输出带有字幕和封面标签的成品视频,方便一键分享到社媒或好友。
《2024中国音乐产业发展总报告》显示,2023年中国数字音乐产业规模达到893.45亿元,中国网络音乐用户规模达到7.26亿。高盛《Music In The Air》指出,预计到2030年,全球音乐市场(录制音乐、词曲版权和演出市场)的收入预计达到1637亿美元。随着生成式AI的推动和广泛应用,数字音乐产业价值将进一步凸显。未来,趣丸集团将持续保持研发投入,专注人工智能交互前沿技术研究和提供企业级解决方案,为用户提供更加优质的AI应用产品与服务。