腾讯发布多模态音乐生成模型M2UGen
然而，获取大规模的平行数据对于某些任务可能是困难的或成本较高的。因此，如果缺乏足够的平行数据，DeWave方法的性能可能会受到限制。
头部酒水主播李宣卓认为，几大主流平台已经形成各自的特点:“淘宝像全国连锁的专卖店，快手像三四线小城市面向当地人的商铺，抖音则像一个旅游景点里的网红店。”
然后，Johnson开始将这些发现应用于卡斯卡迪亚的地震数据。在地震数据中他们识别出了来自俯冲带的连续的信号。
据悉，M2UGen采用了创新的方法，生成了大规模的多模态音乐指导数据集，用于训练模型。这包括MU-LLaMA模型生成的1.2k多小时音乐字幕数据集。模型结合了MU-LLaMA、BLIP图像字幕模型、MPT-7B-Chat模型以及VideoMAE字幕模型，以在各个领域生成对应的指导。