novelai吧 关注:342,691贴子:1,545,983
  • 7回复贴,共1

一种很新的绘画方式....让AI画声音频谱

只看楼主收藏回复


纵轴为频率,横轴为时间,灰度为响度
原理...ai图像生成数字信号图片用的傅里叶变换把线条和颜色分解为频率从而可以深度学习,而本身就是频率的音频自然也可以从深度学习的图像中转换回来..在短时长上的性能还能接受,长时长估计要等后面技术升级
原英文详细页面:https://www.riffusion.com/about
头脑风暴_妈妈生的.gif


IP属地:吉林1楼2023-04-08 14:58回复
    文章提到:用的甚至不是专用的AI模型,只是在SD1.5的模型上进行了修改调整
    试听也在原网页内


    IP属地:吉林2楼2023-04-08 15:01
    回复
      还有这种玩法?那之后是不是可以让他画文字了,感觉和chatGPT的融合又多了一种玩法


      IP属地:广东来自Android客户端3楼2023-04-08 16:21
      收起回复
        几个月前就有了,ai本来就能作曲这么舍近求远干嘛


        IP属地:安徽来自Android客户端4楼2023-04-08 16:58
        收起回复
          这不是diffsinger吗


          IP属地:广东来自Android客户端5楼2023-04-08 17:36
          回复