多模态吧 关注:78贴子:258
  • 2回复贴,共1
求助

利用clip的图像编码器做一个自编码器可行么

只看楼主收藏回复

如题,目前没找到有类似的工作,吧友们有人看到过么


IP属地:陕西来自Android客户端1楼2024-09-20 10:58回复
    两者原理不一样,clip使用的是对比学习,目标是找出图片和文本的相关特征。自编码器是希望压缩特征,找出最能代表原数据的关键特征。


    IP属地:广西来自Android客户端2楼2024-09-20 22:05
    回复
      如果要做如题所说工作,那么得想想你的目标是什么?如何训练?为什么这么做?是为了“UnCLIP”吗


      IP属地:广西来自Android客户端3楼2024-09-20 22:07
      回复