基本信息 - SimCSE: Simple Contrastive Learning of Sentence Embeddings

arxiv SimCSE: Simple Contrastive Learning of Sentence Embeddings

阅读

Star 0

名称: SimCSE: Simple Contrastive Learning of Sentence Embeddings

首页: https://yiyibooks.cn/arxiv/2104.08821v4/index.html

原始地址: https://arxiv.org/abs/2104.08821

描述

本文提出了 SimCSE，这是一个简单的对比学习框架，它极大地推进了最先进的句子嵌入。我们首先描述一种无监督方法，该方法采用输入句子并在对比目标中预测自身，仅使用标准 dropout 作为噪声。这种简单的方法效果出人意料地好，与之前的监督方法相当 ...