Hyperspherical Prototype Networks

本文介绍了超透明原型网络，该网络将分类和回归统一使用超透明输出空间上的原型。对于分类，一种常见的方法是将原型定义为每班训练示例的平均输出向量。在这里，我们建议将Hyperpheres用作输出空间，而类原型定义了较大的边距分离的先验 ...

Perfect Alignment May be Poisonous to Graph Contrastive Learning

图对比学习（GCL）旨在通过对齐正对和分离负对来学习节点表示。然而，很少有研究人员关注基于图的学​​习中使用的特定增强背后的内在规律。什么样的增强将有助于下游性能，对比学习实际上如何影响下游任务，以及为什么增强的幅度如此重要？本文试图通过建立增强和下游性能之间的联系来解决这些问题 ...

Multi-Sample based Contrastive Loss for Top-k Recommendation

TOUP-K建议是建议系统中的一项基本任务，通常通过比较正面和负面来学习。对比度损失（CL）是最近受到更多关注的对比学习的关键，我们发现它非常适合Top-K建议。但是，CL将正面和负样本的重要性视为相同的问题 ...

InfoCSE: Information-aggregated Contrastive Learning of Sentence Embeddings

对比度学习已在嵌入学习的句子中进行了广泛的研究，该句子假设同一句子的不同观点的嵌入更接近。这个假设带来的约束很薄弱，良好的句子表示也应该能够重建原始句子片段。因此，本文提出了一个被称为Infocse的无监督句子嵌入的信息聚集的对比学习框架 ...

Balanced Contrastive Learning for Long-Tailed Visual Recognition

现实世界中的数据通常遵循长尾巴的分布，其中一些多数类别占据了大多数数据，而大多数少数族裔类别都包含有限数量的样本。分类模型最小化的跨凝结努力来代表和对尾部类别进行分类。尽管对学习公正的分类器的学习问题进行了充分的研究，但代表数据不平衡数据的方法却没有探索 ...

Hyperbolic Contrastive Learning for Visual Representations beyond Objects

尽管自我监督的方法已导致视觉表示学习的快速进步，但这些方法通常使用相同的镜头处理对象和场景。在本文中，我们专注于对物体和场景的学习表示，这些对象和场景保留了它们之间的结构。通过观察到在表示空间中接近视觉上相似的对象的动机，我们认为场景和对象应该基于其组成性遵循层次结构 ...

Towards a Theoretical Framework of Out-of-Distribution Generalization

对分布（OOD）数据的概括是现代机器学习中的核心问题之一。最近，提出算法的尝试激增，主要基于提取不变特征的想法。尽管在直觉上合理，但对哪种不变性可以保证的理论理解仍然有限，并且对任意分布的概括显然是不可能的 ...

Towards the Generalization of Contrastive Self-Supervised Learning

最近，自我监督的学习吸引了极大的关注，因为它仅需要用于模型培训的未标记数据。对比学习是一种自我监督学习的一种流行方法，并实现了有希望的经验表现。但是，对其概括能力的理论理解仍然有限 ...

AutoDroid-V2: Boosting SLM-based GUI Agents via Code Generation

大型语言模型（LLM）为移动UI代理带来了令人兴奋的新进步，这是一个长期存在的研究领域，旨在通过移动UI交互完成任意自然语言任务。但是，现有的UI代理通常需要强大的大型语言模型，这些模型很难在最终用户的设备上部署，这引起了人们对用户隐私和集中服务成本的极大关注。受近期小语言模型（SLM）的非凡编码能力的启发，我们建议将UI任务自动化问题转换为代码生成问题，该问题可以由Ondevice SLM有效地解决，并使用evevice代码解释器有效地执行 ...

SoK: How Robust is Audio Watermarking in Generative AI models?

音频水印越来越多地用于验证AI生成的内容的出处，从而实现了诸如检测AI生成的语音，保护音乐IP和防御语音克隆之类的应用程序。为了有效，音频水印必须抵制扭曲信号以逃避检测的删除攻击。尽管许多方案声称鲁棒性，但这些主张通常是孤立的，并反对有限的攻击 ...