打赏本站
支付宝
蛋白质-配体结合亲和力的预测对于药物研究中发现先导化合物具有重要意义。面对这一具有挑战性的任务，大多数现有的预测方法依赖于分子的拓扑和/或空间结构以及局部相互作用，而忽略了蛋白质和配体之间的多层次分子间相互作用，这往往导致性能次优。为了解决这个问题，我们提出了一种新的全局局部相互作用（GLI）框架来预测蛋白质-配体结合亲和力 ...
近年来，异构图神经网络（HGNN）蓬勃发展，但每项工作使用的独特数据处理和评估设置阻碍了对其进展的充分理解。在这项工作中，我们通过使用 12 个最新 HGNN 的官方代码、数据集、设置和超参数，系统地再现了 HGNN 的进展，揭示了有关 HGNN 进展的令人惊讶的发现。我们发现简单的同质 GNN，例如 ...
自诞生以来，Transformers 因其快速训练和卓越性能而在许多任务中取代了传统序列模型，例如 NLP、图像分类和视频/音频处理。大部分优点归功于位置编码和多头注意力。然而，Transformers 在学习远程依赖方面存在不足，主要是由于时间和空间方面的二次复杂性随上下文长度而缩放 ...
图转换器已成为各种图学习和表示任务的有前景的架构。尽管取得了成功，但将图转换器扩展到大型图，同时保持与消息传递网络竞争的准确性仍然具有挑战性。在本文中，我们介绍了 Exphormer，一个用于构建强大且可扩展的图形转换器的框架 ...
卷积模型已广泛应用于多个领域。然而，大多数现有模型仅使用局部卷积，使得模型无法有效地处理长程依赖。注意力通过聚合全局信息克服了这个问题，但也使计算复杂度与序列长度成二次方 ...
状态空间模型 (SSM) 在长序列建模方面具有高性能，但需要复杂的初始化技术和专门的实现来实现高质量和运行时性能。我们研究了一种简单的替代方案是否可以在性能和效率上与 SSM 相匹配：直接学习序列上的长卷积。我们发现实现高性能的关键要求是保持卷积核的平滑 ...
最近，图的转换器架构出现，作为图机器学习的现有技术（例如（消息传递）图神经网络）的替代技术。到目前为止，他们已经展示了有希望的实证结果，例如 ...
我们提出了一个关于如何构建通用、强大、可扩展（GPS）图 Transformer 的方案，该 Transformer 具有线性复杂性，并且在不同的基准测试集上具有最先进的结果。图变换器（GT）在图表示学习领域随着最近的各种出版物而受到欢迎，但它们缺乏关于什么构成良好的位置或结构编码以及它们之间的区别的共同基础。在本文中，我们以更清晰的定义总结了不同类型的编码，并将它们分类为 $\textit{local}$、$\textit{global}$ 或 $\textit{relative}$ ...
注意力机制已被广泛用于捕获图转换器中节点之间的远程依赖关系。由于二次计算成本的瓶颈，注意力机制无法在大图中扩展。最近计算效率的提高主要是通过随机或基于启发式的图子采样的注意力稀疏化来实现的，这在数据依赖的上下文推理中存在不足 ...
图神经网络（GNN）在图表示学习方面显示出了巨大的潜力。大多数 GNN 定义了本地消息传递机制，通过堆叠多个层在图上传播信息。然而，众所周知，这些方法存在两个主要限制：过度压缩和对远程依赖关系的捕获不佳 ...