我们提出了一种使用单个深度神经网络检测图像中的对象的方法。我们的方法称为 SSD，将边界框的输出空间离散化为一组默认框，每个特征图位置具有不同的纵横比和比例。在预测时，网络会针对每个默认框中每个对象类别的存在情况生成分数，并对框进行调整以更好地匹配对象形状 ...
结构神经网络（CNN）的核心构建块是结构计算子，它使网络能够通过在每层的局部感受野内融合空间和通道信息来构造特征信息。以往的大量研究已经考察了这种关系的空间组成部分，试图通过提高整个特征层次结构中空间编码的质量来增强 CNN 的表征能力。在这项工作中，我们将重点放在通道上关系上，并提出了一种新颖的架构单元，我们将其被称为“挤压和”（SE）块，它通过显式建模通道之间的相互激励来重新调整通道方面的特征激励响应... ...
卷积网络是大多数最先进的计算机视觉解决方案的核心，适用于各种任务。自 2014 年以来，极深卷积网络开始成为主流，在各种基准测试中取得了巨大的进步。尽管增加的模型大小和计算成本往往会转化为大多数任务的直接质量增益（只要为训练提供足够的标记数据），但计算效率和低参数数量仍然是各种用例（例如移动视觉和大数据）的促成因素。 -数据场景 ...
训练深度神经网络很复杂，因为在训练过程中，随着前一层参数的变化，每层输入的分布也会发生变化。由于需要较低的学习率和仔细的参数初始化，这会减慢训练速度 ...
我们提出了一种代号为“Inception”的深度卷积神经网络架构，它负责在 2014 年 ImageNet 大规模视觉识别挑战赛（ILSVRC 2014）中设定新的分类和检测技术水平。该架构的主要特点是提高了网络内部计算资源的利用率。这是通过精心设计的设计实现的，该设计允许增加网络的深度和宽度，同时保持计算预算不变 ...
在这项工作中，我们研究了外部网络深度其在大规模图像识别设置中的准确性的影响。我们的主要贡献是使用具有非常小的（3x3）外部结构的架构对增加深度的网络进行彻底评估，这表明通过将深度推至 16-19 个权限重层可以实现对现有技术配置的显着改进。这些发现是我们提交 2014 年 ImageNet 挑战赛的基础，我们的团队分别在本地化和分类领域获得了第一名和第二名... ...
部署大型语言模型（LLM）具有耐受性，因为它们对于实际应用而言内存效率低且计算密集型。据悉，研究人员通过使用人类标签进行恐怖或使用LLM生成的标签进行提炼来训练较小的针对特定任务的模型。然而，需要大量的训练和数据才能达到与 LLM 相当的性能... ...
大型语言模型 (LLM) 的指令调优因其能够在后续指令中释放 LLM 的潜力而受到了研究人员的关注。虽然指令调优作为一种微调方法具有促进大型语言模型（LLM）适应下游任务的优势，但在大量数据上训练具有数千万甚至数十亿参数的模型会导致难以承受的计算成本。为了解决这个问题，我们专注于减少LLM指令调优中使用的数据，以降低训练成本并提高数据效率，称为低训练数据指令调优（LTD指令调优） ...
中等规模的大型语言模型 (LLM)——具有 7B 或 13B 参数的模型——表现出有前途的机器翻译 (MT) 性能。然而，即使是性能最好的基于 13B LLM 的翻译模型（如 ALMA），也无法与最先进的传统编码器-解码器翻译模型或更大规模的 LLM（如 GPT-4）的性能相匹配。在这项研究中，我们弥补了这一性能差距 ...
迄今为止最高精度的目标检测器基于R-CNN推广的两阶段方法，其中将分类器评估一组稀疏的候选目标位置。相比之下，评估对可能的物体位置进行频繁、密集采样的一级检测器可能更快、更简单，但目前其准确性基于二级检测器。在本文中，我们研究了为什么会出现这种情况...... ...