Neureport 第33期 | Selfee：一种自监督深度学习分析动物行为学数据的方法

[视频作者] 脑人言

[视频时长] 35:24

[视频类型] 科学科普

快速准确地表征动物行为对神经科学研究至关重要。在过往的研究中，深度学习模型在动物行为分析中取得了可观的成果。然而，目前还没能实现使用端到端的无监督神经网络直接从动物社交行为视频中提取全面的、有区分能力的特征以用于注释和分析行为模式。在此，我们提出一种具有多种下游应用的自监督特征提取卷积神经网络（Selfee），以端到端方式处理动物行为的视频帧。通过对提取的特征进行可视化和分类验证了Selfee以类似于人类感知的方式处理动物行为。我们证明了Selfee可以有效地用于检测人类不易察觉的异常行为，并对进一步的深