狗狗如何看世界?人类研究员要解码狗脑中的视觉认知
过去 15000 年,狗与人类共同进化。现在,狗狗常作为宠物栖息在人类生活环境中。有时狗狗像人一样在家中观看视频,仿佛是看懂了。
那么,狗狗眼里的世界是什么样子的?
近日,来自埃默里大学的一项研究从狗的大脑中解码了视觉图像,首次揭示了狗的大脑如何重建它所看到的东西。这项研究发表在《可视化实验期刊》上。
论文地址:https://www.jove.com/t/64442/through-dog-s-eyes-fmri-decoding-naturalistic-videos-from-dog
研究人员记录了两只清醒的、不受约束的狗狗的 fMRI 神经数据,期间让它们分三次观看 30 分钟的视频,时长总共 90 分钟。然后他们使用机器学习算法来分析神经数据中的模式。
埃默里大学心理学教授、论文作者之一 Gregory Berns 表示:「我们可以在狗观看视频时监控它的大脑活动,并在一定程度上重建它正在看的东西。我们能够做到这一点是非常了不起的。」
Berns 及其同事开创性地将 fMRI 扫描技术用于犬类,并训练狗狗在测量神经活动时完全静止且不受约束。十年前,该团队发布了第一张完全清醒、不受约束的狗的 fMRI 大脑图像,为 Berns 所说的「The Dog Project」实验计划打开了大门。
Berns 和第一只在完全清醒且不受约束的情况下被扫描大脑活动的狗狗 Callie。
多年来,Berns 的实验室发表了多项关于犬类大脑如何处理视觉、语言、气味和奖励(例如接受表扬或食物)的研究。
与此同时,机器学习技术不断进步,使得科学家能够解码一些人类大脑的活动模式。然后 Berns 开始思考类似的技术能否应用到狗狗的大脑上。
此次新研究就是基于机器学习和 fMRI 技术完成的。fMRI 是一种神经影像学技术,其原理是利用磁振造影来测量神经元活动引发的血液动力的改变。这种技术是非侵入性的,在脑部功能定位领域具有重要作用。除了人类,该技术只应用于少数其他物种,包括一些灵长类动物。
研究介绍
实验中用到两只狗,它证明机器学习、fMRI 等技术可普遍用于犬科动物分析,研究人员也希望这项研究对其他人有所帮助,以便更深入地了解不同动物的思维方式。
实验过程大致如下:
实验参与者:Bhubo,4 岁;Daisy,11 岁。两只狗之前都参加过几项 fMRI 训练(Bhubo:8 项,Daisy:11 项),其中一些涉及观看投射到屏幕上的视觉刺激。这两只狗之所以被选中,是因为它们能够长时间呆在扫描仪内,而不会在主人看不见的情况下随便移动。
视频拍摄:以狗的视角拍摄视频,以捕捉狗生活中的日常场景。这些场景包括散步、喂食、玩耍、与人类互动、狗与狗的互动等。将视频编辑成 256 个独特的场景,每个场景都描绘了一个事件,例如狗与人类拥抱、狗奔跑或散步。根据其内容为每个场景分配一个唯一的编号和标签。然后将这些场景编辑成五个更大的汇编视频,每个视频大约 6 分钟。
实验设计:首先使用 3T MRI 扫描参与者,同时让参与者观看投射到 MRI 孔后部屏幕上的汇编视频。对于狗来说,通过事先训练,将它们的头放在定制的下巴托中,以达到头部稳定的位置,就像下图这样
实验分三次观看,每次观看 30 分钟的视频,时长总共 90 分钟。
实验过程中,同时使用 fMRI 对狗进行扫描,然后对数据进行分析,实验用到了 Ivis 机器学习算法,这是一种基于孪生神经网络 (SNN) 的非线性方法,已在分析高维生物数据上取得成功。此外,实验中还用到了 scikit-learn、RFC 等机器学习算法。
正在被扫描的 Daisy,耳朵被贴上胶带,用来固定耳塞,以消除噪音。
该研究比较了人类和狗的大脑工作方式。两个人类受试者的结果表明,使用神经网络开发的模型将大脑数据映射到基于对象和基于动作的分类器上的准确率达到了 99%;在解码狗的大脑模式时,同样的模型就不适用于对象分类器,而解码狗的动作分类时,准确率达到了 75% - 88%。这说明人类和狗的大脑工作方式存在重大差异,如下图人 ( A ) 和狗 ( B ) 的实验结果所示。对此,Berns 总结道:「我们人类非常关心看到的对象,而狗狗似乎不太关心他们看到的是谁或者看到了什么,而更关心动作行为。」
感兴趣的读者可以阅读论文原文,了解更多研究细节。
以上是狗狗如何看世界?人类研究员要解码狗脑中的视觉认知的详细内容。更多信息请关注PHP中文网其他相关文章!

热AI工具

Undresser.AI Undress
人工智能驱动的应用程序,用于创建逼真的裸体照片

AI Clothes Remover
用于从照片中去除衣服的在线人工智能工具。

Undress AI Tool
免费脱衣服图片

Clothoff.io
AI脱衣机

AI Hentai Generator
免费生成ai无尽的。

热门文章

热工具

记事本++7.3.1
好用且免费的代码编辑器

SublimeText3汉化版
中文版,非常好用

禅工作室 13.0.1
功能强大的PHP集成开发环境

Dreamweaver CS6
视觉化网页开发工具

SublimeText3 Mac版
神级代码编辑软件(SublimeText3)

热门话题

写在前面今天我们探讨下深度学习技术如何改善在复杂环境中基于视觉的SLAM(同时定位与地图构建)性能。通过将深度特征提取和深度匹配方法相结合,这里介绍了一种多功能的混合视觉SLAM系统,旨在提高在诸如低光条件、动态光照、弱纹理区域和严重抖动等挑战性场景中的适应性。我们的系统支持多种模式,包括拓展单目、立体、单目-惯性以及立体-惯性配置。除此之外,还分析了如何将视觉SLAM与深度学习方法相结合,以启发其他研究。通过在公共数据集和自采样数据上的广泛实验,展示了SL-SLAM在定位精度和跟踪鲁棒性方面优

1介绍神经辐射场(NeRF)是深度学习和计算机视觉领域的一个相当新的范式。ECCV2020论文《NeRF:将场景表示为视图合成的神经辐射场》(该论文获得了最佳论文奖)中介绍了这项技术,该技术自此大受欢迎,迄今已获得近800次引用[1]。该方法标志着机器学习处理3D数据的传统方式发生了巨大变化。神经辐射场场景表示和可微分渲染过程:通过沿着相机射线采样5D坐标(位置和观看方向)来合成图像;将这些位置输入MLP以产生颜色和体积密度;并使用体积渲染技术将这些值合成图像;该渲染函数是可微分的,因此可以通过

纯视觉的标注方案,主要是利用视觉加上一些GPS、IMU和轮速传感器的数据进行动态标注。当然面向量产场景的话,不一定非要是纯视觉,有一些量产的车辆里面,会有像固态雷达(AT128)这样的传感器。如果从量产的角度做数据闭环,把这些传感器都用上,可以有效地解决动态物体的标注问题。但是我们的方案里面,是没有固态雷达的。所以,我们就介绍这种最通用的量产标注方案。纯视觉的标注方案的核心在于高精度的pose重建。我们采用StructurefromMotion(SFM)的pose重建方案,来保证重建精度。但是传

写在前面&笔者的个人理解近年来,自动驾驶因其在减轻驾驶员负担和提高驾驶安全方面的潜力而越来越受到关注。基于视觉的三维占用预测是一种新兴的感知任务,适用于具有成本效益且对自动驾驶安全全面调查的任务。尽管许多研究已经证明,与基于物体为中心的感知任务相比,3D占用预测工具具有更大的优势,但仍存在专门针对这一快速发展领域的综述。本文首先介绍了基于视觉的3D占用预测的背景,并讨论了这一任务中遇到的挑战。接下来,我们从特征增强、部署友好性和标签效率三个方面全面探讨了当前3D占用预测方法的现状和发展趋势。最后

假设您有一个想要通过网络传输的二进制图像文件。您很惊讶对方没有正确接收该文件-该文件只是包含奇怪的字符!嗯,您似乎试图以原始位和字节格式发送文件,而所使用的媒体是为流文本而设计的。避免此类问题的解决方法是什么?答案是Base64编码。在本文中,我将向您展示如何使用Python对二进制图像进行编码和解码。该程序被说明为一个独立的本地程序,但您可以将该概念应用于不同的应用程序,例如将编码图像从移动设备发送到服务器以及许多其他应用程序。什么是Base64?在深入了解本文之前,让我们先定义一下Base6

作为点集合的点云有望通过3D重建、工业检测和机器人操作中,在获取和生成物体的三维(3D)表面信息方面带来一场改变。最具挑战性但必不可少的过程是点云配准,即获得一个空间变换,该变换将在两个不同坐标中获得的两个点云对齐并匹配。这篇综述介绍了点云配准的概述和基本原理,对各种方法进行了系统的分类和比较,并解决了点云配准中存在的技术问题,试图为该领域以外的学术研究人员和工程师提供指导,并促进对点云配准统一愿景的讨论。点云获取的一般方式分为主动和被动方式,由传感器主动获取的点云为主动方式,后期通过重建的方式

在现代计算机编程中,C语言是一种非常常用的编程语言之一。尽管C语言本身并不直接支持中文编码和解码,但我们可以使用一些技术和库来实现这一功能。本文将介绍如何在C语言编程软件中实现中文编码和解码。首先,要实现中文编码和解码,我们需要了解中文编码的基本概念。目前,最常用的中文编码方案是Unicode编码。Unicode编码为每个字符分配了一个唯一的数字值,以便在计

说到这两年风靡全球的国产游戏,原神肯定是当仁不让。根据5月公布的本年度Q1季度手游收入调查报告,在抽卡手游里《原神》以5.67亿美金的绝对优势稳稳拿下第一,这也宣告《原神》在上线短短18个月之后单在手机平台总收入就突破30亿美金(大约RM130亿)。如今,开放须弥前最后的2.8海岛版本姗姗来迟,在漫长的长草期后终于又有新的剧情和区域可以肝了。不过不知道有多少“肝帝”,现在海岛已经满探索,又开始长草了。宝箱总共182个+1个摩拉箱(不计入)长草期根本没在怕的,原神区从来不缺整活儿。这不,在长草期间
