《人工智能眼动追踪技术:在线学习者认知负荷管理的新时代》

  • 来源专题:人工智能
  • 编译者: 高楠
  • 发布时间:2025-03-05
    • 文章导读

          眼动追踪技术作为一种评估在线学习环境中认知负荷的有效工具,正逐渐受到广泛关注。来自Oxford Business College的Hedda Martina ?ol博士及其团队深入探讨了基于人工智能的消费者行为预测眼动追踪技术在优化学习体验中的潜力。该技术通过实时监测学生的注意力分布并提供反馈,为教学改进提供了科学依据。研究选取了两所高等教育机构的在线讲座视频作为分析对象,重点评估了演示文稿设计对认知需求的影响。研究采用了一款基于全球最大神经科学数据库的神经营销AI眼动追踪预测软件,其算法依托海量数据支持,能够精准识别复杂场景中的认知负荷变化。研究结果表明,人工智能驱动的眼动追踪系统能够为教育者提供对学生认知过程的深度洞察,从而优化教学材料设计,提升学习效果。这一发现为在线教育的创新与变革提供了重要支持。

    • 研究过程与结果

          本研究选取乌特勒支大学与牛津商学院的两段在线讲座视频作为分析对象(时长分别为2分25秒与2分24秒),采用Tobii X2-30眼动仪采集数据,并通过神经科学分析软件Predict (V1.0) 进行眼动追踪建模。该软件整合消费者心理学理论与神经科学工具,依托全球最大规模认知数据库 (覆盖18万名受试者的千亿级数据节点),可精准识别复杂视觉场景下的品牌元素与目标对象。研究使用R语言进行数据处理,通过独立样本t检验与皮尔逊相关性分析探究注意力焦点(Focus) 与认知需求 (Cognitive Demand) 的关联性,同时控制视频时长、画面构图及教师讲授模式等协变量。乌特勒支大学视频呈现较低注意力水平 (M=23.803) 与中等认知需求 (M=68.82),而牛津商学院视频则显示中等注意力 (M=43.17) 与高认知需求 (M=83.3)。相关性分析表明,注意力与认知需求存在显著负向关联 (r=-0.62, p<0.05),提示高注意力可能伴随低认知负荷,反之亦然。值得注意的是,牛津商学院案例中高认知需求组内注意力无显著差异 (t=1.24, p=0.21),而高注意力组间认知需求差异显著 (t=3.57, p<0.01),暗示维持中等认知需求水平 (M=65-75) 可能更利于注意力集中。研究结果为优化教学设计提供量化依据,教育者可基于认知需求阈值调整内容复杂度,通过降低冗余视觉信息与分阶段知识呈现,实现注意力资源的高效分配。

          尽管使用神经营销消费者行为预测软件具有高效利用时间与资源的优势,但其局限性仍需关注。首先,这类工具尚处于早期发展阶段,仅能识别与品牌相关的兴趣区域(AOIs),且依赖于算法设置。Predict软件通过卷积神经网络 (CNNs) 和多层感知机等深度学习技术,结合先进的物体检测模型,能够在复杂视觉环境中识别品牌与对象。然而,这些功能在教育媒体 (如在线讲座视频) 中的应用可能受限,导致无法精准测量特定AOIs的注意力投入。眼动追踪指标 (如注视时间) 虽能反映认知与情感过程,但在捕捉情感唤醒与认知负荷等复杂指标时存在不足,需结合多模态方法进行综合评估。未来研究应关注更短时间窗口内的注意力波动,并整合瞳孔测量等指标,以提升对认知过程的全面理解。此外,优化在线教育材料的设计(如增加内容大纲与示例) 有助于提高学习效果。尽管当前工具存在局限性,但其发展为AI眼动追踪技术的进步提供了重要机遇。

    • 研究总结

          本研究结合AI眼动追踪技术与神经营销研究方法,分析了乌特勒支大学与牛津商学院两段在线讲座视频中学生的认知需求 (Cognitive Demand) 与注意力 (Focus) 之间的关系。研究发现,视频内容的复杂度、信息密度及呈现方式显著影响学生的认知负荷与注意力水平。乌特勒支大学的视频由于内容流畅且幻灯片结构设计合理,避免了认知超载,使学生能够有效保持注意力;而牛津商学院的视频则因其独特的呈现风格打破了注意力与认知需求之间的典型负相关关系,表明适中的认知需求水平可能更有助于提升学生的注意力。研究还指出,高信息密度与内容复杂度可能导致认知超载,从而影响学习效果。通过整合AI眼动追踪预测模型,教育者可以优化视频设计,减少冗余信息,进而提高学生的专注度与学习动机。此外,研究还强调了AI技术在教育领域的巨大潜力,包括预测学生表现和优化教学内容,但同时也指出需要关注伦理问题以及对技术理解的全面性。

  • 原文来源:http://mp.weixin.qq.com/s?__biz=MzI1MzEzNjgxMQ==&mid=2650241511&idx=2&sn=764c6cc8d73187622ea4040c844c6a84&scene=0
相关报告
  • 《人工智能和机器人技术的使用案例》

    • 来源专题:装备制造监测服务
    • 编译者:zhangmin
    • 发布时间:2021-02-03
    • 人工智能和机器人技术正在给科技领域带来巨大的变化。人们在20年前的梦想现在已经变成了现实。从制造厂的自动化系统到餐馆里的自助机器人,科技不断发展,推动人类文明的进步。   在当今世界,人工智能和机器人作为问题解决者、伙伴和响应者为人类提供服务。如今,当人们与某家网站上的在线助理聊天时,通常以为是与客服交流,实际上却与聊天机器人聊天。人工智能技术已经取得了长足的进步,但不会止步于此。   人工智能和机器人技术正在多个领域得到应用   当人们谈论人工智能和机器人技术时,其实并不特定用于某个行业。它们得到几乎所有行业和部门的青睐,例如国防、医疗保健、汽车、健身、教育、零售、制造业、游戏等。   可以肯定地说,人工智能机器和计算机将会积极管理大部分交易。这只是一个开始。人工智能、机器学习、机器人技术必将在未来几年中得到进一步发展。数据在这些系统的开发中起着至关重要的作用,因为数据使这些机器能够自行学习。以下讨论一下人工智能和机器人技术的应用以及它们如何塑造人类的未来。   人工智能和机器人如今在哪里使用?   人工智能和机器人是自动化任务的强大组合。近年来,人工智能已广泛应用在机器人解决方案中,为以前的应用带来了学习能力和灵活性。尽管这两种技术还处于起步阶段,但二者结合使用时效果很好。   1. 虚拟助手和聊天机器人   虚拟助手和聊天机器人以其惊人的自动化水平推动着世界的发展和进步,并降低成本、提高生产力。虚拟助手是人工智能和机器学习的一种表现形式,通过模拟与人的对话。虚拟助理和聊天机器人被设计成使用自然语言处理(NLP)的功能来遵守自动规则。最近的技术进步显着提高了它们的性能,Siri、Google Assistant、Alexa都是虚拟助手的典型产品。   从回答诸如时间和天气之类的基本问题,虚拟助手将逐渐成为人们的得力助手。更好的是,它们可以与家中的家用电器设施完美融合。采用物联网技术,人们可以命令虚拟助手打开房屋中的灯具、空调、电视等电器。   2.农业机械   机器人技术和人工智能是农业可持续发展未来的最佳选择。几个世纪以来,由于环境污染、过度耕作、劳动力短缺以及人口增长,粮食供应链面临危机,它正威胁着人们最基本的生活需求。人工智能和自动化可以减轻农业劳动力老龄化的影响。有了自主无人机、自动驾驶农业机械等,农民可以花更多的时间专注于创造可持续的农业收成。   Deere公司是一家着名的农业设备制造商,因其自动驾驶机械而广受欢迎。此外,它还通过引进自动杂草喷洒器扩大了其农业服务范围。该公司利用先进的机器人技术、机器学习和计算机视觉来区分农作物和杂草以进行清除。此外,大数据正在帮助农民种植出更好的作物。大数据催生了处方农业,它使用基于网络的工具来创建地图或处方,告诉农民在某些作物和地区需要施用多少肥料。   3. 自主飞行   自主飞行器使用计算机视觉技术在空中盘旋,同时避开障碍物快速移动。随着人工智能的引入,这些飞行器变得越来越智能。从鸟瞰图监视到安全监视、录像、救援任务等功能,无人机正在革新并取代许多工作岗位。计算机视觉在自动飞行中的应用包括障碍物检测、避免碰撞、自我导航,以及目标跟踪。   机器学习可以给自动驾驶飞行器的工作方式带来巨大的变化。在无人机捕捉实时数据的同时,还使用了机载智能系统,使其能够根据实时数据自己做出决策。   这些无人机可用于城市管理和智能城市,用于高级监视、快速面部识别或跟踪目标。它们对农业也非常有益,因为它们可以监测作物,检查土壤肥力,评估土壤成分,并帮助农作物生产。其他应用可能包括:   扫描或绘制房地产中建筑物的地形; 军事侦察或与敌人作战; 用于人员跟踪和面部识别。   4. 零售、购物和时尚   零售业近年来已经从人工智能和机器学习中获益。人工智能正在帮助零售商通过数据分析更好地了解他们的目标市场。因为数据是数字世界的新货币,它可以决定业务成败。而零售商正在使用预测分析来帮助根据销售数据预测客户行为。电子商务网站正在使用基于客户的区域搜索趋势、位置和搜索历史记录的建议。此外,像亚马逊公司根据过去的销售数据为顾客提供产品推荐。   人工智能还帮助零售商通过定制发送给潜在客户的信息来增强他们的在线商店。内容生成是一个乏味的过程,但是通过人工智能的自然语言生成(NLG),零售商可以向客户发送有针对性的信息和报价。   机器人已经被引入管理库存和销售区域,从而提供更精确的精度并削减成本。而在时尚领域,人工智能应用在供应链和时尚商店。从服装的分类到缝纫衣物,这些平凡而繁杂的任务都是由人工智能系统来完成的,并具有更高的精度和更快的速度。机器人可以轻松精确地缝合,还可以检测织物材料中的缺陷,从而确保质量。   5. 安全与监视   如今的机器人使用人工智能、远程传感器,高清摄像头以及快速的计算机处理程序满足不同需求,并提供了功能完善的安全系统。专家认为,机器人可以轻松地保护指定区域,它们可以使用地图软件来创建地理围栏。   这些机器人可以用来监视地面和建筑物内部情况。它们经过智能设计,使用GPS系统,可以轻松找到几厘米范围内的物体。所以当移动时知道自己的方位。他们可以每天用安全摄像头记录和存储数据。采用人工智能的安全系统是一个以高清摄像机为基础的自我监控系统。   最新的人工智能动力安全机器人使用面部识别技术来识别进入建筑物的人员的身份,并创建一个目录,其中包含定期访问者或熟人。   6. 体育分析与活动   人工智能和机器人如今也应用在体育行业,以使体育比赛更精彩、更公平。体育活动对于某些人来说是一种情感所系,更重要的是价值数百亿美元的产业。全球的体育组织和协会都在尽最大努力获得竞争优势,并使用机器人技术和人工智能让体育爱好者有着更好的体验。   人工智能可以帮助运动员提高体能,发现队员的天赋。一些体育项目已经采用机器人裁判,而智能机器人可以帮助观众在体育场找到座位。对于那些不想到体育活动现场的人来说,采用VR耳机可以获得这样的体验,人工智能也在帮助俱乐部和团队根据之前的数据制定策略。   以下是体育产业采用的一些人工智能技术和措施:   智能应用程序和虚拟现实技术正在推动体育爱好者的参与度; 机器裁判很快将成为现实; 智能算法正在开发新游戏; 人工智能正在帮助团队管理和支持人员寻找新的明星球员; 人工智能正在协助俱乐部和球队保护其球员的健康。   7. 制造与生产   随着机器人技术和人工智能的实施,可以看到制造业和生产行业的发展。在制造业中引入人工智能技术的主要原因是弥补劳动力不足,简化整个生产过程并提高效率。在以往,制造商需要花很多精力来管理任务系统。自从机器人接管以来,可以提高工作效率。   人工智能通过使产品决策更迅速、更智能来帮助制造行业。这是一个定制产品的时代,人工智能正在帮助制造商收集有用的客户数据,这些数据用于做出基于产品的决策。此外,它还帮助制造工厂降低整体生产成本。人工智能和机器人技术是制造业的未来。为了更好地了解机器人技术和人工智能在制造业中的重要性,可以了解它们的用例:   基于需求的生产; 自动控制; 损害控制和快速维护; 产品设计和重新设计。   8. 游戏   机器人技术和人工智能影响了计算机游戏的设计和玩法。人工智能正在帮助游戏开发人员创造新角色,并模仿人类的行为。人工智能在游戏中的主要作用是收集和处理从玩家那里获得的数据。最重要的是,它使游戏开发者能够根据他们的需求和期望来创建游戏。   人工智能算法的适应性和学习性允许创建真实自然的游戏环境。   最后但并非最不重要的一点是,基于人工智能的游戏具有出色的图形展现。在以往,通常需要由数百名开发人员组成的团队来创建出色的图形,但是采用人工智能,其整个过程实现自动化,这节省了大量时间、资金和资源。   结论   人工智能和机器人技术是未来的驱动力。在接下来的十年中,人们将会看到基于人工智能惊人的技术发展。人工智能是关于数据的,一旦正确实施,人工智能将使用给定的数据使人们受益,从而使大多数流程自动化,并使人们的工作和生活更轻松。
  • 《Nature | 医学人工智能的未来》

    • 来源专题:战略生物资源
    • 编译者:李康音
    • 发布时间:2023-10-29
    • 本文内容转载自“ChemBioAI”微信公众号。原文链接: https://mp.weixin.qq.com/s/hlwb9sc0rugxZ_ThiOy7gQ 2023年10月24日,《自然》新闻(Nature News)在线发表了一篇题为An AI revolution is brewing in medicine. What will it look like?的特别报道。 Jordan Perchik于2018年开始在亚拉巴马大学伯明翰分校进行放射科住院医生培训,那时正值他所谓的放射科学领域的“AI恐慌”高峰期。在计算机科学家Geoffrey Hinton宣称人们应停止培训成为放射科医生的仅仅两年后,这一时期开始。Hinton被称为人工智能之父,他预测这些系统很快将能够比人类更好地阅读和解释医学扫描图像和X光片。此后,放射科医学项目的申请数量大幅下降。 基于人工智能的工具越来越多地成为医疗保健的一部分,美国食品和药品监督管理局(FDA)已经授权使用超过500种这类工具。其中大多数与医学影像有关,用于改进图像质量、测量异常或标记检测结果以供后续跟踪。 调查显示,虽然许多医生知道临床AI工具的存在,但实际上只有很小一部分 (大约在10%到30%之间) 使用过它们,他们的态度从谨慎乐观到彻底不信任不等。荷兰乌得勒支大学医疗中心的医学创新实施专家Charisma Hehakaya说:“一些放射科医生对AI应用的质量和安全性存在疑虑。”即使AI工具能够完成它们的目标任务,仍不清楚这是否会转化为患者更好的医疗护理。但有一种被称为综合医学AI的方法似乎正在兴起。这些模型受到庞大数据集的训练,就像驱动ChatGPT和其他AI聊天机器人的模型一样。在吸收大量医学图像和文本数据后,这些模型可以适用于许多任务。尽管目前获得批准的工具执行特定功能,比如在计算机断层扫描(CT)中检测肺结节,但这些综合模型将更像医生,评估扫描中的每一种异常情况,并将其整合为一种诊断。 尽管现在的AI爱好者趋向避免大胆宣称机器将取代医生,但许多人认为,这些模型可以克服目前医学AI的某些限制,有朝一日可能在某些情况下超越医生。然而,这些新工具能够在实际临床护理中使用之前,还有漫长的道路需要走。 目前存在的限制 医学领域的人工智能工具充当从业者的辅助角色,例如通过快速浏览扫描图像并标记医生可能立即查看的潜在问题,这些工具有时表现很出色。Jordan Perchik记得有一次,在他值夜班的时候,一种AI分诊工具在凌晨3点为一名出现呼吸急促症状的患者标记了一张胸部CT扫描。他将这张扫描图像提上优先级,并同意AI的评估结果,该结果显示患者存在肺栓塞,这是一种可能致命且需要立即治疗的情况。如果没有被标记出来,这张扫描图像可能要等到当天晚些时候才会被评估。 但如果AI犯了错误,它也会产生相反的效果。Jordan Perchik说,最近他发现了一例AI没有标记出来的肺栓塞病例,他决定采取额外的审查步骤,最终证实了他的评估,但这减缓了他的工作进度。如果他决定相信AI并继续前进,那么这种情况可能会被漏诊。”许多已获批准的设备并不一定符合医生的需求,早期的AI医学工具是根据影像数据的可用性来开发的,因此一些应用程序是为常见且容易识别的疾病而建立的。 另一个问题是,这些AI工具倾向专注于特定任务,而不是全面解释医学检查——观察图像中可能相关的一切,考虑以前的结果和患者的临床病史。尽管专注于检测一些疾病具有一定价值,但它并不反映放射科医生真正的认知工作。 解决方案通常是增加更多基于AI的工具,但这也对医疗护理构成挑战,伦敦Google Health的临床研究科学家Alan Karthikesalingam表示。假如一个人接受常规乳腺X光检查,技术员可能会采用一种用于乳腺癌筛查的AI工具的辅助。如果发现异常,同一患者可能需要进行磁共振成像(MRI)扫描以确认诊断,而这可能需要另一个AI设备。如果诊断结果得到确认,那么病变将会通过手术移除,可能需要另一种AI系统来协助进行病理学分析。 许多医院并不了解监测AI性能和安全性所涉及的挑战,英国伯明翰大学研究医疗AI负责创新的临床研究员Xiaoxuan Liu表示。她和她的同事们确定了数千份医学成像研究,比较了深度学习模型的诊断性能与医疗保健专业人员的性能。对于该团队评估的69项诊断准确性研究,一个主要发现是,大多数模型未经真正独立于用于训练模型的信息的数据集进行测试。这意味着这些研究可能高估了模型的性能。 坚实的基础 为了解决医学领域AI工具的一些限制,研究人员一直在探索具备更广泛能力的医学人工智能。他们受到了像ChatGPT这样的革命性大型语言模型的启发。这个术语是由斯坦福大学的科学家们在2021年创造的,它描述了在广泛的数据集上进行训练的模型,这些数据集可以包括图像、文本和其他数据,使用一种称为自监督学习的方法。这些基础模型,也被称为基本模型或预训练模型,构成了后续可以适应执行不同任务的基础。 目前大多数医学AI设备是通过监督学习方法开发的。例如,使用这种方法训练一个模型来识别肺炎,需要专家分析大量的胸部X光片并将它们标记为“肺炎”或“非肺炎”,以教导系统识别与该疾病相关的模式。在基础模型中不需要大量图像的注释。例如,对于ChatGPT,使用大量文本进行训练,以训练一个通过预测句子中的下一个单词来学习的语言模型。同样,伦敦摩尔菲尔德眼科医院的眼科医生Pearse Keane及其同事开发的医学基础模型使用了160万张视网膜照片和扫描图像,以学习如何预测这些图像缺失部分应该是什么样子。在进行了这一预训练后,研究人员引入了几百张标记图像,使其能够学习特定的与视觉相关的疾病,如糖尿病性视网膜病变和青光眼。该系统在检测这些眼部疾病以及通过眼底血管微小变化检测出的心脏病和帕金森病等系统性疾病方面优于以前的模型,但该模型尚未在临床环境中进行测试。 Keane表示,基础模型对眼科学领域特别合适,因为几乎可以对眼部的每个部位进行高分辨率成像。而且有大量的这些图像数据可用于训练这种模型。人工智能将彻底改变医疗保健,而眼科学可以成为其他医学专业的示范。大型科技公司已经在投资使用多种图像类型的医学成像基础模型,包括皮肤照片、视网膜扫描、X光片和病理学切片,并整合电子健康记录和基因组数据。 今年6月,Google Research科学家们发表了一篇论文,介绍了他们称之为REMEDIS(具有自监督的强大和高效医学成像)的方法,与使用监督学习训练的AI工具相比,该方法能够将诊断准确性提高高达11.5%。研究发现,在对未标记图像的大型数据集进行预训练后,只需要少量标记图像就能达到这些结果。这项研究的共同作者之一,Karthikesalingam说:“我们的主要发现是,REMEDIS能够以非常高效的方式,只需很少的示例,学会如何在许多不同的医学图像中对许多不同的事物进行分类,包括胸部X光片、数字病理学扫描和乳腺X光检查。”次月,Google的研究人员在一篇预印本中描述了他们如何将这一方法与该公司的医学大型语言模型Med-PaLM相结合,该模型几乎可以像医生一样回答一些开放性的医学问题。结果表明,Med-PaLM Multimodal不仅可以解释胸部X光图像,还可以以自然语言起草医疗报告。 微软也在努力将语言和视觉整合到一个单一的医学AI工具中。今年6月,公司的科学家们推出了LLaVA-Med(生物医学大型语言和视觉助手),该模型在与从PubMed Central(一个公开可访问的生物医学文章数据库)提取的文本配对的图像上进行训练。微软Health Futures的生物医学AI研究负责人Hoifung Poon表示:“一旦你这样做,你就可以开始与图像进行对话,就像你在与ChatGPT交谈一样。” 这种方法的一个挑战是它需要大量的文本-图像对。 随着这些模型在越来越多的数据上进行训练,一些科学家乐观地认为它们可能能够识别人类无法识别的模式。AI工具可能在某些领域超越人类能力,比如使用数字病理学来预测免疫疗法对肿瘤的反应。 Karthikesalingam还指出,即使Google的医学成像AI取得了最佳结果,它仍然无法与人类相媲美。人类放射科医生的X光报告仍然被认为明显优于最先进的多模式综合医学系统。尽管基础模型似乎特别适合扩大医学AI工具的应用,但要展示它们可以安全用于临床护理还有很长的路要走。 毫无疑问,AI在放射科领域的作用将继续增长,与其说取代放射科医生,不如培训他们如何使用AI。