Aria Everyday Activities Dataset

2024年02月20日
  • 简介
    我们提供了Aria Everyday Activities(AEA)数据集,这是一个使用Project Aria眼镜记录的自我中心多模态开放数据集。AEA包含由多个佩戴者在五个地理位置不同的室内环境中记录的143个日常活动序列。每个记录都包含通过Project Aria眼镜记录的多模态传感器数据。此外,AEA还提供机器感知数据,包括高频全局对齐的3D轨迹、场景点云、每帧3D眼睛注视向量和时间对齐的语音转录。在本文中,我们展示了通过该数据集实现的几个示例研究应用,包括神经场景重建和提示分割。AEA是一个开放源代码数据集,可从https://www.projectaria.com/datasets/aea/下载。我们还提供了在Project Aria Tools https://github.com/facebookresearch/projectaria_tools中使用数据集的开源实现和示例。
  • 作者讲解
  • 解决问题
    本论文旨在介绍Aria Everyday Activities(AEA)数据集,该数据集是一个多模态开放数据集,记录了143个日常活动序列,使用Project Aria眼镜记录,以及机器感知数据,包括高频全局对齐的3D轨迹、场景点云、每帧3D注视向量和时间对齐的语音转录。
  • 关键思路
    本论文介绍了一个多模态的开放数据集,可以用于各种应用,包括神经场景重建和提示分割。该数据集提供了多种机器感知数据,可以帮助研究人员进行各种研究。
  • 其它亮点
    该数据集是开源的,可以从https://www.projectaria.com/datasets/aea/下载。此外,论文还提供了如何使用该数据集的开源实现和示例。论文还展示了如何使用该数据集进行神经场景重建和提示分割,这些应用可以帮助人们更好地了解日常活动。
  • 相关研究
    最近的相关研究包括使用Project Aria眼镜记录多模态数据的研究,例如“Project Aria: A Wearable Assistant for Augmenting Memory, Task Execution, and Communication”。还有一些与多模态数据集相关的研究,例如“Multimodal Activity Recognition in Egocentric View Using a Dynamic Bayesian Network”。
许愿开讲
PDF
原文
点赞 收藏
向作者提问
NEW
分享到Link

提问交流

提交问题,平台邀请作者,轻松获得权威解答~

向作者提问