近日,Facebook 宣布了一项名为 Ego4D 的研究项目,以训练下一代人工智能模型。

Facebook 希望 Ego4D 能像 ImageNet 处理照片一样处理第一人称视频。ImageNet 只是大量照片的集合,并不能体现人类日常生活中的那种复杂与混乱,Facebook 想要为此做些改变。

据了解,Ego4D 数据集包含 3025 小时的视频,由 855 人录制,这些人来自 9 个国家(美国、英国、印度、日本、意大利、新加坡、沙特阿拉伯、哥伦比亚和卢旺达)的 73 个不同地区。之前最大的第一人称视频数据集由人在厨房里的镜头组成,共 100 小时。

录像被收集后,卢旺达的众包工人花费了 25 万小时观看了数千个视频片段,并写了数百万个描述所拍摄场景和活动的注释以用于 AI 培训。

纽约石溪大学(Stony Brook University)和谷歌大脑(Google Brain)的计算机视觉研究员迈克尔·瑞奥(Michael Ryoo)对此评价说:“这个数据集里的视频更接近人类所观察的世界,这在同类数据集中是第一个。”

Facebook还与多所大学进行了合作,包括美国的卡内基·梅隆大学(Carnegie Mellon University)、英国的布里斯托大学(University of Bristol)、新加坡国立大学(National University of Singapore)和日本东京大学(The University of Tokyo)等。

Ego4D 项目负责人克里斯汀·格劳曼(Kristen Grauman)说:“我们希望合作伙伴首先是该领域的领先专家,但也有考虑地域多样性。”

格劳曼进一步说,“传统上,机器人通过在世界上做事或被手持设备来进行学习。但只有通过我们的眼睛真正了解世界,它们才能在日常生活中帮助我们。”

从理论上讲,增强现实(AR)或虚拟现实(VR)应用程序可以回答诸如“我的车钥匙在哪里?”“在我第一次飞往法国的航班上,我吃了什么?坐在我旁边的人是谁?”等问题;AI助理也可以理解人们试图做什么,并提供说明或有用的社交提示。

“这些看起来有点科幻的事情,其实离我们并不远。” 格劳曼说,“ImageNet 在短时间内推动了一些重大进步,我们同样期待 Ego4D 所要达成的成就。”

大型数据集可以加速 AI 技术的研究。但这种技术发展速度到底有多快,将最终走向何方,还有待进一步观察。

Facebook 表示,将于 11 月向研究人员公开 Ego4D 数据集。同时该公司还说,会将 Ego4D 的算法内置在智能眼镜中,以记录佩戴者的日常生活。同样,接受 Ego4D 训练的系统还可以用于家庭助理机器人。

然而,有人对这种技术潜在的滥用表示担忧,并表示这对人们的隐私有着巨大的影响。值得一提的是,美国参议院最近也指责 Facebook 将利益凌驾于人们的福祉之上。

Facebook 和其他一些大型科技公司的商业模式是从人们的在线行为中尽可能多地收集数据,然后卖给广告商。Ego4D 项目中描述的 AI 可以将数据收集行为扩展至人们的线下日常生活之中。

这就导致我们在家中的行为,做了哪些活动,与谁共度时光等等,只要是我们目光所及的地方,都逃不过 AI 的观察,人们将毫无隐私可言。

格劳曼说:“在做 Ego4D 项目时,我们也意识到有一些隐私方面的工作需要做,尤其是当将隐私从探索性研究领域带出融入到产品中时。”

他还表示,参与 Ego4D 项目的人员必须避免捕捉个人识别特征,包括人们的脸、谈话、纹身和珠宝。录制视频中的个人身份信息已被删除,且模糊了旁观者的脸部和车牌号。

专门研究视频技术的人权组织证人(Witness)中的成员山姆·格雷戈里(Sam Gregory)说,“Facebook的这项技术对旁观者记录抗议或警察虐待行为等方面可能有用,但我对其商业应用的担忧远超过了这些好处。”他接着说:“这些数据如何存储?谁可以访问?它的使用方式到底如何?”

电子前哨基金会(Electronic Frontier Foundation)的罗里·米尔(Rory Mir)说:“许多人都知道 Facebook 在隐私方面的不良记录,其利用监控来影响用户,又将这种影响出售给付费广告客户。Facebook 目前正在寻求 AR 和 VR 方面的竞争优势,因为这对扩大它所收集数据的数量和类型至关重要。”

面对这些质疑的声音,Facebook 一位发言人说:“Ego4D 纯粹是为了促进更广泛的科学界的进步而进行的研究。”在被问及未来的计划时,他说:“现在我们还没有可供分享的产品应用或商业方面的用途。”

据悉,Ego4D 中的 AI 算法可能会被用到 Facebook 的元宇宙项目中。今年 7 月,Facebook 创始人马克·扎克伯格(Mark Zuckerberg)曾表示,希望在 5 年内将Facebook 变成一家元宇宙公司。

-End-

推荐内容