MIT计算机科学和人工智能实验室（CSAIL）和多伦多大学的研究人员正在开发一个3D模拟器，最终可以教授机器人如何完成家庭任务，如咖啡或设置桌子。
“虚拟家庭”是一个模拟详细的家庭任务并由人工“代理人”执行的系统。通过众包，该团队测试了3000多个不同活动的程序，这些程序被进一步分解成子任务，以便计算机理解。
与人类不同，机器人需要更明确的指令来完成任务，因为它们不能只是推断和理由。例如，像制作咖啡一样的简单任务将包括“打开机柜”和“抓住杯子”的步骤。又一个例子，像“看电视”这样的任务可能包括“走到电视”，“开关电视机”，“走到沙发”和“坐在沙发上”。
VirtualHome使用自然语言创建了一个家务数据库
为了为每个VirtualHome任务创建详细的描述，研究人员收集了家庭活动的口头描述，并将其翻译成简单的代码。该团队将程序输入VirtualHome 3D模拟器，将其转换成视频，并由一个虚拟代理执行。
该论文的主要作者、博士生泽维尔·普格(Xavier Puig)表示:“将动作描述为计算机程序的优势在于，它能清晰、明确地描述完成一项任务所需的所有步骤。”“这些程序可以指导机器人或虚拟角色，也可以用简单的动作来代表复杂的任务。”
研究人员表示，这为将来教会机器人做这些任务提供了可能性。然而，就目前而言，这个项目基本上已经创建了一个使用自然语言描述的家庭任务的大型数据库。亚马逊,开发家用机器人，可能会潜在地使用这样的数据来培训他们的模型来完成更复杂的任务。
通过观看YouTube视频来训练机器人
在3000个程序中，该团队的人工智能代理已经可以在8个不同的场景中执行1000套不同的动作，包括客厅、厨房、餐厅、卧室和家庭办公室。
“这项工作系列可以促进未来真正的机器人个人助理，”亚利桑那州立大学的艺术，媒体和工程研究助理乔望说。“而不是制造商编程的每项任务，机器人可以通过收听或观看其伴随的特定人员来学习任务。这允许机器人以个性化的方式以个性化的方式进行任务，甚至有一天导致由于这种个性化学习过程而导致情绪联系。“
在未来，该团队希望用实际视频来训练机器人，而不是《模拟人生》式的模拟视频，后者将使机器人通过观看YouTube视频简单地学习。该团队还致力于实现一个奖励学习系统，在这个系统中，当代理正确地完成任务时，它会得到积极的反馈。
“你可以想象一个机器人在家里提供家务，最终可以预测个性化的需求和需求，或即将采取的行动，”普伊格说。“这可能是对老年人的辅助技术或可能具有有限的移动性的辅助技术特别有用。”
提交：机器人报告那机器人•机器人夹具•终点效果
告诉我们你的想法！