物联网第三方云服务品牌机智云在AWE上发布了人工智能产品机智玛莉。机智玛莉通过多维度感知(Sensor Fusion) 与深度学习 (Deep Learning) 技术的支撑,在生态智能 (Smart Home-Ecosystems) 理论框架之下实现的新一代智能家居服务平台。

机智云总经理黄锡雄表示:“机智玛莉是基于机智云基础服务的一个平台服务,她能够帮助家电企业训练出一个能够像人一样理解客户需求,并提供设备服务推荐的智能管家,接入机智云的智能家电企业可以根据自己的需求进行定制。机智云接入全球众多品牌、多品类的设备,我们以生态的方式实现用户真正需要的智能家居。”

要训练出这种智能管家,首先需要赋予她一般人所具备的基础感官能力,例如视觉,机智云这次AWE展示的AR虚实结合控制技术用到的就是基于深度神经网络(Deep Neural Network) 实现的图像识别能力,无论对于一般物体,或是人,甚至是小到人的动作手势,机智玛莉都能在毫秒级精确地进行识别。除了视觉,机智玛莉还有良好的听觉。目前是结合科大讯飞的语音引擎(Speech To Text)和机智云独有的基于智能家居的语义引擎(Semantic Engine),机智玛莉能高效准确的理解用户说话的含义,随心所欲地跟家庭里的智能设备进行语音互动。

除了感官能力,智玛莉具备优秀的多维度感官能力,能处理来自摄像头、Wi-FiBeacon、多普勒和红外体感等各种传感器的数据,能感应用户在哪里,或者是在做什么动作。

为了实现这一效果,机智云从五个方面对数据进行了处理:

首先是用户数据,需要区分并识别出,用户是谁、和谁在一起、曾发出过什么指令或者操作过什么设备。现阶段通过多普勒传感器、视觉识别与Wi-FiBeacon等技术实现。

其次是准确的地点数据,例如地点是在哪个房间,是卧室还是大厅。机智云通过设备与设备之间Wi-FiBeacon的相对数据,利用算法得知他们之间的物理位置关系,然后通过设备特性估算出所在房间的特性,最终无需用户自己配置场景设备就能感知这个地点在哪里,有什么设备,属于什么功能区。

之后是情景数据,就是做什么。机智玛莉获取了用户与地点数据之后,加上时间数据,整合起来就能够通过深度学习的方式,还原部分情景,例如早上用户在洗手间,一般是在洗漱,或者工作日9点用户离家就是去上班等等。当然用户也可以通过语音等交互方式告诉智能管家(机智玛莉),她现在在哪,想要做什么。

有了以上三个方面的数据,接下来就是确定服务数据,就是这个人,在这个地点,要做这个事情,需要什么服务来支撑。用户需要的家居服务由设备提供,例如空调可以提供三种服务:制冷、制热、过滤空气,又或者制热这个服务可以同时有空调或者取暖器提供。所以智能管家首先会理解用户到底想要什么样的服务,而不是直接判断用户需要操作什么设备。

最后是设备数据。确定了服务,还要根据所在地点所存在的设备来实现这个服务。

基于以上五个方面多个维度的数据,智能管家系统就能像一个人一样理解用户的指令了。例如用户说“我想更暖和一点”,机智云就开始获取以上说到的数据,例如她是谁,在哪里的哪个房间,她现在可能在做什么,她对“一点”的定义到底是1度、5度还是10度,加热这个服务是由空调、取暖器还是地热提供,还是一起提供。全部运算完毕后,管家会通过询问的方式来与用户确认,例如跟用户确认“是否需要打开空调并调至28度?”

不过,在初期的时候这个管家可能会让人觉得比较“笨”,什么都要问,这是因为深度学习需要训练集来优化她的学习结果,先通过对话跟用户确认服务目的,因此在经过不断的训练后,她会变得越来越聪明,未来用户可能只需要通过一个手势或者眼神,机智玛莉就会默契地为用户做好一切。

机智云表示它们的最大目标是希望为广大家电企业训练出既有企业特色,又符合消费者需求的智能管家,让智能家居早日进入中国家庭。