动一动就认清你 机器说可以

2017-11-13 08:57:59|来源:科技日报|编辑:韩俣 |责编:韩俣

  近日,谷歌发布AVA (Atomic Visual Actions)数据库,由YouTube公开的视频集组成,这些视频可以用80个原子动作进行标注,例如走路、握手、踢东西等,所有动作具有时空定位,累计有5.76万个视频片段,9.6万个人类动作,以及21万个动作标签。谷歌称,此次发布的AVA技术将帮助谷歌分析多年的视频,还能帮助广告商更好地瞄准消费者。他们的最终目标是教计算机社交视觉智能化,即“理解人类在做什么,下一步该做什么,以及他们想要实现什么目标。”

  目前,国内一些科研院所和企业也已经在行为识别相关领域进行重点投入,以解决视频监控数据理解这一瓶颈问题,但要达到让机器通过行为“理解”人类这个最终目标,还需要很多努力。“目前,人体行为识别大多还处在动作识别阶段,对于实际应用而言,识别人的动作,还是一个巨大的挑战。”11月8日,济南大学模式识别与智能系统研究所所长李金屏教授告诉科技日报记者。动一动,机器就能发现你?有关专家表示,现阶段,这是一件“可以有”的事。

  应用:

  安防等领域大展神威

  李金屏告诉记者,动作识别可以看成是特征提取和分类器设计相结合的过程。养老院中,如果出现老人摔倒,行为识别系统可以立刻向工作人员发出警报,甚至直接与医院进行联系;黑科技满满的《碟中谍5》,安保系统的最后一道防线是步态识别……尽管技术难点重重,行为识别目前仍然在相关领域获得了应用。

  浙江大学人工智能研究所所长吴飞教授告诉记者,这项最早被苹果和微软应用于游戏的技术,还在公检法(在押人员审讯看护)、电力(风力发电、国家电网的安全生产)、银行(业务区域智能安防)、医院(病人状态监护)等多个场景有更广的应用空间。尤其在安防等领域,以行为识别为基础的应用更广泛。

  比如通过人的走路方式来识别身份的步态识别,虽然属于身份识别,但是也是行为识别和身份识别的一种有效交叉。步态识别是一种通过人们走路姿态进行的身份识别,分为人形检测、分割、识别、跟踪四个部分,而这些部分最具挑战的环节都离不开以行为识别为基础的研究。

  在近年来寻找失踪人口和嫌犯追逃的工作中,步态识别已经发挥了不小的作用。《机智过人》节目中,银河水滴科技成功通过步态识别现场“嫌疑人”,加大难度后,还靠步态识别出狗的剪影。

  银河水滴科技创始人兼CEO黄永祯说,通过步态识别来实现异常行为分析,这是步态识别相比于其他生物特征识别的重要优势之一。异常行为的应有之义就包括可以通过视觉观察目标体形和动作状态,来发现是否有异常行为,通常会涉及到目标检测、分割、关键点定位、识别、跟踪等技术环节,而这些技术环节也是步态识别的核心底层技术。目前,他们已能很好地完成远距离非受控模式识别。

  难点:

  定位、跟踪、场景步步为艰

  “行为识别的难点,首先表现为从连续视频流中对人体运动的定位难、追踪难。”吴飞说,在视频行为识别中,要找到一个连续动作的起点和终点,即将连贯动作从视频流中定位出来,在视频识别中是非常困难的。而在找到某个连贯动作的起点后,对这个动作进行鲁棒跟踪也比较困难。比如一个跳跃动作,要实现追踪动作持续展开的过程就不容易,还要考虑场景的复杂性以及背景动态变化或者摄像头晃动等因素。

  不仅如此,场景识别也是一大难点。首先,即使是同一类动作,在不同时刻、不同场景也具有很大差异性。吴飞举例说,比如不同的人在不同时刻行走,速度、姿态和场景遮挡等方面都有差异。不同类别动作之间更是如此。李金屏表示,“与静态对象不同,动作会随着时间的推移而展开,会有更多不确定因素。”比如一幅人的“跑步”照片,实际上有可能只是这个人在跳跃的动作,只有看到更多画面,才有可能清楚地知道到底发生了什么。可见人在场景中的动态是多么复杂。因此某一动作的识别方法很难直接用在另一动作的识别上。“一个动作,人类辨识两三遍就可以了,但要让机器记住并识别,则需要大量的训练数据。”李金屏说。

  此次谷歌发布的AVA与其他数据集相比,通过在相关场景中提供具有精细时空粒度的多个标签,将极大推动人们对于相关模型的深入研究,最终不但能够实现人的复杂活动精确建模,还将进一步获得实际应用。

  展望:

  设备平台、理论模型方兴未艾

  “在行为识别领域,中国未来五年、十年的发展后劲非常强,建议在设备和平台方面进行攻关,现在国内好多团队的设备还是采用微软等国外企业的设备和平台,希望国家在这方面给予一定的支持和政策引导。”李金屏说。

  在吴飞看来,中国的科研团队和企业还应该在理论模型、数据驱动等基础理论方面进行深耕。“一个行为动作的过程要经历多个状态(对应很多时间帧),人体在每个时刻也呈现出不同的姿态,那么,是不是每一帧在动作判别中的重要性都相同呢?对于行为动作的判别,是不是每个关节点在动作判别中都同等重要呢?这些都需要理论模型等基础理论的完善。”吴飞说。

分享到:

国际在线版权与信息产品内容销售的声明:

1、“国际在线”由中国国际广播电台主办。经中国国际广播电台授权,国广国际在线网络(北京)有限公司独家负责“国际在线”网站的市场经营。

2、凡本网注明“来源:国际在线”的所有信息内容,未经书面授权,任何单位及个人不得转载、摘编、复制或利用其他方式使用。

3、“国际在线”自有版权信息(包括但不限于“国际在线专稿”、“国际在线消息”、“国际在线XX消息”“国际在线报道”“国际在线XX报道”等信息内容,但明确标注为第三方版权的内容除外)均由国广国际在线网络(北京)有限公司统一管理和销售。

已取得国广国际在线网络(北京)有限公司使用授权的被授权人,应严格在授权范围内使用,不得超范围使用,使用时应注明“来源:国际在线”。违反上述声明者,本网将追究其相关法律责任。

任何未与国广国际在线网络(北京)有限公司签订相关协议或未取得授权书的公司、媒体、网站和个人均无权销售、使用“国际在线”网站的自有版权信息产品。否则,国广国际在线网络(北京)有限公司将采取法律手段维护合法权益,因此产生的损失及为此所花费的全部费用(包括但不限于律师费、诉讼费、差旅费、公证费等)全部由侵权方承担。

4、凡本网注明“来源:XXX(非国际在线)”的作品,均转载自其它媒体,转载目的在于传递更多信息,丰富网络文化,此类稿件并不代表本网赞同其观点和对其真实性负责。

5、如因作品内容、版权和其他问题需要与本网联系的,请在该事由发生之日起30日内进行。