梁杰:AI只画火柴人,亚马逊全球挑了3款

梁杰:AI只画火柴人,亚马逊全球挑了3款

奥瞳人工智能科技(宁波)有限公司的Sentinare火柴人传感器,让AI在设备端把视频翻译成骨架动画,只传火柴人不传画面,在卧室卫生间这种装不下摄像头的地方做看护:跌倒、久无活动、进重点区域、挥手求助都会报警。2021年12月亚马逊推出Alexa Together居家紧急响应服务,跌倒检测全球只挑了3款设备,奥瞳是其中之一,2022年4月上线后拿到平台最好的用户评价。创始人梁杰是加拿大工程院院士、宁波东方理工大学讲席教授,早年在微软做视频压缩,研究进过VC-1和JPEG XR国际标准。

11月19日,宁波鄞州,一场演示刚开场。工作人员扶着一位老人慢慢倒在地上,旁边家属的手机立刻弹出提醒。点开消息,屏幕上没有视频,只有一段火柴人动画:头、胳膊、腿被线条勾着,人从站着到躺倒,看得一清二楚。

这就是奥瞳的火柴人传感器干的事。设备里跑着一颗AI芯片,镜头前的画面刚进机器,就被翻译成骨架动画;原始视频留在传感器里,出门的只有火柴人。做它的是奥瞳人工智能科技(宁波)有限公司,董事长梁杰。

数字 含义
3款 亚马逊全球只挑了这些
2016年 梁杰在温哥华创办奥瞳
10余项 美国专利,中国同步申请
6个 以上国家和地区在卖

老人摔倒那几秒,最难的是没人知道

独居的老人摔倒,躺几个小时才被发现,这种事每个小区都出过。子女想盯着,又装不下摄像头——卧室和卫生间这两处,谁都不愿意一天二十四小时有个镜头对着。

这不是缺一台更清楚的摄像头。摄像头拍得越清楚,家里人越不敢装。老人自己也不干:我在这屋住了一辈子,头上挂个监控算什么。看护和隐私,在家里一直是死对头。

一、跌倒了,马上报:人一倒地,手机弹提醒,骨架动画把倒下的过程重放一遍。

二、久没动静,也会报:该吃饭的点没见人起身,系统按设定提醒家属看一眼。

三、进了重点区域,报:厨房、卫生间门口划成重点区,进去待太久就提示。

四、挥手求助,报:人还能动的时候,挥一下手就是按铃。

这四件事,市面上的穿戴设备也能做。区别在于,这台机器不用戴在手上。老人洗澡忘不掉、睡觉摘不摘,全是麻烦;钉在墙上的一只小传感器,装好就不用再管。

传感器本体,和手机里的骨架

点开提醒之后,屏幕上是这么一副样子:真人摔在地板上,同步亮起的是一副火柴人,连倒地的过程都能回放。

摔倒瞬间,火柴人同步报了警

它把画面扔了,只留下动作

梁杰的方案反着来:不传画面,传动作。传感器内置AI芯片,在设备端识别人体姿态,把画面折成一副火柴人——头、四肢、关节全是线条,屋里其他东西一概不带走。

通用大模型看人,得先看见画面。给它一段视频,它才能说清这个人在干什么。这台传感器走的是反方向:画面根本不许出门。AI在设备里就把视频读完,扔掉房间、脸和衣服,只留下走、坐、躺、倒这几样骨架变化。云端收到的是一串火柴人动作,鄞州当地的报道写得准:设备提取骨架和行为特征,云端大模型再来理解复杂行为。一个负责看,一个负责想,中间那道门,就是隐私。

摄像头看到的,是个真人

传出去的,只有一副火柴人

相比传统安防摄像头和许多基于服务器或云端视频处理的智能摄像头,我们的传感器在设备内分析原始视频,所有的行为数据都是以火柴人动画的形式上传给云端和手机的,从而最大限度地保护隐私。

它跟通用大模型的边界:手机里的聊天模型吃的是画面和文字,能陪你聊一晚上,也能认出照片里的猫。它不看画面,也不会说话。它只干一件事:认出人的动作,判断有没有出事。裁得只剩这一件活,它才装得进一只小盒子,也才进得了卧室。

这门手艺,从视频压缩里长出来

梁杰本硕在西安交大,硕士去了新加坡国立大学,2003年在约翰霍普金斯大学拿到电气与计算机工程博士。毕业后进微软总部的Windows Media视频压缩部门干了一年,做的快速变换编码进了VC-1和JPEG XR两个国际标准。他说,就读霍普金斯是他人生的里程碑式的事件,在那里实现了专业转型,从电力系统切换到图像和视频处理。

2004年他去加拿大西蒙弗雷泽大学任教,后来做到终身教授、副系主任。2015年带着一名博士生做智能交通相机,2016年AlphaGo下赢李世石那年,他和吴建兵等伙伴正式创办奥瞳,做嵌入式AI硬件。2022年6月当选加拿大工程院院士,如今还是宁波东方理工大学讲席教授。

视频压缩这行,干的是留什么、扔什么。梁杰把这套本事翻过来用:养老看护要留的不是房间细节,是人的动作;该扔的恰恰是画面。奥瞳的方案从他做了半辈子的研究里长出来,一点都不绕。

  • 西安交大:读完本科和硕士
  • 新加坡国立:工程硕士
  • 2003:霍普金斯博士,进微软做视频压缩
  • 2004:赴西蒙弗雷泽大学任教,后任终身教授
  • 2016:创办奥瞳,做嵌入式AI硬件
  • 2022:当选加拿大工程院院士

他说,现在做的方向很有意义,能帮助到每个人,因为每个人都有父母、也都有变老、生病、需要照顾的一天。

客厅里的骨架动画,和CES奖

亚马逊全球只挑了3款

2021年12月,亚马逊推出居家紧急响应服务Alexa Together,面向美国5000万老人,其中1470万是独居老人。跌倒检测这一环,全球只选3款设备。奥瞳是其中之一,2022年4月正式上线,比另外两家晚了半年。

后来居上的那半年:公司自己讲得更实在——上线虽晚,靠功能、性价比和客服把口碑做了上去,在亚马逊上拿到最多、最好的用户评价,销售开始快速增长,和亚马逊进一步扩大合作。同年它还拿了CES 2021创新奖提名,加拿大顶级养老机构Baycrest从穿戴式、雷达式一堆竞品里选定它批量采购。

国内这头,招商健康、太平洋保险、优必选机器人已经在用,各地养老机构把它装进机构照护和居家养老里。产品进的市场包括中国、美国、加拿大、日本、澳大利亚和欧洲。20来人的团队,10个博士,一堆专利,一条年产能百万台的产线——这是一家把研究做成货架货的公司,不是一家只会发论文的实验室。

图上每个数字,正文都说过

App里的活动统计和跌倒提醒

钱从哪来

一句话说得清:卖传感器,一台一台卖。个人家庭在电商下单,机构批量采购或者租用,没有订阅费,也没有基础功能免费、进阶功能掏钱那一套。

项目 数字
个人价位 200美元上下
亚马逊上线 2022年4月
生产线 年产能百万台
专利 美国10余项 + 中国10余项
市场 中国、美国、加拿大、日本、澳大利亚、欧洲
  • 卖给个人家庭:电商和亚马逊直接下单;两百美元上下的价位;子女买给独居的父母。
  • 卖给机构:养老机构、保险公司批量采购;长护险和适老化改造目录;招商健康、太平洋保险在用。

这个价在美国不算贵:一次急诊救护车的账单就比它高。对机构来说更简单,不用给老人发手环、不用催着戴,墙上装一只就完事。奥瞳在华宝利的支持下建了产线,把成本压下来,故障率压到千分之五以下。

开箱:传感器、支架和电源

它守的是这一屋子人

  • 拍不到,也查不了:它没有录像回放。真要事后查房间里的细节,火柴人帮不上忙。这是卖点,也是代价。
  • 它认动作,不讲故事:子女看到的是动作统计和提醒。老人今天心情好不好,还得打电话问。
  • 装它得全家同意:好消息是,这次基本没人反对——因为它不拍画面。

梁杰在宁波的演示现场说过,他们的目标不是把房间里的画面都传出去,而是让设备真正理解老人的活动,在需要帮助的时候主动提醒。11月19日那场演示里,倒地的老人和手机上同步起身的火柴人,就是这句话的样子。

它守的是这一屋子人

霍普华丰那篇校友专访,标题里有一句话:父母在,可远游。这话放在十年前是句祝福,现在它得有个前提——家里有个不看画面、只看动作的守夜人。

晚上十点,客厅的灯暗了。手机屏幕上,一副火柴人慢慢坐进沙发,又站起来,走回房间。没有画面,没有声音,只有动作。这屋子里的人都睡了。