地平线机器人开采平台HorizonHobotPlatform(下文简称HHP)自六月份公布以来,不但备受本末机器人、小R科技等稠密生态协做同伴爱慕,也赢得稠密开采者追捧,众人纷纭蠢蠢欲动筹备基于HHP来大显神通。地平线资深工程师靠哥也不不同,做为宠娃狂魔奶爸,且看靠哥怎么靠“AI奶娃三神招”一举博得掌上明珠小茗茗的爱慕!(课程预报:AI奶娃,看地平线奶爸工程师三招搞定!)
机能讲解
众人先看一下终究完成的机能。
?“?手势”手势操纵机器人行进
“yeah”手势操纵机器人撤退
“大拇指向右”手势操纵机器人右转
“大拇指向左”手势操纵机器人左转
(下期给众人讲语音操纵机器人~)
从终究完成的机能结果来看,机器人能够疾速相应人手的操纵指令,获利于朝日??X3派上5Tops算力的BPU能够完成低推迟(50ms左右)、高帧率(满帧30fps)、远间隔(=5m)的算法推理才能。
开端码代码前,先来简洁剖析一动手势操控机器人需求具有哪些根基模块。
传感
关于手势鉴识这种基于视觉的AI算法运用,首先需求有视觉传感器来捕获图象数据。
感知
猎取到传感器公布的图象后,经过视觉算法举办推理,探测到人手而且鉴识动手势,完成感知的才能。
交互
鉴识动手势以后,需求界说并完成对应不同手势的机能运用,如行使「大拇指向右」手势操纵机器人向右动弹。
操纵
依照「交互」模块输出的操纵指令,完成对机器人的机器操纵。
机器人本质
固然还需求一个具有行动才能的机器人本质,采纳操纵指令并操纵机电行动,完成终究的经过手势操纵机器人行动的结果。
地平线公布的机器人平台HHP(