OpenCV众筹了一款ROS2机器人rae,开源、功能强、上手简单。来瞅瞅~
创始人
2024-05-26 00:35:37
0

编辑:OAK中国
首发:oakchina.cn
喜欢的话,请多多👍⭐️✍

▌前言

Hello,大家好,这里是OAK中国,我是助手君。

在2020年、2021年OpenCV分别在Kickstarter上众筹了两款OAK产品,均筹集超过百万美元。2022年上半年也有朋友问我今年有没有众筹的产品,原以为没有,没想到上周突然来了rea众筹的消息!目前已筹集超过20万美元!
在这里插入图片描述

Kickstarter众筹地址,中国区专属众筹地址。

我研究了一下这个机器人,确实有点东西,给大家分享一下!

OAK有史以来首个完全成型的开源ros2机器人rae,将机器人技术的入门门槛降到极致,全球众筹中!

▌背景

在这里插入图片描述
目前机器人领域的入门门槛似乎仍旧高的遥不可及,没有一定水平的技术专业知识,新手很难入门。我们要考虑选择什么主控制器?选择什么深度相机?选择什么激光雷达?选择什么通信模块?什么控制底盘?硬件选完了,我们还要考虑ROS的移植、视觉slam算法的开发、建图导航算法的开发、人工智能模型的部署、还有上位机控制软件的开发。这一切都弄好了,还要考虑软硬件适配调试、算力分配、功耗控制、结构外观设计等等,一大堆问题等着你。

OAK的工程师们在设计OAK机器人视觉相机的同时,看到不少用户遇到了这样入门难的问题,一直试图解决。终于历经一年多的时间,重磅推出了rae,一款能为任何人所用的、开机即用的、开源一体化ROS2机器人!
在这里插入图片描述
rae一经面世,即受到不少用户的热捧。自2022年11月9日众筹上线Kickstarter以来,两天突破200,000美元,成为热门科技类产品!
在这里插入图片描述

rae背后的工程师们一直秉持着这样的理念——Robotic vision, made simple。每个人都应该有机会接触尖端机器人技术,并能够简单地使用它们。而rae正是这一理念最好的诠释!
在这里插入图片描述

它是OAK有史以来第一个完全成型的机器人,它将所有强大的机器学习、人工智能、计算机视觉、slam导航、ROS2等整合到一个口袋大小的躯体里。它的前方和后方集成了两台OAK相机,可以运行所有OAK支持持的3D人工智能功能。内置S3代的OAK核心芯片,具有目前OAK相机5倍的人工智能算力。

在这里插入图片描述

来装一个rae,看看这个开源ROS机器人的内部构造!

▌rae有哪些功能?

在这里插入图片描述
难以想象rae如此小的身体,竟然比亚马逊的百万美元移动仓储机器人能做的更多!
在这里插入图片描述

AI加速

它给边缘计算增加了机器视觉的力量,通过板载的人工智能AI加速、OpenCV图像处理加速、机器学习功能,它使各种复杂的视觉和导航任务变得简单易行。

SLAM

下载配备的APP,即可在你的手机或平板上运行slam。

在这里插入图片描述

ROS

rae预装了ROS2,所以你可以使用最强大的机器人操作系统,而不必担心任何初始设置。

在这里插入图片描述

Unity虚拟机器训练

rae还支持Unity,这意味着你可以在虚拟世界里做机器学习。从下面的视频中,你可以看到为rae创建的虚拟 “训练馆”,四台rae玩二对二的足球游戏。

在unity里训练机器人rae踢足球!

云平台RobotHub

rae的云平台RobotHub,让你可以从世界的任何地方控制rae。
在这里插入图片描述

RobotHub是可帮助你设置、应用和监控机器人视觉解决方案。你可以检查你的设备,进行现场直播,远程部署应用程序,部署人工智能模型,并检查性能/状态指标,所有这些都只需要点击几下就可以完成。

远程控制

在度假?让rae充当保安,确保一切正常!想查看家里的宠物?让rae实时告诉你!朋友来访?让rae带路在你家转转!
在这里插入图片描述

定位与建图

标准配备了SLAM(同步定位和绘图),rae可以自主地绘制你的房间、房子或办公室。它将构建一个地图,使其能够轻松地进行导航。
在这里插入图片描述

玩游戏

利用面部检测和定位功能,rae会和你一起玩大家最喜欢的童年游戏捉迷藏。通过它的应用程序或语音命令告诉rae你想玩,等待它的屏幕变黑并开始倒计时,然后躲起来!一旦时钟归零,rae就会去找你。猜猜看rae能不能找到你?
在这里插入图片描述

哨兵模式

如果你外出一天,让rae在你的窗户边上放哨,观察你期待的包裹的到来。当感兴趣的事情发生时,你可以设置rae向你发送通知。也许你还订购了另一只rae来陪伴它?为了增加额外的家庭安全,rae可以快速而轻松地读取和记录车辆的牌照。rae机器人的所有算力和ROS2操作系统都是运行在机器人内部的OAK相机的主控制芯片上,可以完全离线运行。其流畅性和体验度比需要远程云计算的机器人要优秀很多。
在这里插入图片描述

功能齐全的APP

通过其专门设计的应用程序访问rae的所有功能,以及更多的功能。只需将其下载到您的设备上,通过WiFi或蓝牙连接到你的rae,并开始探索。就是这么简单。
在这里插入图片描述

更多功能!

以下是我们计划实现的全部功能清单:遥控、跟随我、手语翻译、捉迷藏、条形码和二维码扫描、计时、人员和情感检测、哨兵模式、物体检测和定位以及建图。

随着我们的发展,你可以期待大量的更新,向你展示rae能做的所有了不起的事情!

当然,我们现有的那些开源项目及demo也可以用在rae上!
人体姿态
在这里插入图片描述
特征追踪
在这里插入图片描述
语义分割
在这里插入图片描述
物体检测
在这里插入图片描述
边缘检测
在这里插入图片描述
物体识别
在这里插入图片描述
深度视觉
在这里插入图片描述

▌rae好上手吗?

使用rae的三步:

  • 开机
  • 下载APP
  • 轻点几下探索rae的功能

开源ros机器人rae专属APP功能介绍

▌rae能学习并记忆哪些内容?

你的rae不仅仅有一个数据库,它还有一个大脑。当你要求rae记住你是谁,学习如何在你的房子周围无缝驾驶,或去寻找电视遥控器时,它将所有这些知识存储在它的大脑中。只需在你的屏幕上轻点几下,就可以访问rae所有已知的人、物、语音命令、手势和位置。

你想让rae忘记什么吗?没问题。无论机器人多么友好,我们知道不是每个人都希望rae能记住他们。要从大脑中删除一些东西,只需再点几下,rae就能适应新的情况。

需要了解一点,rae是边缘计算的设备、OAK不能访问你存储在rae上的任何你不愿意分享的信息。你的数据是你自己的,你可以使用、存储和管理它,或者不使用,如你所愿。

▌rae的硬件参数?

专业的OAK相机系统

总共五个传感器,同时提供立体深度感知和4K高分辨率彩色视频。

顺滑的车轮

rae在地毯、木材、瓷砖、草地和砾石上平稳地前行,它可以去你需要的任何地方,并且可以在一秒内转弯。

坚固的金属外壳

rae的外壳牢靠无比,经得起考验。意外跌落或踢到?水枪大战的旁观者?被家里的狗抓住了? rae都能hold住。

牢靠的通信系统

LED环用于即时的用户反馈,六个麦克风用于语音命令,集成的扬声器用于音频输出,LCD屏幕用于快速检查视觉状态。

控制和定制

同时兼容WiFi和蓝牙。USB-C端口,便于RVC 3的连接和配件的安装。

高性能的2,000 mAh电池

约一小时的电池寿命和高效的充电速度。

最新VPU:RVC3

rae的AI算力是目前oak相机的5倍,最多支持6个相机,板载计算机视觉。
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

▌参考资料

rae众筹链接
rae介绍


OAK中国
| OpenCV AI Kit在中国区的官方代理商和技术服务商
| 追踪AI技术和产品新动态

戳「+关注」获取最新资讯↗↗

相关内容

热门资讯

读什么什么有感的英文 读什么什么有感的英文英语读后感标题 “读XXX有感”用英语说是 “Reading after XX...
秦岚个人资料身高体重 秦岚个人资料身高体重身高:165公分 体重:46公斤秦岚 生日:七月十七日 星座:巨蟹座 出生地:沈...
双鱼和天秤会纠缠一辈子,既相配... 双鱼和天秤会纠缠一辈子,既相配又相克,为什么?双鱼座的人和天秤座的人都是比较细心的,而且特别敏感,有...
独自一人在外怎样和别人相处? 独自一人在外怎样和别人相处?我觉得独自一个人在外面一定要好好的照顾自己,应该找一份工作,找一个住的地...
朱自清散文集有哪些写的好,值得... 朱自清散文集有哪些写的好,值得背诵的?《背影》、《 春》、《 荷塘月色》、《 匆匆》都是不错的佳...
大家最讨厌的电视剧的哪一个主角... 大家最讨厌的电视剧的哪一个主角?我觉得最讨厌的电视剧主角是容嬷嬷。都挺好,里面的苏大强就是越看越别扭...
69DT伤害怎么才能上1300... 69DT伤害怎么才能上1300 !我加点是4L1M!现在60了!伤害才800!我没大号,想买梦幻币买...
孩子上课不认真听讲 孩子上课不认真听讲我的孩子七周半,已经上二年级了,但是上课不认真听讲总是搞小动作,说了很多次也不听,...
《红脸儿》的主要内容 《红脸儿》的主要内容  红脸儿主要内容:   小说以散淡而富有诗意的语言回顾了“我”与3个小伙伴之间...
异地恋的成功例子 异地恋的成功例子 情侣异地恋8年终成正果 两人存下186张火车票见证爱情一对河南的情侣在大学恋爱时便...
小狗吃了死耗子怎么办 小狗吃了死耗子怎么办你好,没事的,放心吧,你的小狗是宠物狗还是土狗,若是宠物狗的话可能会给它造成身体...
请问有没有死亡万花筒广播剧资源... 请问有没有死亡万花筒广播剧资源?死亡万花筒,我有呀!死亡万花筒广播剧,地·址:9525.video(...
徐缺有哪些女人 徐缺有哪些女人徐缺是小说《最强反套路系统》中的角色,他有许多女性关系,其中包括:1. 林小红:徐缺的...
假如我是四大名著中的人物作文9... 假如我是四大名著中的人物作文900假如你是的林黛玉的话那你就会好好读书,不至于连900个字都写不出了...
西游记81难? 西游记81难?西游记的81难是师徒四人取经回来在河中落水经书被淹了的事
魔兽世界风暴王子问题! 魔兽世界风暴王子问题!现在3.05这版本 王子第4阶段的屏障 是不是可以被MS驱散? 屏障驱散后是...
如何评价张杰的少年中国说 如何评价张杰的少年中国说我觉得非常棒,张杰的家庭条件不好。从小就非常努力。刻苦学习音乐,经过拼搏奋斗...
智取生辰纲中杨志是怎样的人?他... 智取生辰纲中杨志是怎样的人?他失败的原因是什么?简短些志有智慧,但是他忽略了一个重要的因素:团队的合...
有一本书,名字忘记了.好象是美... 有一本书,名字忘记了.好象是美国人写的.梭罗《瓦尔登湖》 如果你用的是新教材,应该是这篇吧是 海明威...
四岁孩子看什么书 四岁孩子看什么书可以看一些带有简单数字的书、色彩鲜艳的图画、动物图画等,培养他的数字感和色彩感,尽量...