OpenCV众筹了一款ROS2机器人rae,开源、功能强、上手简单。来瞅瞅~
创始人
2024-05-26 12:32:45
0

编辑:OAK中国
首发:oakchina.cn
喜欢的话,请多多👍⭐️✍

▌前言

Hello,大家好,这里是OAK中国,我是助手君。

在2020年、2021年OpenCV分别在Kickstarter上众筹了两款OAK产品,均筹集超过百万美元。2022年上半年也有朋友问我今年有没有众筹的产品,原以为没有,没想到上周突然来了rea众筹的消息!目前已筹集超过20万美元!
在这里插入图片描述

Kickstarter众筹地址,中国区专属众筹地址。

我研究了一下这个机器人,确实有点东西,给大家分享一下!

OAK有史以来首个完全成型的开源ros2机器人rae,将机器人技术的入门门槛降到极致,全球众筹中!

▌背景

在这里插入图片描述
目前机器人领域的入门门槛似乎仍旧高的遥不可及,没有一定水平的技术专业知识,新手很难入门。我们要考虑选择什么主控制器?选择什么深度相机?选择什么激光雷达?选择什么通信模块?什么控制底盘?硬件选完了,我们还要考虑ROS的移植、视觉slam算法的开发、建图导航算法的开发、人工智能模型的部署、还有上位机控制软件的开发。这一切都弄好了,还要考虑软硬件适配调试、算力分配、功耗控制、结构外观设计等等,一大堆问题等着你。

OAK的工程师们在设计OAK机器人视觉相机的同时,看到不少用户遇到了这样入门难的问题,一直试图解决。终于历经一年多的时间,重磅推出了rae,一款能为任何人所用的、开机即用的、开源一体化ROS2机器人!
在这里插入图片描述
rae一经面世,即受到不少用户的热捧。自2022年11月9日众筹上线Kickstarter以来,两天突破200,000美元,成为热门科技类产品!
在这里插入图片描述

rae背后的工程师们一直秉持着这样的理念——Robotic vision, made simple。每个人都应该有机会接触尖端机器人技术,并能够简单地使用它们。而rae正是这一理念最好的诠释!
在这里插入图片描述

它是OAK有史以来第一个完全成型的机器人,它将所有强大的机器学习、人工智能、计算机视觉、slam导航、ROS2等整合到一个口袋大小的躯体里。它的前方和后方集成了两台OAK相机,可以运行所有OAK支持持的3D人工智能功能。内置S3代的OAK核心芯片,具有目前OAK相机5倍的人工智能算力。

在这里插入图片描述

来装一个rae,看看这个开源ROS机器人的内部构造!

▌rae有哪些功能?

在这里插入图片描述
难以想象rae如此小的身体,竟然比亚马逊的百万美元移动仓储机器人能做的更多!
在这里插入图片描述

AI加速

它给边缘计算增加了机器视觉的力量,通过板载的人工智能AI加速、OpenCV图像处理加速、机器学习功能,它使各种复杂的视觉和导航任务变得简单易行。

SLAM

下载配备的APP,即可在你的手机或平板上运行slam。

在这里插入图片描述

ROS

rae预装了ROS2,所以你可以使用最强大的机器人操作系统,而不必担心任何初始设置。

在这里插入图片描述

Unity虚拟机器训练

rae还支持Unity,这意味着你可以在虚拟世界里做机器学习。从下面的视频中,你可以看到为rae创建的虚拟 “训练馆”,四台rae玩二对二的足球游戏。

在unity里训练机器人rae踢足球!

云平台RobotHub

rae的云平台RobotHub,让你可以从世界的任何地方控制rae。
在这里插入图片描述

RobotHub是可帮助你设置、应用和监控机器人视觉解决方案。你可以检查你的设备,进行现场直播,远程部署应用程序,部署人工智能模型,并检查性能/状态指标,所有这些都只需要点击几下就可以完成。

远程控制

在度假?让rae充当保安,确保一切正常!想查看家里的宠物?让rae实时告诉你!朋友来访?让rae带路在你家转转!
在这里插入图片描述

定位与建图

标准配备了SLAM(同步定位和绘图),rae可以自主地绘制你的房间、房子或办公室。它将构建一个地图,使其能够轻松地进行导航。
在这里插入图片描述

玩游戏

利用面部检测和定位功能,rae会和你一起玩大家最喜欢的童年游戏捉迷藏。通过它的应用程序或语音命令告诉rae你想玩,等待它的屏幕变黑并开始倒计时,然后躲起来!一旦时钟归零,rae就会去找你。猜猜看rae能不能找到你?
在这里插入图片描述

哨兵模式

如果你外出一天,让rae在你的窗户边上放哨,观察你期待的包裹的到来。当感兴趣的事情发生时,你可以设置rae向你发送通知。也许你还订购了另一只rae来陪伴它?为了增加额外的家庭安全,rae可以快速而轻松地读取和记录车辆的牌照。rae机器人的所有算力和ROS2操作系统都是运行在机器人内部的OAK相机的主控制芯片上,可以完全离线运行。其流畅性和体验度比需要远程云计算的机器人要优秀很多。
在这里插入图片描述

功能齐全的APP

通过其专门设计的应用程序访问rae的所有功能,以及更多的功能。只需将其下载到您的设备上,通过WiFi或蓝牙连接到你的rae,并开始探索。就是这么简单。
在这里插入图片描述

更多功能!

以下是我们计划实现的全部功能清单:遥控、跟随我、手语翻译、捉迷藏、条形码和二维码扫描、计时、人员和情感检测、哨兵模式、物体检测和定位以及建图。

随着我们的发展,你可以期待大量的更新,向你展示rae能做的所有了不起的事情!

当然,我们现有的那些开源项目及demo也可以用在rae上!
人体姿态
在这里插入图片描述
特征追踪
在这里插入图片描述
语义分割
在这里插入图片描述
物体检测
在这里插入图片描述
边缘检测
在这里插入图片描述
物体识别
在这里插入图片描述
深度视觉
在这里插入图片描述

▌rae好上手吗?

使用rae的三步:

  • 开机
  • 下载APP
  • 轻点几下探索rae的功能

开源ros机器人rae专属APP功能介绍

▌rae能学习并记忆哪些内容?

你的rae不仅仅有一个数据库,它还有一个大脑。当你要求rae记住你是谁,学习如何在你的房子周围无缝驾驶,或去寻找电视遥控器时,它将所有这些知识存储在它的大脑中。只需在你的屏幕上轻点几下,就可以访问rae所有已知的人、物、语音命令、手势和位置。

你想让rae忘记什么吗?没问题。无论机器人多么友好,我们知道不是每个人都希望rae能记住他们。要从大脑中删除一些东西,只需再点几下,rae就能适应新的情况。

需要了解一点,rae是边缘计算的设备、OAK不能访问你存储在rae上的任何你不愿意分享的信息。你的数据是你自己的,你可以使用、存储和管理它,或者不使用,如你所愿。

▌rae的硬件参数?

专业的OAK相机系统

总共五个传感器,同时提供立体深度感知和4K高分辨率彩色视频。

顺滑的车轮

rae在地毯、木材、瓷砖、草地和砾石上平稳地前行,它可以去你需要的任何地方,并且可以在一秒内转弯。

坚固的金属外壳

rae的外壳牢靠无比,经得起考验。意外跌落或踢到?水枪大战的旁观者?被家里的狗抓住了? rae都能hold住。

牢靠的通信系统

LED环用于即时的用户反馈,六个麦克风用于语音命令,集成的扬声器用于音频输出,LCD屏幕用于快速检查视觉状态。

控制和定制

同时兼容WiFi和蓝牙。USB-C端口,便于RVC 3的连接和配件的安装。

高性能的2,000 mAh电池

约一小时的电池寿命和高效的充电速度。

最新VPU:RVC3

rae的AI算力是目前oak相机的5倍,最多支持6个相机,板载计算机视觉。
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

▌参考资料

rae众筹链接
rae介绍


OAK中国
| OpenCV AI Kit在中国区的官方代理商和技术服务商
| 追踪AI技术和产品新动态

戳「+关注」获取最新资讯↗↗

相关内容

热门资讯

安卓子系统windows11,... 你知道吗?最近科技圈可是炸开了锅,因为安卓子系统在Windows 11上的兼容性成了大家热议的话题。...
电脑里怎么下载安卓系统,电脑端... 你有没有想过,你的电脑里也能装上安卓系统呢?没错,就是那个让你手机不离手的安卓!今天,就让我来带你一...
索尼相机魔改安卓系统,魔改系统... 你知道吗?最近在摄影圈里掀起了一股热潮,那就是索尼相机魔改安卓系统。这可不是一般的改装,而是让这些专...
安卓系统哪家的最流畅,安卓系统... 你有没有想过,为什么你的手机有时候像蜗牛一样慢吞吞的,而别人的手机却能像风一样快?这背后,其实就是安...
安卓最新系统4.42,深度解析... 你有没有发现,你的安卓手机最近是不是有点儿不一样了?没错,就是那个一直在默默更新的安卓最新系统4.4...
android和安卓什么系统最... 你有没有想过,你的安卓手机到底是用的是什么系统呢?是不是有时候觉得手机卡顿,运行缓慢,其实跟这个系统...
平板装安卓xp系统好,探索复古... 你有没有想过,把安卓系统装到平板上,再配上XP系统,这会是怎样一番景象呢?想象一边享受着安卓的便捷,...
投影仪装安卓系统,开启智能投影... 你有没有想过,家里的老式投影仪也能焕发第二春呢?没错,就是那个曾经陪你熬夜看电影的“老伙计”,现在它...
安卓系统无线车载carplay... 你有没有想过,开车的时候也能享受到苹果设备的便利呢?没错,就是那个让你在日常生活中离不开的iOS系统...
谷歌安卓8系统包,系统包解析与... 你有没有发现,手机更新换代的速度简直就像坐上了火箭呢?这不,最近谷歌又发布了安卓8系统包,听说这个新...
微软平板下软件安卓系统,开启全... 你有没有想过,在微软平板上也能畅享安卓系统的乐趣呢?没错,这就是今天我要跟你分享的神奇故事。想象你手...
coloros是基于安卓系统吗... 你有没有想过,手机里的那个色彩斑斓的界面,背后其实有着一个有趣的故事呢?没错,我要说的就是Color...
安卓神盾系统应用市场,一站式智... 你有没有发现,手机里的安卓神盾系统应用市场最近可是火得一塌糊涂啊!这不,我就来给你好好扒一扒,看看这...
黑莓平板安卓系统升级,解锁无限... 亲爱的读者们,你是否还记得那个曾经风靡一时的黑莓手机?那个标志性的全键盘,那个独特的黑莓体验,如今它...
安卓文件系统采用华为,探索高效... 你知道吗?最近安卓系统在文件管理上可是有了大动作呢!华为这个科技巨头,竟然悄悄地给安卓文件系统来了个...
深度系统能用安卓app,探索智... 你知道吗?现在科技的发展真是让人惊叹不已!今天,我要给你揭秘一个超级酷炫的话题——深度系统能用安卓a...
安卓系统的分区类型,深度解析存... 你有没有发现,你的安卓手机里藏着不少秘密?没错,就是那些神秘的分区类型。今天,就让我带你一探究竟,揭...
安卓系统铠无法兑换,揭秘无法兑... 最近是不是有很多小伙伴在玩安卓系统的游戏,突然发现了一个让人头疼的问题——铠无法兑换!别急,今天就来...
汽车安卓系统崩溃怎么刷,一键刷... 亲爱的车主朋友们,你是否曾遇到过汽车安卓系统崩溃的尴尬时刻?手机系统崩溃还能重启,但汽车系统崩溃了,...
miui系统可以刷安卓p系统吗... 亲爱的手机控们,你是否对MIUI系统情有独钟,同时又对安卓P系统的新鲜功能垂涎欲滴?今天,就让我带你...