OpenCV众筹了一款ROS2机器人rae,开源、功能强、上手简单。来瞅瞅~

news2025/7/8 21:18:30

编辑:OAK中国
首发:oakchina.cn
喜欢的话,请多多👍⭐️✍

▌前言

Hello,大家好,这里是OAK中国,我是助手君。

在2020年、2021年OpenCV分别在Kickstarter上众筹了两款OAK产品,均筹集超过百万美元。2022年上半年也有朋友问我今年有没有众筹的产品,原以为没有,没想到上周突然来了rea众筹的消息!目前已筹集超过20万美元!
在这里插入图片描述

Kickstarter众筹地址,中国区专属众筹地址。

我研究了一下这个机器人,确实有点东西,给大家分享一下!

OAK有史以来首个完全成型的开源ros2机器人rae,将机器人技术的入门门槛降到极致,全球众筹中!

▌背景

在这里插入图片描述
目前机器人领域的入门门槛似乎仍旧高的遥不可及,没有一定水平的技术专业知识,新手很难入门。我们要考虑选择什么主控制器?选择什么深度相机?选择什么激光雷达?选择什么通信模块?什么控制底盘?硬件选完了,我们还要考虑ROS的移植、视觉slam算法的开发、建图导航算法的开发、人工智能模型的部署、还有上位机控制软件的开发。这一切都弄好了,还要考虑软硬件适配调试、算力分配、功耗控制、结构外观设计等等,一大堆问题等着你。

OAK的工程师们在设计OAK机器人视觉相机的同时,看到不少用户遇到了这样入门难的问题,一直试图解决。终于历经一年多的时间,重磅推出了rae,一款能为任何人所用的、开机即用的、开源一体化ROS2机器人!
在这里插入图片描述
rae一经面世,即受到不少用户的热捧。自2022年11月9日众筹上线Kickstarter以来,两天突破200,000美元,成为热门科技类产品!
在这里插入图片描述

rae背后的工程师们一直秉持着这样的理念——Robotic vision, made simple。每个人都应该有机会接触尖端机器人技术,并能够简单地使用它们。而rae正是这一理念最好的诠释!
在这里插入图片描述

它是OAK有史以来第一个完全成型的机器人,它将所有强大的机器学习、人工智能、计算机视觉、slam导航、ROS2等整合到一个口袋大小的躯体里。它的前方和后方集成了两台OAK相机,可以运行所有OAK支持持的3D人工智能功能。内置S3代的OAK核心芯片,具有目前OAK相机5倍的人工智能算力。

在这里插入图片描述

来装一个rae,看看这个开源ROS机器人的内部构造!

▌rae有哪些功能?

在这里插入图片描述
难以想象rae如此小的身体,竟然比亚马逊的百万美元移动仓储机器人能做的更多!
在这里插入图片描述

AI加速

它给边缘计算增加了机器视觉的力量,通过板载的人工智能AI加速、OpenCV图像处理加速、机器学习功能,它使各种复杂的视觉和导航任务变得简单易行。

SLAM

下载配备的APP,即可在你的手机或平板上运行slam。

在这里插入图片描述

ROS

rae预装了ROS2,所以你可以使用最强大的机器人操作系统,而不必担心任何初始设置。

在这里插入图片描述

Unity虚拟机器训练

rae还支持Unity,这意味着你可以在虚拟世界里做机器学习。从下面的视频中,你可以看到为rae创建的虚拟 “训练馆”,四台rae玩二对二的足球游戏。

在unity里训练机器人rae踢足球!

云平台RobotHub

rae的云平台RobotHub,让你可以从世界的任何地方控制rae。
在这里插入图片描述

RobotHub是可帮助你设置、应用和监控机器人视觉解决方案。你可以检查你的设备,进行现场直播,远程部署应用程序,部署人工智能模型,并检查性能/状态指标,所有这些都只需要点击几下就可以完成。

远程控制

在度假?让rae充当保安,确保一切正常!想查看家里的宠物?让rae实时告诉你!朋友来访?让rae带路在你家转转!
在这里插入图片描述

定位与建图

标准配备了SLAM(同步定位和绘图),rae可以自主地绘制你的房间、房子或办公室。它将构建一个地图,使其能够轻松地进行导航。
在这里插入图片描述

玩游戏

利用面部检测和定位功能,rae会和你一起玩大家最喜欢的童年游戏捉迷藏。通过它的应用程序或语音命令告诉rae你想玩,等待它的屏幕变黑并开始倒计时,然后躲起来!一旦时钟归零,rae就会去找你。猜猜看rae能不能找到你?
在这里插入图片描述

哨兵模式

如果你外出一天,让rae在你的窗户边上放哨,观察你期待的包裹的到来。当感兴趣的事情发生时,你可以设置rae向你发送通知。也许你还订购了另一只rae来陪伴它?为了增加额外的家庭安全,rae可以快速而轻松地读取和记录车辆的牌照。rae机器人的所有算力和ROS2操作系统都是运行在机器人内部的OAK相机的主控制芯片上,可以完全离线运行。其流畅性和体验度比需要远程云计算的机器人要优秀很多。
在这里插入图片描述

功能齐全的APP

通过其专门设计的应用程序访问rae的所有功能,以及更多的功能。只需将其下载到您的设备上,通过WiFi或蓝牙连接到你的rae,并开始探索。就是这么简单。
在这里插入图片描述

更多功能!

以下是我们计划实现的全部功能清单:遥控、跟随我、手语翻译、捉迷藏、条形码和二维码扫描、计时、人员和情感检测、哨兵模式、物体检测和定位以及建图。

随着我们的发展,你可以期待大量的更新,向你展示rae能做的所有了不起的事情!

当然,我们现有的那些开源项目及demo也可以用在rae上!
人体姿态
在这里插入图片描述
特征追踪
在这里插入图片描述
语义分割
在这里插入图片描述
物体检测
在这里插入图片描述
边缘检测
在这里插入图片描述
物体识别
在这里插入图片描述
深度视觉
在这里插入图片描述

▌rae好上手吗?

使用rae的三步:

  • 开机
  • 下载APP
  • 轻点几下探索rae的功能

开源ros机器人rae专属APP功能介绍

▌rae能学习并记忆哪些内容?

你的rae不仅仅有一个数据库,它还有一个大脑。当你要求rae记住你是谁,学习如何在你的房子周围无缝驾驶,或去寻找电视遥控器时,它将所有这些知识存储在它的大脑中。只需在你的屏幕上轻点几下,就可以访问rae所有已知的人、物、语音命令、手势和位置。

你想让rae忘记什么吗?没问题。无论机器人多么友好,我们知道不是每个人都希望rae能记住他们。要从大脑中删除一些东西,只需再点几下,rae就能适应新的情况。

需要了解一点,rae是边缘计算的设备、OAK不能访问你存储在rae上的任何你不愿意分享的信息。你的数据是你自己的,你可以使用、存储和管理它,或者不使用,如你所愿。

▌rae的硬件参数?

专业的OAK相机系统

总共五个传感器,同时提供立体深度感知和4K高分辨率彩色视频。

顺滑的车轮

rae在地毯、木材、瓷砖、草地和砾石上平稳地前行,它可以去你需要的任何地方,并且可以在一秒内转弯。

坚固的金属外壳

rae的外壳牢靠无比,经得起考验。意外跌落或踢到?水枪大战的旁观者?被家里的狗抓住了? rae都能hold住。

牢靠的通信系统

LED环用于即时的用户反馈,六个麦克风用于语音命令,集成的扬声器用于音频输出,LCD屏幕用于快速检查视觉状态。

控制和定制

同时兼容WiFi和蓝牙。USB-C端口,便于RVC 3的连接和配件的安装。

高性能的2,000 mAh电池

约一小时的电池寿命和高效的充电速度。

最新VPU:RVC3

rae的AI算力是目前oak相机的5倍,最多支持6个相机,板载计算机视觉。
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

▌参考资料

rae众筹链接
rae介绍


OAK中国
| OpenCV AI Kit在中国区的官方代理商和技术服务商
| 追踪AI技术和产品新动态

戳「+关注」获取最新资讯↗↗

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/9683.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

设计模式——桥接模式

桥接(Bridge)模式 一、基本思想 当一个类内部具备两种或多种变化维度时,使用桥接模式可以解耦这些变化的维度,使高层代码架构稳定。 将抽象与实现分离,使它们可以独立变化。 用组合关系代替继承关系来实现&#xff0…

运维面试必问的中间件高频面试题

1. redis是单线程还是多线程? 这个问题已经被问过很多次了,从redis4.0开始引入多线程,redis 6.0 中,多线程主要用于网络 I/O 阶段,也就是接收命令和写回结果阶段,而在执行命令阶段,还是由单线程…

综述类论文_Machine Learning for Encrypted Malicious Traffic Detection(重要)

文章目录Machine Learning for Encrypted Malicious Traffic Detection: Approaches, Datasets and Comparative Study摘要存在的问题论文贡献1. 基于机器学习的加密流量检测模型的总体框架1.1 Research Target(研究目标)1.2 Traffic Dataset Collection…

Allegro给各种形式的板框导弧操作指导

Allegro给各种形式的板框导弧操作指导 Allegro可以给板框导弧,让加工出来的板框更加圆滑,具体操作步骤如下 板框是line形式的 选择Manufacture-Drafting-Fillet命令 在Options里面Radius输出导弧的半径,比如78.74 框选两个线段的部分 完成后的效果如下图 框选4个角落,…

Python基础学习

一、Python基础 1.Python介绍 2.发展史 3.Python 2 or 3? 4.安装 5.Hello World程序 6.变量 7.用户输入 8.模块初识 9. .pyc是个什么鬼? 10.数据类型初识 11.数据运算 12.表达式if ...else语句 13.表达式for 循环 14.break and continue 15.表达式while 循环…

最好的Python入门教材是哪本?这本书当之无愧

1.门槛低 适合编程零基础上手 《Python编程 从入门到实践(第二版)》的作者埃里克马瑟斯(Eric Matthes)是一名高中科学和数学老师,现居住在阿拉斯加,在当地讲授 Python 入门课程。他从 5 岁开始就一直在编写…

带你深度解析虚幻引擎4的照明和阴影知识

照明是渲染的重要组成部分。有静态光和动态光,它们往往很重并且需要大量计算。今天就让赞奇云工作站带领小伙伴们来学习一下虚幻引擎4中的光照和阴影的知识。 静态照明 静态光在编辑器中预先计算并保存在光照贴图中。 〇:良好的性能和质量&#xff08…

[go学习笔记.第十五章.反射,常量] 1.反射的基本介绍以及实践

一.反射的引入以及基本介绍 1.看两个问题 (1).对于结构体的序列化和反序列化,看一段代码 package mainimport("fmt" "encoding/josn" )type Monster struct {Name string json:"monsterName"Age int json:"monsterAge&quo…

Android商城开发----点击左侧分类列表右侧更新对应列表内容

Android商城开发----点击左侧分类列表右侧更新对应列表内容 目录Android商城开发----点击左侧分类列表右侧更新对应列表内容一、首先说布局:二、主要说一下,布局完成后实现点击左侧类别时,右侧展现对应类的商品列表。主要思想:源代…

Vue3响应系统的实现(二)

前言 继上一篇文章,我们已经能够实现一个简单的响应系统了,但是仍然存在很多缺陷,本篇文章将具体叙述一下存在的缺陷以及如何解决,最后实现一个较为完善的响应式系统 解决副作用函数硬编码问题 从上一篇文章中我们不难发现响应…

概率 | 【提神醒脑】重难点专题突破 自用笔记

本文总结参考于 kira 2023概率提神醒脑技巧班 中 —— 重难点专题。 笔记均为自用整理。加油!ヾ(◍∇◍)ノ゙ 一研为定! 一、条件均匀 / 指数 / 二项…分布 -------------------------------------------------------------------------------------------------------------…

基于inquirer实现一个控制台多级选择交互功能

说在前面 🎈在前端脚手架工具中经常会看到控制台输入参数等操作。例如Vue-cli中初始化项目会提示选择一些参数等。所以在开发脚手架工具或者node控制台程序,就需要用到inquirer工具或者类似的工具。但是使用过inquirer工具的同学应该知道,目前…

SpringSecurity整合SSM和SpringBoot完成方法级权限控制

初识权限管理 权限管理,一般指根据系统设置的安全规则或者安全策略,用户可以访问而且只能访问自己被授权的资源。权限管理几乎出现在任何系统里面,前提是需要有用户和密码认证的系统。 在权限管理的概念中,有两个非常重要的名词&…

SpringBoot SpringBoot 开发实用篇 1 热部署 1.4 关闭热部署功能

SpringBoot 【黑马程序员SpringBoot2全套视频教程,springboot零基础到项目实战(spring boot2完整版)】 SpringBoot 开发实用篇 文章目录SpringBootSpringBoot 开发实用篇1 热部署1.4 关闭热部署功能1.4.1 关闭热部署1.4.2 小结1.4.3 总结1 …

大佬神作!Spring Security从应用到源码,这份手册都讲全了,已三刷

简介 平时我们写 Web 项目,都需要用户登录时验证,以及权限管理之类的操作,以前使用过滤器,拦截器等进行管理,原生代码较多。 所以出现了安全框架以供我们使用,安全框架在 Web 应用的主要功能是&#xff1a…

金九失足,10月喜提“Java高分指南”,11月冲击大厂

蓦然回首自己做开发已经十年了,这十年中我获得了很多,技术能力、培训、出国、大公司的经历,还有很多很好的朋友。但再仔细一想,这十年中我至少浪费了五年时间,这五年可以足够让自己成长为一个优秀的程序员,…

VS2017安装教程(详细版)

1.首先下载好安装包 百度网盘下载链接 链接:https://pan.baidu.com/s/1HW8hrLMazRsBkPvkDHkD1Q?pwdz4jg 提取码:z4jg 2.下载到桌面以管理员身份运行 点击继续 3.进入后更改安装位置,选择安装路径,千万不要安装到C盘 4.改完后…

Opencv——直方图、掩膜、直方图均衡化详细介绍及代码实现

一、图像直方图 1.1 定义: 图像直方图是图像的基本属性之一,也是反映图像像素数据分布的统计学特征,其横坐标代表了图像像素点在[0,255]范围中,纵坐标代表图像像素点出现的个数或百分比。如图: 1.2 函数:…

Go程序内存泄露问题快速定位

前几天有同学反馈了 cgo 内存泄露问题,自己也针对这个问题探索了一番,算是为以后解决类似问题提前攒点经验吧。也趁机整理了一下 go 开发过程中内存泄露问题的一些常用排查方法,也希望对新接触 go 的同学有所帮助。整理之余,bcc 工…

面试问题:MD5属于哪种加密算法?千万别踩这些坑

一些小伙伴吐槽,去面试的时候经常听到面试官问这样的问题,“对称加密”、“非对称加密”、“MD5加密”,那么MD5到底属于哪种加密算法?遇到这样的问题,一定要小心,这是面试官给你挖的坑呢,可别傻…