基于RK3588+3D视觉的机器人控制器,服务于清洁车/AGV等场景

server/2024/12/19 5:58:29/

服务机器人解决方案

针对服务机器人场景,基于3D视觉感知技术,通过自研ASIC芯片,实现高精度3D深度信息获取,助力服务机器人实现感知、避障、导航等功能,可广泛应用于商务清洁、餐饮配送、楼宇配送、仓储物流、教育娱乐等领域。

信迈已为高仙机器人、云迹科技、普渡科技等超100家头部服务机器人品牌提供技术和产品服务。

3D视觉赋能,一台清洁车释放三个人力

人工智能正在进入产业与应用深度结合的爆发期。为代表的一批人工智能产业链企业,通过自研关键核心技术,加大应用型人才投入,赋能AI应用在机器人、智能座舱等领域落地。

在深圳天安云谷产业园,记者看到,搭载3D视觉传感器+信迈机器人控制器的高仙清洁机器人正在清扫地面的落叶。凭借3D视觉“智慧之眼”,该机器人可以自动识别、清理垃圾,并在复杂的户外环境中自动避障,极大地提升了清洁效率。园区清洁运营负责人表示,“园区大概有几万平方米,其中的餐饮区域需要三个保洁人员来循环工作。现在只需要一台商用清洁车,就可以释放三个人力。”

当下,随着人工智能应用场景增多,相关产品不断落地到机器人、智能座舱、虚拟现实、工业等领域。针对智能机器人行业兴起的需求,信迈推出了双目结构光、单目结构光、iToF、激光雷达等多种机器人视觉感知方案,帮助机器人实现建图、定位、避障、场景识别等功能。

央视财经频道报道20221104.mp4_20221110_113133.158.png

基于RK3588智能机器人控制板有哪些特点呢?

智能机器人控制板作为机器人的核心大脑,需要具备一系列关键特点以支撑其高效、智能地运作。以下是智能机器人控制板所需的主要特点:

NPU加持

  • 支持离线大模型:能够处理复杂的AI任务,即使在网络不稳定或离线状态下也能运行大型神经网络模型。

  • 物体识别等算法:内置或可加载多种物体识别、人脸识别、场景理解等算法,提升机器人的感知能力。

  • 单目测距算法:支持通过单目摄像头进行距离测量,增强机器人的空间感知能力。

  • 算力灵活叠加:提供灵活的算力扩展能力,根据任务需求调整NPU的算力资源。

操作系统支持

  • 支持Linux安卓系统:提供对Linux和Android操作系统的广泛支持,便于开发者选择适合的操作系统进行开发。

  • Android友好设计UI:对于采用Android系统的机器人,提供用户友好的界面设计工具和框架。

  • Linux标准适配ROS/ROS2:完美适配ROS(Robot Operating System)和ROS2,为机器人应用开发提供强大的生态系统支持。

智能语音交互

  • 多麦克风阵列:配置多个麦克风阵列,提高语音采集的清晰度和方向性。

  • 离线语音唤醒词:支持离线语音唤醒功能,即使在无网络环境下也能通过特定唤醒词激活机器人。

AMP架构支持

  • 强实时性:确保机器人控制板在处理关键任务时具有极高的响应速度和实时性。

  • 高稳定性:采用稳定的硬件和软件架构设计,降低系统故障率,提升机器人运行的可靠性。

  • 更低的硬件成本:通过优化AMP(Asymmetric Multiprocessing,非对称多处理)架构,实现性能与成本的平衡。

ROS适配

  • 适配标准ROS/ROS2:无缝集成ROS和ROS2,使机器人能够轻松接入机器人生态系统中的各类库、工具和应用程序。

  • 适配部分雷达:支持多种雷达传感器(如激光雷达、毫米波雷达等),提升机器人在复杂环境中的感知能力。

  • 适配RK结构光:与瑞芯微自研的结构光模组高度兼容,实现更精准的3D感知和测量。

RK3588在机器人控制板上的优势

  • 高CPU算力:高达93KDMIPS的CPU算力,为机器人控制板提供强大的数据处理能力,确保机器人能够迅速响应各种指令和任务。

  • 高GPU算力:高达512GFLOPs的GPU算力,支持复杂的图形渲染和多媒体处理,提升机器人的视觉感知和交互体验。

  • 高NPU算力:三核NPU,算力高达6TOPs(INT8),支持深度学习框架,为机器人控制板上的AI应用提供高效、精准的算力支持。例如,在yolo-v8n模型下,单核即可达到59.6fps的推理速度,满足实时性要求高的应用场景。

  • 瑞芯微自研模组:瑞芯微自研的结构光模组和RK1808计算棒等模组,为机器人控制板提供了更加专业的硬件支持,提升了机器人的整体性能和功能。

  • 工规芯片标准:支持-40摄氏度到85摄氏度的宽温工作环境,确保机器人在各种恶劣环境下都能稳定运行。

基于RK3588的机器人控制板设计方案框图


http://www.ppmy.cn/server/151375.html

相关文章

软件工程复习重点(第一章 软件工程概述)

1.什么是软件?软件有什么特点? 软件分类? 计算机软件--计算机系统中的程序、数据及其文档的统称。 2.软件发展的3个阶段 (1)程序设计阶段;(2)程序系统阶段;&#xff08…

PMP报考条件?

一般来说,考证的报名条件很多是学历工作经验。PMP 也是这样,但是它多了一个需要培训证明的条件,而这个培训证明只能由培训机构颁发,这就说明我们只能报班了,限制了自学考证的方式。 具体的报名条件见下文。 报名条件&…

LAPACK 程序 SSYEVD 的计算特征值的应用实例 C/Fortran

A*v(j) lambda(j)*v(j) 0,预备环境 编译一份 Lapack源代码,会生成两个 静态链接库: liblapack.a librefbals.a 1,C版本 源码: hello.c /*SSYEVD Example.Program computes all eigenvalues and eigenvectors o…

Go-FastDFS文件服务器一镜到底使用Docker安装

本文章介绍一镜到底安装go-fastdfs并配置数据文件到linux 由于国内镜像无法安装go-fastdfs:国内环境已经把docker官方的网站给封闭了 我们需要从国外的一台服务器,下载images镜像,然后进行转发加载到国内服务器 一、在国外服务器拉取镜像 …

使用CNN模型训练图片识别(键盘,椅子,眼镜,水杯,鼠标)

首先是环境: 我是在Anaconda3中的Jupyter Notebook (tensorflow)中进行训练,环境各位自行安装 数据集: 本次数据集五个类型(键盘,椅子,眼镜,水杯,鼠标)我收集了每个接近两…

【347. 前 K 个高频元素 中等】

题目&#xff1a; 给你一个整数数组 nums 和一个整数 k &#xff0c;请你返回其中出现频率前 k 高的元素。你可以按 任意顺序 返回答案。 示例 1: 输入: nums [1,1,1,2,2,3], k 2 输出: [1,2] 示例 2: 输入: nums [1], k 1 输出: [1] 提示&#xff1a; 1 < nums.leng…

Linux内核 -- 普通定时器mod_timer的使用示例

Linux Kernel 普通定时器使用示例 本文介绍如何在 Linux 内核模块中使用普通定时器&#xff08;timer_list 结构&#xff09;。 示例代码 #include <linux/module.h> #include <linux/init.h> #include <linux/timer.h> #include <linux/jiffies.h>…

分布式全文检索引擎ElasticSearch-数据的写入存储底层原理

一、数据写入的核心流程 当向 ES 索引写入数据时&#xff0c;整体流程如下&#xff1a; 1、客户端发送写入请求 客户端向 ES 集群的任意节点&#xff08;称为协调节点&#xff0c;Coordinating Node&#xff09;发送一个写入请求&#xff0c;比如 index&#xff08;插入或更…