机器人

赋予机器人具身大脑

基于视觉为主 多传感器融合机器人感知决策中枢

行业问题

无论初创公司还是已经规模化的硬件公司,其商业化落地需求,客户定制化需求通常与视觉相关,但是实现视觉功能需要算法适配/模型调优等复杂工作,通常需要一个团队,对于硬件公司来说是不小的成本。

缺乏全域适配能力,衍生版本兼容性差,高度依赖人工接入,无法全面匹配完整业务需求。

Xeroptix方案——给机器人一个“头部”

具身智能是人工智能在物理世界的延伸
Xeroptix的方案为机器人提供具身大脑与眼睛,从而控制机器人执行
具体动作

具身大脑

感知决策

边缘 AI 算法识别

大模型多模态理解

控制指令

机器人具身大脑视觉模组
机器人控制系统代码

具身小脑

实时执行

嵌入式控制系统

机械臂控制

行走 飞行

机器人运动控制

Xeroptix方案——硬件

基于视觉为主 多传感器融合机器人感知决策中枢

高清摄像头采集输入
多传感器选配(ToF 深度相机)
可选配算力芯片
网络模组 WiFi及4G
Xeroptix Arc3 多传感器机器人感知决策硬件

传感器类型可调整可根据不同的机器人形态搭配不同的传感器

传感器模块
眼睛传感器
边缘计算芯片
大脑算力芯片
机器人身体控制通用接口
身体控制通用接口

Xeroptix方案——算法生态

丰富算法生态
在线配置
即插即用
Xeroptix 多形态边缘视觉设备
工业控制柜状态灯监测

工业管理

  • 设备异常状态监控
  • 指示灯状态监控
  • 人员安全穿戴监控
  • 明火/积水环境异常监控
园区道路和厂房通行监控

园区管理

  • 安全通道监控
  • 楼宇大门状态
  • 公共照明异常
  • 停车位监控
  • 异常闯入
滑板运动人体姿态关键点识别

人体信息管理

  • 手势识别
  • 面容识别
  • 姿势识别
货架饮品目标框物品识别

物品识别

  • 目标物品识别
  • 物品分类
  • 物品计数

Xeroptix方案——接入方式

机器人接口装载 Xeroptix 设备

通过接口加装至设备上

Lite 轻量化视觉设备
Lite Rugged 轻量化视觉设备
Lite 轻量化设备
Pro 系列高性能边缘设备
Pro 系列多传感器设备
Pro 高性能系列
设备芯片定制化开发

根据设备芯片定制化开发

算法包

算法包

玩家挥拍动作实时计算
某知名游戏公司与Xeroptix 合作生产一款纯视觉人机交互的乒乓球游戏机,由Xeroptix提供包含算力芯片及摄像头的智能设备,识别玩家做出挥拍动作(无需购买搭载传感器的配件)。算法即可自动计算方向-力度-速度,由游戏主机转化为模拟回球动作,实现纯视觉的人机交互乒乓球游戏。
选择Xeroptix 人体姿态检测开发套件
YOLOv5 Two-Class Detection 开发套件
YOLOv5 Two-Class Detection
Monocular Depth Proxy 开发套件
Monocular Depth Proxy
Pose Binding 开发套件
Pose Binding
Swing State Machine 开发套件
Swing State Machine

建筑工地工服/安全帽佩戴检测

某知名建筑公司与Xeroptix建立合作,由Xeroptix实现建筑工地工人的安全帽、安全衣佩戴检测及抽烟行为制止功能,并将数据汇总至公司管理系统,方便公司高层全面掌握旗下工地施工过程的安全数据。

违规行为检测模板

YOLOv5 Two-Class Detection 违规行为检测模板

YOLOv5 Two-Class Detection

建筑工地安全帽和工服佩戴检测画面

Xeroptix方案对比

New

提供行业主流算法模板,结构灵活;

通过Xclaw平台使用自然语言快速搭建算法,

即插即用 + 预置能力,接入后即刻生效。

统一接口硬件连接

统一接口

标准化硬件接口、统一通讯协议

自动识别驱动界面

自动识别驱动

智能传感器/设备发现与驱动匹配

自然语言驱动配置界面

自然语言驱动

算法搭建部署过程可通过自然语言辅助设置

快速部署验证界面

快速部署验证

缩短部署周期,降低成本和风险

Old

漫长的集成周期,以月为单位

硬件开发
硬件
驱动调试
驱动
算法开发
算法
硬件调试
调试
部署集成
部署

Xeroptix方案亮点

赋予机器人感知与决策

开箱即用

无需组建算法团队,即插即用,10分钟即可完成部署

快速赋能

让通用型的硬件快速获得工业级的能力

丰富行业算法模板

Xeroptix拥有多套行业算法模板,按需配置后一键部署即可使用 同时,提供海量的基础算法供开发者二次开发

丰富硬件方案

Xeroptix提供Lite Pro及企业定制版等硬件选择,提供不同芯片算力 不同传感器组合的定制选择

Xeroptix Arc3 多传感器硬件
机器人工厂分拣场景

机器人工厂分拣

目标识别+点位识别

实现机器人本体抓取控制

园区异常闯入告警场景

园区异常闯入告警

目标识别+区域识别

实现园区异常闯入实时告警

巡检异常点位拍照场景

巡检异常点位拍照

点位识别+视觉巡检

实现异常点位自动记录