0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

机器人基于3D相机组装家具

广州虹科电子 来源:广州虹科电子 作者:广州虹科电子 2022-08-08 17:40 次阅读

相信大家都经历过一件事:组装新家具。把零件按顺序排列好,查看安装说明,发现要花费的时间比预期要长!

新加坡南洋理工大学(NTU Singapore)的科学家们研制了一种机器人,可以独立组装椅子的各个零件。该机器人由一个HK Ensenso N35 3D相机和两个能抓取物体的机器臂组成。

应用

为了帮助机器人组装宜家的椅子,来自“机械与航空工程学院”的团队用三个不同的开源库对算法进行编码。机器人的硬件设计是为了模拟人们如何安装物体:“眼睛”为3D摄像头,“手臂”为能够在六个轴上运动的工业机械臂。每只机械臂都有抓手来抓取物体。手腕上安装了力传感器,以确定“手指”的握力以及它们使物体相互接触的强度。

机器人开始组装过程时,会拍摄地面上各部件的3D图像,生成各部件估计位置的地图,由HK Ensenso 3D相机完成。相机的工作原理是模仿人类视觉的“投影纹理立体视觉”(stereo vision)。两台相机从两个不同的位置获取同一场景的图像。虽然摄像机看到的场景内容是相同的,但根据摄像机的投影射线得到的物体位置不同。特殊的匹配算法比较两幅图像,搜索相应的点,并在视差图中可视化所有点的位移。虹科提供软件可以确定每个单独的图像像素或物体点的三维坐标,以便于完成椅子的组装。

难点

难点是在混乱的环境中尽可能精确、快速、可靠地定位组件。虹科3D相机依赖大功率投影仪足以满足这些需求。即使在艰难的光线条件下,投影仪也能通过图像掩模在物体表面产生高对比度的纹理。投射的纹理补充了宜家椅子组件上薄弱或不存在的物体表面结构。

这个应用利用了虹科N35系列相机中独有的FlexView投影仪技术,投影在组件物体表面上的模式可以改变表面上的纹理,检测得到的深度信息非常精确完整,该项技术是通过获取同一目标场景的不同纹理的多幅图像融合成一帧图像得到。另一个优势是HK Ensenso软件提供机器人手眼标定功能。使用一个标定板,它确保相机坐标系(在这种情况下是相机是静止的)的位置是相对于基础坐标系(组件的位置)确定的。这使得机器人的手能够准确地对图像信息做出反应,并准确地到达目的地。

“对于一个机器人来说,把椅子精确的拼凑比人为工作更复杂”南洋理工大学的Pham Quang Cuong教授解释道。“必须分解成不同的步骤,比如识别不同的椅子部件在哪里,抓住这些部件所需要的力量,以及确保机械手臂在移动时不会相互碰撞。通过相当大的工程努力,我们开发了算法,使机器人能够自行组装椅子。”结果是南洋理工大学的机器人只用了8分55秒就安装好宜家的“斯第芬”椅子。

前景

据Pham Quang Cuong教授介绍,人工智能将使这一应用在未来更加独立和有前途:“我们希望在这种方法中融入更多的人工智能,使机器人更加自主,这样它就可以通过人类演示或阅读安装手册,甚至从组装产品的图片中学习组装椅子的不同步骤。”

新加坡南洋理工大学的科学家开发的机器人被用于对机敏操作的研究,这是一个需要精确控制专用机器人手或手指的力量和运动的机器人领域。这需要所有硬件和软件组件的完美交互。使用虹科3D相机进行三维图像处理是解决问题的关键。它在准确性上、经济和速度方面都令人信服。

这标志着家具组装的真正进步,且不止于此。

虹科Ensenso N35

快速和精确的3D视觉

●GigE接口-灵活多样

● 紧凑,坚固的铝外壳

● IP65/67

●全局曝光CMOS传感器和点图案激光器,可选蓝色或红外led

● 最大帧率(3D):10

●工作距离最远3000mm(N35)且可调节

● 输出单个3D点云

● 提供手眼标定步骤指引,易于设置

●带有标定板的机器人手眼标定集成功能

● 可集成uEye工业摄像头的软件,例如,捕捉附加的颜色信息或条形码

● 灵活的数据和帧率的采样和叠加

审核编辑:汤梓红
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 机器人
    +关注

    关注

    211

    文章

    28483

    浏览量

    207437
  • 3D相机
    +关注

    关注

    0

    文章

    113

    浏览量

    8081
收藏 人收藏

    评论

    相关推荐

    开源项目!能够精确地行走、跳舞和执行复杂动作的机器人—Tillu

    学习者和爱好者的理想伙伴。 创新设计 Tillu的设计灵感来自广受欢迎的Otto DIY机器人,其设计过程包括在Fusion 360中进行CAD建模和精确的3D打印,以实现从坚固的伺服驱动腿部到模块化
    发表于 01-02 17:24

    友思特分享 1小时800件?Ensenso 3D相机如何加速智能机器人的分拣效率

    大量的快递运输需求和普遍存在的劳动力短缺问题催生了物流自动化程度的提升。友思特 Ensenso 3D相机为智能机器人卸垛机方案提供精确的图像数据,使800件/小时的物流分拣运力成为现实。
    的头像 发表于 09-19 14:33 280次阅读

    锐达仪表3D扫描机器人:工业测量的革命性创新

    在当今工业4.0的浪潮中,智能制造和精准数据分析已成为企业发展的关键。锐达仪表3D扫描机器人以其先进的技术,为工业测量领域带来了革命性的创新。这款机器人基于太赫兹调频连续波FMCW测距技术,结合内部
    的头像 发表于 09-05 16:18 377次阅读
    锐达仪表<b class='flag-5'>3D</b>扫描<b class='flag-5'>机器人</b>:工业测量的革命性创新

    开源项目!用ESP32做一个可爱的无用机器人

    、PCB板、LED矩阵模块、ESP32E等。 制作过程包括打印PCB 焊接和组装显示模块 安装开关、焊接驱动板 组装MCU板、功能测试 3D打印机器人
    发表于 09-03 09:34

    开源项目!用ESP32做一个可爱的无用机器人

    、PCB板、LED矩阵模块、ESP32E等。 制作过程包括打印PCB 焊接和组装显示模块 安装开关、焊接驱动板 组装MCU板、功能测试 3D打印机器人
    发表于 08-30 14:50

    OpenCV携奥比中光3D相机亮相CVPR 2024

    机器学习软件库,提供丰富的图像处理和计算机视觉算法。奥比中光与OpenCV的深入合作,使得复杂的3D感知项目开发变得简单高效。全球开发者及企业用户可借助奥比中光先进的3D相机技术和O
    的头像 发表于 06-21 09:38 592次阅读

    AGV导航精度怎么更准确?利用3D相机打造更智能的AGV辅助系统

    AGV工业4.0通过优化流程和引入机器人系统提高生产力和灵活性。物联网增强了机器人的灵敏度和操作性。3D相机技术使AGV能精准识别环境、构建地图、定位和运动规划,提升操作精确度和效率,
    的头像 发表于 06-12 16:51 441次阅读
    AGV导航精度怎么更准确?利用<b class='flag-5'>3D</b><b class='flag-5'>相机</b>打造更智能的AGV辅助系统

    重磅| 奥比中光全新双目系列3D相机,搭载自研芯片,为智能机器人而生

      4月29日,奥比中光正式发布全新Gemini 330系列双目3D相机,首发产品包括Gemini 335、Gemini 335L两款通用型高性能双目3D相机。新品首次搭载奥比中光为
    发表于 04-30 18:00 475次阅读
    重磅| 奥比中光全新双目系列<b class='flag-5'>3D</b><b class='flag-5'>相机</b>,搭载自研芯片,为智能<b class='flag-5'>机器人</b>而生

    高精度彩色3D相机:开启崭新的彩色3D成像时代

    近年来,机器人技术的快速发展促使对3D相机技术的需求不断增加,原因在于,相机在提高机器人的性能和实现多种功能方面发挥了决定性作用。
    的头像 发表于 01-15 14:09 563次阅读
    高精度彩色<b class='flag-5'>3D</b><b class='flag-5'>相机</b>:开启崭新的彩色<b class='flag-5'>3D</b>成像时代

    友思特分享 | 高精度彩色3D相机:开启崭新的彩色3D成像时代

    3D成像的新时代 近年来,机器人技术的快速发展促使对3D相机技术的需求不断增加,原因在于,相机在提高机器
    的头像 发表于 01-11 09:57 432次阅读
    友思特分享 | 高精度彩色<b class='flag-5'>3D</b><b class='flag-5'>相机</b>:开启崭新的彩色<b class='flag-5'>3D</b>成像时代

    友思特C系列3D相机:实时3D点云图像

    3D相机
    虹科光电
    发布于 :2024年01月10日 17:39:25