미지의 것을 피킹
물류 분야의 강력하고 유연한 로봇 자동화
세계적 유행병은 공급망과 물류 산업에 급진적인 영향을 미쳤고, 로봇 자동화에 대한 필요를 그 어느때보다 시급하게 만들었습니다. 물품 창고 노동력의 70% 이상이 피킹과 패킹에 투입되고 있어, 많은 기업들이 물류 자동화에 점진적으로 투자하고 있습니다. 하지만 로봇이 무제한적으로 많은 개수의 (미지의) 재고품들을 관리해야 한다면, 어떻게 처리할 수 있을까요? 이러한 회사는 다양한 오브젝트들의 피킹 앤 플레이싱(picking and placing)을 자동화할 수 있는 빠르고 안정적이며 강인한 방법이 필요합니다.
네덜란드 기업 Fizyr는 이 어려운 작업을 성공적으로 해냈습니다. Fizyr은 Delft에 기반한 컴퓨터 비전 회사로, 로봇이 혹독한 물류 환경에서도 미지의 오브젝트들을 피킹할 수 있도록 하는 것에 집중합니다. 그 결과, 아이템 피킹, 소포 처리, 팔레트에서 내리기(depalletising), 하역, 수하물 처리와 같은 다양한 조건들 및 어플리케이션들에서 물류 자동화를 가능하게 하는 자동 비전 솔루션을 개발하였습니다. 최적의 하드웨어로 시스템을 완성하기 위해, Fizyr는 IDS의 고성능 GigE uEye 카메라와 작고 견고한 Ensenso 3D 카메라를 통합하였습니다.
어플리케이션
시장에 나와있는 대부분의 플레이어들과 같이, 독점적으로 피킹 셀을 제공하지 않으며 대신에, Fizyr는 어떠한 시스템과도 원활하게 통합되는 플러그-앤-플레이 모듈식 소프트웨어 제품을 개발하였습니다. 이를 통해, 통합자들이 그들의 피킹 셀에 대하여 최고의 하드웨어 (예: 협동로봇(Cobot) 또는 산업용 로봇)를 자유롭게 선택할 수 있습니다. 비용, 견고성 및 속도 최적화를 촉진하면서, IDS는 카메라 분야에서 선호되는 파트너입니다. 본질적으로, 카메라는 피킹되거나 분류될 제품을 보여줍니다. 개별적인 고객 어플리케이션에 따라, 강력한 GigE uEye CMOS 카메라들과 결합된 최대 4대의 Ensenso 3D 카메라들이 사용됩니다.
통합된 IDS 산업용 카메라는, 안정적이고 정확한 이미지 캡처를 보장합니다. 이러한 이미지 캡처는, 오브젝트들을 서로 다르게 처리하기 위한 분류를 포함하여, 매초 100개 이상의 파지 포즈들(grasp poses)을 제공하는 Fizyr의 소프트웨어 알고리즘을 위하여 필요합니다. 또한 소프트웨어는 품질 관리를 수행하고 결함을 감지하여 손상된 아이템이 선별기에 놓이는 것을 방지합니다 - 자동 시스템의 날카로운 눈, IDS 카메라의 도움으로.
따라서, 이러한 알고리즘은, 물건 꾸러미의 유형 (박스, 가방, 봉투/플랫, 튜브, 실린더, 변형 가능한 물체 등)의 분류에 대한 정보는 물론, 세분화에 대한 모든 관련 정보를 제공할 수 있습니다. 시스템은 6 DoF (자유도)에서 가능한 파지 포즈 및 오브젝트마다 다수 개의 정렬된 포즈에서, 이상치(outliers) 또는 운반 불가능한 것들(즉, 손상된 상품)을 인식합니다. 센서 또는 로봇이 투명한 오브젝트는 물론, 빽빽이 쌓여 있거나 겹쳐진 오브젝트들, 반사율이 높은 아이템들, 및 비닐 봉지 안의 의류, 흰색 위에 흰색과 검은 색 위에 검은 색의 편평한 것들도 처리할 수 있도록 합니다.
스테레오 비전 품질은 현장의 조명 조건 및 오브젝트 표면의 텍스처에 직접적으로 의존하기 때문에, 특별한 질감이 덜하거나 반사되는 표면에서 해당 지점의 좌표를 찾고 계산하는 것은 매우 어렵습니다. 이러한 높은 요구 사항들을 충족하기 위해, 고객 솔루션을 위한 Fizyrs의 첫 번째 선택이 IDS 포트폴리오의 카메라 모델들입니다. 따라서 작업들은 잘 나누어집니다: uEye GigE CP 카메라는 오브젝트의 2D 이미지를 촬영하여, 이를 Fizyr의 알고리즘에 대한 입력으로 제공한 뒤, 다음으로 카메라 하에서 오브젝트들을 분류하는 작업을 진행합니다. 오브젝트들은 미지의 것이며, 다양한 모양, 크기, 색상, 재료 및 쌓임(stacking)을 가집니다. 그런 다음 Ensenso 카메라가 포인트 클라우드 맵을 생성합니다. Fizyr의 소프트웨어는 이를 2D 이미지로부터의 정보와 결합하고 클라우드 표면을 분석하여, 그리퍼(또는 다수의 그리퍼들)에 대한 적절한 파지 포즈들 중에서 가장 좋은 것을 제안합니다. 서로 다른 재료들의 표면을 명확하게 보여주는 것은, 알고리즘의 핵심 구성 요소이기에 매우 중요합니다. IDS의 Ensenso 3D 카메라에게는 문제가 되지 않습니다: Ensenso 카메라는 더 높은 품질의 깊이 정보와 더 정확한 측정 결과를 얻기 위해 추가 기술을 통해 고전적인 스테레오 비전 원리를 개선합니다.
이 시스템은 열악한 조명 조건에서도, 미지의 소포를 강인하게 분할합니다.
카메라들
시스템마다 카메라들의 개수는 물론, 구체적인 카메라 모델들은 고객의 개별적인 사용 사례에 따라 결정됩니다. cobot을 포함하는 전형적인 빈 피킹 솔루션의 경우, 하나의 Ensenso N35는 GigE uEye CP와 결합하여 사용됩니다. 반면, 다른 빈들에 아이템을 집어넣기 위하여, 4 대의 Ensenso X35 카메라들과 함께 빈 픽킹을 위하여 GigE uEye CP와 하나의 Ensenso X36을 사용하는 고객사들도 있습니다.
권장되는 uEye CP는 "Compact Power"를 의미하며, 모든 종류의 산업용 어플리케이션들을 위한 초소형 파워하우스(powerhouse)입니다. 이것은 광범위한 픽셀 전처리를 통해 최대 기능성을 제공하며, 내부 120MB 이미지 메모리 덕분에 멀티-카메라 시스템에도 완벽하게 적합합니다. 이 카메라는 full GigE 속도로 데이터를 전송하고, PoE ("Power over Ethernet")를 통해 최대 100m까지 단일 케이블 동작을 가능하게 합니다.
선택된 UI-5240CP-C-HQ Rev. 2는 e2v 1.3 메가 픽셀 CMOS 센서가 장착된 특히나 강력한 산업용 카메라입니다. 이것은 IDS 제품 포트폴리오에서 가장 민감한 센서들 중 하나이며, 여기에서 사용되는 컬러 버전 이외에도 흑백 및 NIR 버전으로도 제공됩니다. 빛에 대한 뛰어난 감도에 더하여, 카메라는 요구 사항이나 주변 조건이 변경되면 센서를 극도로 유연하도록 하는 다양한 독특한 특징들을 갖습니다.
"Fizyr는 보통 Ensenso N35 및 X36과 결합된 uEye 카메라를 사용하며, 일반적으로 시스템 당 하나의 카메라를 사용하지만, 제한은 없습니다. 지금까지 Fizyr의 가장 일반적인 사용 사례는, 시스템 당 하나의 uEye 및 하나의 Ensenso입니다."라고 Fizyr의 CEO Herbert ten Have가 강조합니다.
사용될 수 있는 서로 다른 Ensenso 모델들에는 한 가지 공통점이 있습니다: 광 집약적인(light-intensive) 프로젝터를 배치하면, 어려운 조명 조건에서도 패턴 마스크를 사용함으로써 오브젝트 표면에 하이 콘트라스트 텍스처를 생성합니다. 투사된 텍스처는 약하거나 존재하지 않는 오브젝트 표면 구조를 보완합니다. 따라서 이 원리를 "투사된 텍스처 스테레오 비전(Projected Texture Stereo Vision)"이라고도 합니다. 그 결과 더 상세한 디스패리티 맵과 장면의 더 완전하고 균일한 깊이 정보가 생성됩니다.
Ensenso 3D 카메라 모델들은 그 폭넓은 기능으로 인하여, 3D 오브젝트 인식, 분류 및 위치 확인(예: 품질 보증, 시운전), 물류 자동화 (예: 팔레트에 올리기(내리기)), 로봇 어플리케이션(예: 빈 피킹), 최대 8m³의 오브젝트 캡처(예: 팔레트) 또는 자동 저장 시스템과 같은 공급망 및 물류 산업의 광범위하고 까다로운 어플리케이션들에서 사용될 자격을 갖추게 됩니다.
Fizyr는 최신의 빠른 래퍼를 사용하여 소프트웨어에 Ensenso SDK를 통합했습니다. 큰 장점은 2D/3D 조합으로, 이는 2D 카메라로부터의 이미지를 3D 포인트 클라우드 위에 오버레이로 배치하도록 할 수 있습니다.
이것은 장면의 더 생생한 인상을 제공합니다. 다른 한편으로, 카메라 이미지는 타겟-지향된 그립을 보장하도록 "손-눈 보정"을 통해 로봇 좌표계에 최적으로 조정될 수 있습니다.
전망
전자 상거래의 강력한 성장으로 대형 패키지에 대한 수요가 증가했습니다. 동시에, 전 세계적인 유행병으로 인한 통제들은 가용 노동력의 감소와 기업의 물리적 거리두기에 대한 긴급한 필요성을 초래하였습니다. 이러한 과제를 해결하기 위해, 기업은 인공 지능과 머신 비전이 중요한 역할을 하는 로봇 자동화로 점차 전환하고 있습니다. 동시에, 로봇 자동화는 비용을 줄이고 직업 안전을 증가시킵니다.
최첨단 자동화된 피킹 셀을 위한 고품질 모듈들에 대한 수요가 전 세계적으로 증가하고 있습니다. 소프트웨어 및 하드웨어 컴포넌트들에 대한 시스템 통합 업체들의 요구 사항도 함께 증가하고 있습니다. Fizyr-IDS 솔루션은 다음과 같은 이점들을 제공합니다:
- 플러그 앤 플레이 솔루션으로 어떠한 시스템들에도 손쉬운 통합이 가능합니다.
- 하드웨어 애그노스틱(hardware-agnostic)이므로, 고객들로 하여금 언제든지 오더 피킹 시스템을 자신들의 요구사항에 맞춰서 유연하게 조정할 수 있도록 합니다.
- 여기에는 항상 최적의 오브젝트 정보를 제공하는, 강인하고 정확하며 유연하고 사용하기 쉬운 3D 비전 시스템이 포함되어 있습니다.
그들 모두는 미래에 대비한 자동화된 "Good-To-Person" 시스템의 필수 구성 요소입니다.
Ensenso N 35: 빠르고 정확한 3D 비전
트리거 및 플래시를 위한 잠금 가능한 GPIO 커넥터와 GigE 커넥터가 구비된 Ensenso N35 3D 카메라의 작고 견고한 알루미늄 하우징에는 2개의 단색 CMOS 센서 (글로벌 셔터, 1280 x 1024 픽셀)와 프로젝터가 있습니다. PoE(Power over Ethernet)를 통해 긴 케이블 길이로 데이터 전송 및 전원 공급이 가능합니다. 통합된 FlexView 기술로 인해, N35 모델은 정지 오브젝트의 3D 획득 및 최대 3,000mm의 작동 거리에 특히 적합합니다.
모듈식 3D 카메라 시스템을 사용한 3D 비전
Ensenso X36 3D 카메라 시스템은 프로젝터 유닛, 1.3MP 또는 5MP 센서 (CMOS, 흑백) 중의 어느 하나가 장착된 GigE uEye 카메라 2대, 마운팅 브래킷 및 조정 각도, sync.는 물론 3개의 렌즈들, 카메라와 프로젝터 유닛을 연결하기 위한 패치 케이블들로 구성됩니다. FlexView2 기술은 어둡거나 반사하는 표면에 대한 시스템의 매우 높은 견인성은 물론 더 좋은 공간 해상도를 보장합니다.
고객사
Fizyr는 열악한 물류 환경에서 자동화된 피킹 및 플레이싱을 위한 세계 최고의 비전 소프트웨어 제품을 설계, 구축, 설치 및 유지합니다. 그들의 학습 알고리즘은, (운송된) 벌크로부터 피킹된, 모양, 크기, 색상, 재료 및 쌓임이 다양한 미지의 오브젝트를 자동으로 처리하는 데 사용됩니다. Fizyr의 제품은 온라인 소매, 창고 및 택배 서비스에서 시스템 통합 업체 및 최종 사용자를 선도하며, 전 세계 생산라인에 적용됩니다.
www.fizyr.com