• 제목/요약/키워드: Vision sensor

검색결과 833건 처리시간 0.022초

사전 정보가 없는 배송지에서 장애물 탐지 및 배송 드론의 안전 착륙 지점 선정 기법 (Obstacle Detection and Safe Landing Site Selection for Delivery Drones at Delivery Destinations without Prior Information)

  • 서민철;한상익
    • 자동차안전학회지
    • /
    • 제16권2호
    • /
    • pp.20-26
    • /
    • 2024
  • The delivery using drones has been attracting attention because it can innovatively reduce the delivery time from the time of order to completion of delivery compared to the current delivery system, and there have been pilot projects conducted for safe drone delivery. However, the current drone delivery system has the disadvantage of limiting the operational efficiency offered by fully autonomous delivery drones in that drones mainly deliver goods to pre-set landing sites or delivery bases, and the final delivery is still made by humans. In this paper, to overcome these limitations, we propose obstacle detection and landing site selection algorithm based on a vision sensor that enables safe drone landing at the delivery location of the product orderer, and experimentally prove the possibility of station-to-door delivery. The proposed algorithm forms a 3D map of point cloud based on simultaneous localization and mapping (SLAM) technology and presents a grid segmentation technique, allowing drones to stably find a landing site even in places without prior information. We aims to verify the performance of the proposed algorithm through streaming data received from the drone.

지능형 굴삭 로봇의 개발을 위한 로컬영역 3차원 모델링 센서 선정 및 현장 적용성 분석에 관한 연구 (A Study on the Selection and Applicability Analysis of 3D Terrain Modeling Sensor for Intelligent Excavation Robot)

  • 유현석;권순욱;김영석
    • 대한토목학회논문집
    • /
    • 제33권6호
    • /
    • pp.2551-2562
    • /
    • 2013
  • 2006년부터 국내에서는 운전자의 개입 없이 완전 자동화 방식으로 동작하는 지능형 굴삭 로봇을 개발하고 있다. 이러한 굴삭 로봇을 개발함에 있어 주변(로컬영역) 작업환경의 지형이나 이동 경로상의 장애물, 굴삭기에 접근하는 상차트럭 등의 객체를 정확하게 탐지하는 기술은 작업품질과 안전성 확보 측면에서 필수적으로 요구되는 핵심기술이다. 선진 외국에서는 토공 자동화 장비의 로컬영역 3차원 모델링을 위하여 광대역 3D 레이저 스캐너나 스테레오 비전 카메라와 같은 센서를 사용하여 주변 지형을 3차원으로 모델링하는 연구를 수행하였으나, 센싱 시스템 구축에 지나치게 높은 비용이 소요되거나 모델링 결과에 노이즈가 다수 발생하여 모델링 속도가 과다하게 소요되는 문제점이 있었다. 이 연구에서는 지능형 굴삭 로봇의 로컬영역 3차원 모델링을 위하여 현재까지 개발된 3차원 작업환경 모델링 센서의 기술 사양과 장단점을 분석하고, AHP 분석을 통하여 센서별 적용가능성을 분석한다. 또한 실제 토공사 작업현장의 현장실험을 통해 해당 센서의 3차원 모델링 품질과 정확성을 분석하고 지능형 굴삭 로봇의 로컬영역 3차원 모델링에 가장 적합한 센서 선정 및 현장 적용성을 검증하고자 한다.

일정간격의 두 능동마커를 이용한 저가형 단안 PSD 모션캡쳐 시스템 개발 (Development of a Low-cost Monocular PSD Motion Capture System with Two Active Markers at Fixed Distance)

  • 서평원;김유건;한창호;유영기;오춘석
    • 전자공학회논문지SC
    • /
    • 제46권2호
    • /
    • pp.61-71
    • /
    • 2009
  • 본 논문에서는 가정용 게임에 적용 가능한 저가이면서 컴팩트한 모션캡쳐 시스템을 목표로 하고 있다. 현재 영화나 게임에 이용되는 모션캡쳐 시스템은 장비가 크고 상당히 고가이기 때문에 간단한 가정용 게임에는 적용하기 어렵다. 요즘 흔히 사용되는 USB CCD카메라를 이용한 모션캡쳐 게임은 속도가 느리고 2차원 인식만 하는 단점을 가지고 있다. 하지만 최근 연구에서 저가이면서 속도가 빠른 PSD센서를 이용하여 3차원 측정이 가능한 시스템을 구현할 수 있게 되었다. 2차원 측정이 가능한 PSD센서를 이용한 3차원 모션캡쳐 시스템에는 2개 이상의 PSD를 사용하는 스테레오 비전 기반의 PSD 모션캡쳐 시스템과 빛의 세기와 거리와의 관계를 이용하여 하나의 PSD만으로도 3차원 측정이 가능한 광량보정 기반의 단일 PSD 모션캡쳐 시스템 등이 소개되었다. 하지만 현재 개발된 두 시스템을 가정용 게임에 적용하기에는 다음과 같은 문제가 있다. 두 개 이상의 PSD 센서를 사용해야 하기 때문에 고가이고 복잡하다. 광량보정 기반의 단일 PSD 모션캡쳐 시스템의 경우에는 측정된 마커의 광량을 이용하여 거리를 계산하기 하기 때문에 거리측정을 위해 전방향으로 균일한 광량을 가지는 마커를 만들어야 하므로 매우 어렵다. 따라서 본 논문에서는 이러한 문제를 해결한 새로운 접근방법을 소개하고자 한다. 일정한 거리에 떨어져 있는 두 개의 마커가 광학적 특성만 동일하다면 두 마커 사이의 상대적 광량차이를 이용하여 3차원 측정을 할 수 있다는 것이다. 결과적으로 저가이며, 빠르고, 컴팩트하고, 광각이며, 게임에도 적용가능한 단일 PSD 모션 캡쳐 시스템을 개발했다. 이 개발된 시스템이 애니메이션이나 영화, 게임에도 사용되어질 것으로 기대한다.

복수 PSD와 비콘을 이용한 칼만필터 기반 상대항법에 대한 연구 (Relative Navigation Study Using Multiple PSD Sensor and Beacon Module Based on Kalman Filter)

  • 송정규;정준호;양승원;김승균;석진영
    • 한국항공우주학회지
    • /
    • 제46권3호
    • /
    • pp.219-229
    • /
    • 2018
  • 본 논문에서는 복수 Position Sensitive Detector(PSD) 센서와 IR Beacon Module(적외선 비콘 모듈)을 이용하여 우주비행체의 랑데부/도킹/군집 운용과 같은 근접 운용을 위한 칼만 필터 기반의 상대항법 알고리즘 연구를 수행한다. PSD 센서와 적외선 비콘 모듈은 각각 Target Satellite과 Chaser Satellite에 장착되어 위성의 상대 위치와 상대 자세 정보를 획득하여 위성간 근접운용에 사용한다. 각각의 상대 항법 기법의 성능을 비교 분석하기 위하여 수치 시뮬레이션을 수행한다. 상대항법 알고리즘에 사용된 PSD 센서와 적외선 비콘 모듈의 광학적 모델링과 작동 원리를 기반으로 칼만필터의 측정 모델을 구성한다. 확장 칼만 필터(EKF)와 무향 칼만 필터(UKF)는 우주비행체의 병진 운동 및 회전 운동에 대한 운동학 및 동역학적 특성을 활용하는 측정 융합에 기반을 둔 확률론적 상대항법 기법으로 사용된다. EKF와 UKF, 두 필터의 상대 자세 및 상대 위치 추정 성능을 비교한다. Target Satellite과 Chaser Satellite에 장착되는 PSD 센서와 적외선 비콘 모듈의 개수와 상대항법기법의 변화에 따른 수치 시뮬레이션을 수행하여 성능 변화를 확인하였다.

영역카메라를 이용한 이송중인 제재목의 화상처리시스템 개발 (The Development of Image Processing System Using Area Camera for Feeding Lumber)

  • 김병남;이형우;김광모
    • Journal of the Korean Wood Science and Technology
    • /
    • 제37권1호
    • /
    • pp.37-47
    • /
    • 2009
  • 최근 목재산업계에서는 사람의 시각을 대체하는 기계시각을 이용한 화상처리시스템을 도입하여 제재목 등급 판정의 자동화, 제품의 품질향상 및 재단 최적화 등에 활용하고 있다. 본 연구에서는 국내산 소나무 제재목을 대상으로 표면결함검출을 위한 화상처리시스템을 개발하고자 하였으며, 주로 이용되고 있는 라인스캔카메라를 대신하여 비교적 저가의 영역카메라를 이용하였을 때 발생되는 문제점을 해결하고자 하였다. 벨트컨베이어의 불균일한 이송속도에 따른 문제점을 해결하기 위해 화상의 특징점을 이용한 결과 효과적인 화상병합을 할 수 있었다. 일반적인 영역카메라는 송재속도 15.7 m/min 이상에서는 모션블러에 의한 화상의 품질저하로 인하여 화상처리가 어려웠고 화상처리에 적합한 송재속도는 13.8 m/min였으며 추후 송재속도를 향상시키기 위해서는 전자셔터 속도가 빠른 카메라의 사용이 요구되었다. 녹색 컨베이어벨트상의 제재목 화상의 배경과의 분리를 위해서는 RGB필터의 red 채널을 이용하면 효과적이었다. 옹이검출을 위한 문턱값 판정법은 화상분석형인 문턱값 감소법이 우수하였으며 히스토그램분석형 중에서는 엔트로피법이 적합하였다.

마이크로 BGA 패키지의 볼 형상 시각검사를 위한 모아레 간섭계 기반 3차원 머신 비젼 시스템 (Three-dimensional Machine Vision System based on moire Interferometry for the Ball Shape Inspection of Micro BGA Packages)

  • 김민영
    • 마이크로전자및패키징학회지
    • /
    • 제19권1호
    • /
    • pp.81-87
    • /
    • 2012
  • 본 논문에서는 마이크로 BGA 패키지 내외부의 마이크로 볼의 3차원 형상을 측정하는 광학 측정 시스템을 제안하고 이를 구현한다. 대부분의 시각 검사 시스템은 마이크로 볼의 복잡한 반사 특성 때문에 검사에 어려움을 겪고 있다. 정확한 형상의 측정을 위해서, 특별히 설계된 시각 센서 시스템을 제안하고, 위상이송 모아레 간섭계의 측정원리에 기반한 형상측정 알고리즘을 제안한다. 센서 시스템은 4개의 서브시스템을 보유한 패턴 투사 시스템과 영상획득 시스템으로 구성된다. 패턴 투사용 서브시스템은 공간상으로 서로 상이한 투사 방향을 가지며, 이는 측정 물체에 각기 다른 입사 방향을 가지는 패턴 조명이 투사될 수 있도록 하는 것을 목적으로 한다. 위상이송 모아레 간섭계의 구현을 위한 정밀 위상이송을 위해서, 각 서브시스템의 패턴 격자는 PZT 구동기를 이용하여 일정 간격으로 이송한다. 최종적으로 측정되는 마이크로 볼의 경면반사와 그림자 영역을 효과적으로 제거하기 위해서, 다중 패턴 투사 시스템과 영상획득 시스템을 구현하고, 이를 테스트한다. 특히, 다중 프로젝션을 이용하여 획득되는 다중 높이 정보를 효과적으로 융합하기 위하여, 베이지안 센서 융합 이론을 기반으로한 센서 융합 알고리즘이 제안된다. 제안되는 시스템의 원리검증과 성능확인을 위해, 마이크로 BGA볼과 기판 범프의 측정대상물에 대해서, 측정 반복성을 중심으로 실험이 수행되었으며, 획득된 실험 결과를 분석하고 논의한다.

ICT 기반 이중 적외선 센서를 이용한 꿀벌 출입 자동 모니터링 시스템 (Automatic Bee-Counting System with Dual Infrared Sensor based on ICT)

  • 손재덕;임수호;김동인;한기윤;;;권형욱
    • 한국양봉학회지
    • /
    • 제34권1호
    • /
    • pp.47-55
    • /
    • 2019
  • 다양한 농업 생산 분야에서 정보통신기술 (ICT, Information and Communications Technologies)이 융합하여 많은 발전을 이루어내고 있다. 꿀벌의 활동과 관련한 온·습도, 음파, 이산화탄소, 암모니아, 황화수소 등 다양한 봉군내·외의 요인들과 꿀벌의 활동 추적에 대한 ICT 융복합 시스템 개발연구가 최근 이슈화되고 있다. 본 연구에서는 이중 적외선 센서(QRE1113)를 이용하여 꿀벌 출입 자동 모니터링 시스템을 구현하여 실측 자료를 비교·분석하였다. 꿀벌의 방화행동을 연구하는 기존의 밀원식물 방화 개체 수 측정, 영상촬영을 통한 출입 활동 수 수동 분석, 해외 다양한 자동모니터링 시스템들과 비교하여 본 시스템은 모니터링 시간과 노력의 단축 및 외부 방화 활동과의 일치성, 수동 분석과 상대 오차 5% 미만으로 높은 실효성을 보였다. 또한, 저전력블루투스(BLE)모듈을 활용한 내·외부 온도 센서와 병행을 통해 시스템의 확장성을 확보하였으며, 이 시스템으로부터 확보한 한달간의 데이터 분석을 통해 온도와 방화행동 간 상관관계 분석 및 하루 평균 손실되는 꿀벌의 개체수(출역봉의 1.88%)를 측정할 수 있었다. 향후 복합적인 모니터링 시스템 확장과 빅데이터 축적을 통해 더욱 강력한 실시간 모니터링 도구 및 꿀벌 생태 교육자료로 양봉 산업 발전에 크게 기여할 수 있고, 과학적 분석 도구로 활용될 것이다.

GPS 취약 환경에서 전술급 무인항공기의 주/야간 영상정보를 기반으로 한 실시간 비행체 위치 보정 시스템 개발 (Development of Real-Time Vision Aided Navigation Using EO/IR Image Information of Tactical Unmanned Aerial System in GPS Denied Environment)

  • 최승기;조신제;강승모;이길태;이원근;정길순
    • 한국항공우주학회지
    • /
    • 제48권6호
    • /
    • pp.401-410
    • /
    • 2020
  • 본 연구에서는 전술급 무인항공기의 GPS 신호간섭 및 재밍(Jamming)/기만(Spoofing) 공격 시 위치항법 정보의 취약성을 보완하기 위해 개발한 영상정보 기반 실시간 비행체 위치보정 시스템을 기술하고자 한다. 전술급 무인항공기는 GPS 두절 시 항법장비가 GPS/INS 통합항법에서 DR/AHRS 모드로 전환하여 자동비행이 가능하나, 위치 항법의 경우 대기속도 및 방위각을 활용한 추측항법(DR, Dead Reckoning)으로 인해 시간이 지나면 오차가 누적되어 비행체 위치 파악 및 데이터링크 안테나 자동추적이 제한되는 등의 문제점을 갖고 있다. 이러한 위치 오차의 누적을 최소화하기 위해 영상감지기를 이용한 특정지역 위치보정점을 바탕으로 비행체 자세, 영상감지기 방위각/고각 및 수치지도 데이터(DTED)를 활용하여 비행체 위치를 계산하고 이를 실시간으로 항법장비에 보정하는 시스템을 개발하였다. 또한 GPS 시뮬레이터를 이용한 지상시험과 추측항법 모드의 비행시험으로 영상정보 기반 실시간 비행체 위치보정 시스템의 기능 및 성능을 검증하였다.

능동 윤곽 기법을 적용한 단일 영상 기반 인공위성 상대항법 (Mono-Vision Based Satellite Relative Navigation Using Active Contour Method)

  • 김상현;최한림;심현철
    • 한국항공우주학회지
    • /
    • 제43권10호
    • /
    • pp.902-909
    • /
    • 2015
  • 본 논문에서는 인공위성 근접운용을 위한 단일 영상 기반 상대항법에 대한 연구를 수행하였다. 추적 위성은 하나의 카메라 센서만을 이용하여 표적 위성을 관측하고 영상추적을 통해 표적 위성의 위치 정보를 얻게 된다. 그러나 단일 영상만을 이용할 경우, 표적과의 상대 거리에 해당하는 깊이 정보를 얻기 힘들다. 이러한 문제를 해결하기 위해 능동 윤곽 기법을 영상 추적에 적용하였다. 능동 윤곽 기법을 통해 표적의 이미지 크기를 얻을 수 있고 이러한 형상 정보를 바탕으로 상대 거리를 간접적으로 계산할 수 있다. 두 인공 위성이 상대 운동을 하는 우주환경을 구현하고 가상의 카메라 영상을 생성하기 위해 3차원 가상현실이 이용되었다. 추적 위성은 UKF를 이용하여 표적 위성에 대한 상대위치를 추정하면서 글라이드슬로프 접근 기법을 이용하여 표적 위성에 근접한다. 상대항법의 성능을 분석하기 위해서 폐 루프 시뮬레이션을 수행하였다.

RGB-D 환경인식 시각 지능, 목표 사물 경로 탐색 및 심층 강화학습에 기반한 사람형 로봇손의 목표 사물 파지 (Grasping a Target Object in Clutter with an Anthropomorphic Robot Hand via RGB-D Vision Intelligence, Target Path Planning and Deep Reinforcement Learning)

  • 류가현;오지헌;정진균;정환석;이진혁;;김태성
    • 정보처리학회논문지:소프트웨어 및 데이터공학
    • /
    • 제11권9호
    • /
    • pp.363-370
    • /
    • 2022
  • 다중 사물 환경에서 목표 사물만의 정밀한 파지를 위해서는 장애물과의 충돌 회피 지능과 정교한 파지 지능이 필요하다. 이 작업을 위해선 다중 사물 환경 인지, 목표 사물 인식, 경로 설정, 로봇손의 사물 파지 지능이 필요하다. 본 연구에서는 RGB-D 영상 센서를 이용하여 다중 사물 환경과 사물을 인지하고 3D 공간을 매핑한 후, 충돌 회피 경로 탐색 알고리즘을 활용하여 목표 사물까지의 경로를 탐색 및 설정하고, 강화학습을 통해 학습된 사람형 로봇손의 목표 사물 파지 지능을 활용해 최종적으로 시뮬레이션 및 하드웨어 사물 파지 시스템을 구현하고 검증하였다. 사람형 로봇손을 구현한 시뮬레이션 환경에서 5개의 사물 중 목표 사물을 지정하고 파지한 결과 경로 탐색 없는 파지 시스템이 평균 78.8%의 성공률과 34%의 충돌률을 보일 때, 경로 탐색 지능과 결합된 시스템은 평균 94%의 성공률과 평균 20%의 충돌률을 보였다. UR3와 QB-Soft Hand를 사용한 하드웨어 환경에서는 3개의 사물 중 목표 사물을 지정하고 파지한 결과 경로 탐색 없는 파지 시스템이 평균 30%의 성공률과 97%의 충돌률을 보일 때, 경로 탐색 지능과 결합된 시스템은 평균 90%의 성공률과 평균 23%의 충돌률을 보였다. 본 연구에서는 RGB-D 시각 지능, 충돌 회피 경로 탐색, 사물 파지 심층 강화학습 지능의 결합을 통하여, 사람형 로봇손의 목표 사물 파지가 가능함을 제시하였다.