DOI QR코드

DOI QR Code

Sensor Fusion Docking System of Drone and Ground Vehicles Using Image Object Detection

영상 객체 검출을 이용한 드론과 지상로봇의 센서 융합 도킹 시스템

  • 백종환 (한경대학교 전기전자제어공학과) ;
  • 박희수 (한경대학교 정보제어공학과) ;
  • 오세령 (한경대학교 정보제어공학과) ;
  • 신지훈 (한경대학교 정보제어공학과) ;
  • 김상훈 (한경대학교 전기전자제어공학과)
  • Received : 2016.12.15
  • Accepted : 2016.12.29
  • Published : 2017.04.30

Abstract

Recent studies for working robot in dangerous places have been carried out on large unmanned ground vehicles or 4-legged robots with the advantage of long working time, but it is difficult to apply in practical dangerous fields which require the real-time system with high locomotion and capability of delicate working. This research shows the collaborated docking system of drone and ground vehicles which combines image processing algorithm and laser sensors for effective detection of docking markers, and is finally capable of moving a long distance and doing very delicate works. We proposed the docking system of drone and ground vehicles with sensor fusion which also suggests two template matching methods appropriate for this application. The system showed 95% docking success rate in 50 docking attempts.

본 연구에서는 사람을 대신하여 험난한 지형에서 위험작업을 수행이 가능한 지상로봇과 짧은 시간 안에 원거리 비행이 가능한 드론과의 결합을 통해 위험 상황에서의 효과적인 협업이 가능한 시스템을 구현하였다. 최근 관련 연구는 드론을 수용할 수 있는 무인지상차량이나 4족 로봇에 관한 연구가 있었으나 전체 가용 시간의 장점에 비해 대규모 로봇을 필요로 하여 현장에서 적용하기엔 어려움이 있었다. 본 논문에서는 경량 드론에 장착된 임베디드 웹캠과 영상처리 알고리즘을 사용하여 객체의 한 유형인 마커를 Canny Edge 알고리즘 및 특정한 Template matching 방법을 통하여 비행 중 실시간 검출한 결과를 보여주며, 지상로봇위에 표시된 마커의 2차원적 위치 정보 획득과 레이저 센서를 이용한 상대거리 확보를 융합하여 지상로봇과 드론간의 도킹을 구현하는 시스템을 제안하였다. 실험을 통하여 제안된 시스템은 50회의 도킹 시도에서 95%의 도킹 성공률을 보였으며 6가지의 Template mateching 방법 중 시스템에 적용할 수 있는 2가지의 템플릿 매치 방법을 제시하였다.

Keywords

References

  1. Oka Danil Saputra and Soo Young Shin, "Modeling and Roll, Pitch and Yaw Simulation of a Quadrotor," Korea Institute of Communication Sciences, pp.21-21, 2013.
  2. Beck Jong-Hwan, Pak Myeong-Suk, and Kim Sang-Hoon, "Design of Non-linear Controller for Walking Drone," Korea Information Processing Society Spring Conference 2016, Vol.23, No.1, pp.851-853, 2016.
  3. J. M. Maddox, J. R. Sayer, and A. Weimerskirch, "Vehicle Interface Docking System For Dsrc-Equipped User Devices In A Vehicle," U.S. Patent, The Regents of the University of Michigan, 20,160,105,539. 2016.
  4. R.K.L. Fong and R.A. Baten, "Systems And Methods For A Turbine Trailer Mechanical Docking And Alignment System," U.S. Patent, General Electric Company, 20,160,075,387. 2016.
  5. Sang-Jin Yi and Jae-Bok Song, "Unmanned Forklift Docking Using Two Cameras," Journal of Institute of Control, Robotics and Systems, Vol.21, No.10, pp.930-935, 2015. https://doi.org/10.5302/J.ICROS.2015.15.0115
  6. Beck Jong-Hwan, Park Myeong-Sook, Jeon Jin-Seong, and Kim Sang-Hoon, "Design of Walking Drone for Surveillance," World IT Congress 2016 JEJU, WorldIT-27. 2016.
  7. Song Bong Sub, Myeong-Jun Kim, Jiwook Jeong, and Issac Rhee, "Development of the Disaster Assistance Driving Platform," Korean Institute of Information Scientists and Engineers Winter Conference 2016, pp.36-38, 2016.
  8. J. Canny, "A Computational Approach to Edge Detection," IEEE Trans. Pattern Analysis and Machine Intelligence, Vol. 8, pp.679-698, 1986.
  9. Gary Bradski, 2008. Learning OpenCV: Computer Vision with the OpenCV Library, O'REILLY, pp. 214-219.
  10. Kim Sin Jung and Jeong Jin Yong, "Recognition of Objects and Automated Driving Using Template matching," The Journal of the Korean Institute of Communication Sciences, pp.293-294, 2015.
  11. M. Adamski, W. Lorenc, and J. Cwiklak, "Vertical take off reconnaissance unmanned air vehicle," Navigation and Control Conference (CGNCC), IEEE Chinese, pp.986-990, 2014.
  12. Yoon-Sick Kim and Dae-Hee Hong, "Localization Algorithm using Laser Scanner in indoor Parking Lot with a Map," Korean Society for Precision Engineering Spring Conference 2016, pp.143-144, 2016.