• 제목/요약/키워드: eye-in-hand camera

검색결과 34건 처리시간 0.017초

목표물의 거리 및 특징점 불확실성 추정을 통한 매니퓰레이터의 영상기반 비주얼 서보잉 (Image-based Visual Servoing Through Range and Feature Point Uncertainty Estimation of a Target for a Manipulator)

  • 이상협;정성찬;홍영대;좌동경
    • 제어로봇시스템학회논문지
    • /
    • 제22권6호
    • /
    • pp.403-410
    • /
    • 2016
  • This paper proposes a robust image-based visual servoing scheme using a nonlinear observer for a monocular eye-in-hand manipulator. The proposed control method is divided into a range estimation phase and a target-tracking phase. In the range estimation phase, the range from the camera to the target is estimated under the non-moving target condition to solve the uncertainty of an interaction matrix. Then, in the target-tracking phase, the feature point uncertainty caused by the unknown motion of the target is estimated and feature point errors converge sufficiently near to zero through compensation for the feature point uncertainty.

Gesture Control Gaming for Motoric Post-Stroke Rehabilitation

  • Andi Bese Firdausiah Mansur
    • International Journal of Computer Science & Network Security
    • /
    • 제23권10호
    • /
    • pp.37-43
    • /
    • 2023
  • The hospital situation, timing, and patient restrictions have become obstacles to an optimum therapy session. The crowdedness of the hospital might lead to a tight schedule and a shorter period of therapy. This condition might strike a post-stroke patient in a dilemma where they need regular treatment to recover their nervous system. In this work, we propose an in-house and uncomplex serious game system that can be used for physical therapy. The Kinect camera is used to capture the depth image stream of a human skeleton. Afterwards, the user might use their hand gesture to control the game. Voice recognition is deployed to ease them with play. Users must complete the given challenge to obtain a more significant outcome from this therapy system. Subjects will use their upper limb and hands to capture the 3D objects with different speeds and positions. The more substantial challenge, speed, and location will be increased and random. Each delegated entity will raise the scores. Afterwards, the scores will be further evaluated to correlate with therapy progress. Users are delighted with the system and eager to use it as their daily exercise. The experimental studies show a comparison between score and difficulty that represent characteristics of user and game. Users tend to quickly adapt to easy and medium levels, while high level requires better focus and proper synchronization between hand and eye to capture the 3D objects. The statistical analysis with a confidence rate(α:0.05) of the usability test shows that the proposed gaming is accessible, even without specialized training. It is not only for therapy but also for fitness because it can be used for body exercise. The result of the experiment is very satisfying. Most users enjoy and familiarize themselves quickly. The evaluation study demonstrates user satisfaction and perception during testing. Future work of the proposed serious game might involve haptic devices to stimulate their physical sensation.

휠체어 장착형 지능형 재활 로봇을 위한 칼라 비전 시스템 (Color Vision System for Intelligent Rehabilitation Robot mounted on the Wheelchair)

  • 송원경;이희영;김종성;변증남
    • 전자공학회논문지S
    • /
    • 제35S권11호
    • /
    • pp.75-87
    • /
    • 1998
  • KARES(KAIST Rehabilitation Engineering System)는 보조자 없이 팔과 다리가 불편한 장애인과 노약자가 쉽게 이동하며 일상 생활을 하는 것을 돕기 위하여, 6 자유도의 로봇 팔과 휠체어에 장착한 형태의 재활 로봇 시스템이다. 재활 로봇 시스템에서 로봇 팔을 프로그램하고 제어할 수 있는 인터페이스 장치는 매우 중요하다. 특히 사용자가 로봇 팔을 직접 제어하는 경우, 사용자의 인지력의 부담이 심하고 조작의 어려움을 느낀다. 이에 대한 해결책으로 로봇이 자율적으로 작업을 수행하기 위한 칼라 비전 시스템을 제안하고 기본적으로 필요한 네 가지 작업을 정하였다. 로봇 팔에 아이-인-핸드 형태로 카메라를 장착하여 칼라 비전 시스템을 구축하고, 탁자 위에 있는 칼라 표식이 부착된 컵을 잡는 작업과 작은 컵을 입 근처로 이동하는 작업을 구현하였다. 그 결과, 실내 환경에서 실시간에 성공적으로 수행되었다.

  • PDF

영역기반 가중치 맵을 이용한 멀티스팩트럼 플래시 영상 획득 (Multi-spectral Flash Imaging using Region-based Weight Map)

  • 최봉석;김대철;이철희;하영호
    • 전자공학회논문지
    • /
    • 제50권9호
    • /
    • pp.127-135
    • /
    • 2013
  • 저조도 환경에서 카메라로 영상을 획득하기 위해 일반적으로 가시광 플래시를 사용하거나 장노출 기법을 사용하게 된다. 그러나 가시광 플래시를 사용할 때 플래시 광에 의한 색 왜곡이나 적목 현상, 눈부심에 의한 거부감을 발생시킨다. 또한 장노출을 사용하게 되면 물체의 움직임에 의한 흔들림 현상이 발생하게 된다. 따라서 최근에는 이러한 단점을 극복하고, 저조도 환경에서 고화질의 영상을 획득하기 위하여 멀티 스팩트럴 플래시(Multi-spectral flash image)를 이용하여 영상을 획득하는 방법이 소개되었다. 이 방법은 가시광과 UV/IR스펙트럼의 다섯 채널을 이용하여 가시광영상의 색 정보와 UV/IR 스팩트럼 영상의 세부정보를 최적화하여 영상을 획득하는 방법이다. 하지만, 픽셀 기반의 최적화 과정에 있어 색 왜곡과 다른 잡음을 발생시키게 된다. 따라서 본 논문에서는 이러한 색 왜곡과 잡음을 개선하기 위해 영역 기반의 가중치 맵을 최적화 방법에 적용하여 색 왜곡을 개선하는 알고리즘을 제안한다. 먼저, 영상에 대하여 Canny 에지 검출 방법을 사용하여 영상의 윤곽을 검출하였다. 이를 가중치 맵으로 최적화방법에 적용함으로, 세부 영역에 대하여 UV/IR 플래시 영상의 정보에 가중치를 부여하고, 평탄한 영역에 대하여 가시광 영상의 색 정보를 가중치를 부여하여 색 왜곡을 개선하였다. 제안한 방법을 평가하기 위하여 실험을 통하여 제안한 방법과 이전방법을 비교하였고, 객관적 평가와 주관적 평가 모두 제안한 방법이 우수한 성능을 나타내었다.