• 제목/요약/키워드: eye-in-hand camera

검색결과 34건 처리시간 0.028초

1 인칭 슈팅 게임에서 눈동자 시선 추적에 의한 3차원 화면 조정 (3D View Controlling by Using Eye Gaze Tracking in First Person Shooting Game)

  • 이의철;조용주;박강령
    • 한국멀티미디어학회논문지
    • /
    • 제8권10호
    • /
    • pp.1293-1305
    • /
    • 2005
  • 본 논문에서는 HMD(head mounted display) 하단에 눈동자의 움직임 영상을 취득할 수 있는 USB 카메라를 부착한 후, 3차원 1인칭 슈팅(first Person shooting) 게임에서 게임 캐릭터의 시선방향을 눈동자 움직임에 의해 조작하는 방법을 제안한다. 본 논문에서 제안하는 방법은 다음과 같이 세 부분으로 구성된다. 첫 번째는 입력 영상으로부터 눈동자의 중심 위치를 실시간 영상 처리 방법으로 추출하는 부분, 두 번째는 HMD 모니터상의 임의 지점을 쳐다볼 때 추출된 눈동자의 위치 정보와 모니터상의 응시 위치 사이의 기하학적인 연관관계를 결정하는 캘리브레이션 부분, 그리고 마지막은 캘리브레이션 정보를 기반으로 모니터 상의 최종적인 응시 위치를 결정하고, 이 정보에 의해 게임상의 3차원 뷰(view) 방향을 조정하는 부분으로 구성된다. 실험 결과, 본 논문의 방법에 의해 손이 불편한 사용자에게 게임을 즐길 수 있는 기회를 제공하고, 게임 캐릭터와 게임 사용자의 시선 방향을 일치시킴으로서 게임의 흥미와 몰입감을 증가시키는 결과를 얻을 수 있었다.

  • PDF

이미지 분석 방식을 적용한 인지 재활 시스템 (Rehabilitation System through Image Analysis Method)

  • 임명재;정희웅;권영만
    • 한국인터넷방송통신학회논문지
    • /
    • 제10권6호
    • /
    • pp.209-214
    • /
    • 2010
  • 본 논문은 이미지 분석 플랫폼(Open Eye)을 통하여서 치매노인 예방 또는 뇌졸중 환자 등을 위한 인지재활 시스템을 제안하고 한다. 본 방법은 카메라를 통하여서 사용자의 움직임에 따른 영상을 얻고 이를 OpenCV 영상처리 라이브러리를 기반으로 모션을 분석하여 이를 인지재활 시스템에 적용하였다. 제안하는 이미지 분석 시스템에서는 모션인지를 위해서 CAMshift 알고리즘을 적용하여 이미지 영역과 동작을 검출한다. 이를 통해 치매에 노출된 노인 또는 뇌졸중 환자들의 손동작 이미지를 검출하고, 검출된 이미지의 특징점을 추출한다. 추출된 결과 이미지를 다양하게 형상화하였으며, 지속적인 동작을 유도하여 운동성과 인지능력을 부여할 수 있는 게임형 인지 재활 시스템을 구현하였다.

자율적인 시각 센서 피드백 기능을 갖는 원격 로보트 시스템교환 제어 (Traded control of telerobot system with an autonomous visual sensor feedback)

  • 김주곤;차동혁;김승호
    • 제어로봇시스템학회:학술대회논문집
    • /
    • 제어로봇시스템학회 1996년도 한국자동제어학술회의논문집(국내학술편); 포항공과대학교, 포항; 24-26 Oct. 1996
    • /
    • pp.940-943
    • /
    • 1996
  • In teleoperating, as seeing the monitor screen obtained from a camera instituted in the working environment, human operator generally controls the slave arm. Because we can see only 2-D image in a monitor, human operator does not know the depth information and can not work with high accuracy. In this paper, we proposed a traded control method using an visual sensor for the purpose of solving this problem. We can control a teleoperation system with precision when we use the proposed algorithm. Not only a human operator command but also an autonomous visual sensor feedback command is given to a slave arm for the purpose of coincidence current image features and target image features. When the slave arm place in a distant place from the target position, human operator can know very well the difference between the desired image features and the current image features, but calculated visual sensor command have big errors. And when the slave arm is near the target position, the state of affairs is changed conversely. With this visual sensor feedback, human does not need coincide the detail difference between the desired image features and the current image features and proposed method can work with higher accuracy than other method without, sensor feedback. The effectiveness of the proposed control method is verified through series of experiments.

  • PDF

로봇 메니퓰레이터의 동력학 시각서보 (Dynamic Visual Servoing of Robot Manipulators)

  • 백승민;임경수;한웅기;국태용
    • 대한전기학회논문지:시스템및제어부문D
    • /
    • 제49권1호
    • /
    • pp.41-47
    • /
    • 2000
  • A better tracking performance can be achieved, if visual sensors such as CCD cameras are used in controling a robot manipulator, than when only relative sensors such as encoders are used. However, for precise visual servoing of a robot manipulator, an expensive vision system which has fast sampling rate must be used. Moreover, even if a fast vision system is implemented for visual servoing, one cannot get a reliable performance without use of robust and stable inner joint servo-loop. In this paper, we propose a dynamic control scheme for robot manipulators with eye-in-hand camera configuration, where a dynamic learning controller is designed to improve the tracking performance of robotic system. The proposed control scheme is implemented for tasks of tracking moving objects and shown to be robust to parameter uncertainty, disturbances, low sampling rate, etc.

  • PDF

학대뇌손상 영아에서 스마트폰으로 촬영한 안저소견 (Smartphone Fundus Photography in an Infant with Abusive Head Trauma)

  • 김용현;최신영;이지숙;윤수한;정승아
    • 대한안과학회지
    • /
    • 제58권11호
    • /
    • pp.1313-1316
    • /
    • 2017
  • 목적: 학대뇌손상 영아에서 스마트폰으로 촬영한 안저소견을 보고하고자 한다. 증례요약: 생후 8개월 남아가 소파에서 떨어진 후 지속적인 발작과 의식저하를 보여 응급실로 내원하였다. 표면적인 외상이나 두개골과 긴뼈에서 골절소견은 관찰되지 않았지만, 뇌 전산화단층촬영에서 광범위한 우측 경막하출혈과 혈종, 심한 뇌부종으로 우측 뇌실과 뇌바닥수조가 소실되고 정중선이 좌측으로 치우쳐져 있었다. 두개내압을 감소시키기 위해서 즉시 머리뼈절제술을 시행하였다. 응급수술 직후 시행한 안저검사에서 망막의 여러 층에 걸친 광범위한 다발성 출혈이 양안에서 관찰되었고, 융기되어 있는 망막주름 주변에 체리모양 망막출혈이 있었다. 환아 눈에서부터 5 cm 높이에 20디옵터렌즈를, 15-20 cm 높이에 스마트폰을 두고 동영상촬영방식으로 안저를 촬영하였다. 촬영된 안저소견은 유리체망막 부착이 강한 영아에서 반복적인 가속-감속력이 안구에 가해지면 발생하는 전형적인 소견이어서, 진단과 가해자의 진술을 받는 데 중요한 역할을 하였다. 결론: 학대뇌손상 진단에서 안저검사는 매우 중요하다. 특별한 장비 없이도 시행할 수 있는 스마트폰 안저촬영이 하나의 중요한 법의학적 단서로 사용될 수 있었다.

Automatic Registration of Two Parts using Robot with Multiple 3D Sensor Systems

  • Ha, Jong-Eun
    • Journal of Electrical Engineering and Technology
    • /
    • 제10권4호
    • /
    • pp.1830-1835
    • /
    • 2015
  • In this paper, we propose an algorithm for the automatic registration of two rigid parts using multiple 3D sensor systems on a robot. Four sets of structured laser stripe system consisted of a camera and a visible laser stripe is used for the acquisition of 3D information. Detailed procedures including extrinsic calibration among four 3D sensor systems and hand/eye calibration of 3D sensing system on robot arm are presented. We find a best pose using search-based pose estimation algorithm where cost function is proposed by reflecting geometric constraints between sensor systems and target objects. A pose with minimum gap and height difference is found by greedy search. Experimental result using demo system shows the robustness and feasibility of the proposed algorithm.

외란 관측기를 이용한 새로운 시각구동 방법 (A Novel Visual Servoing Method involving Disturbance Observer)

  • 이준수;서일홍
    • 대한전기학회논문지:전력기술부문A
    • /
    • 제48권3호
    • /
    • pp.294-303
    • /
    • 1999
  • To improve the visual servoing performance, several strategies were proposed in the past such as redundant feature points, using a point with different height and weighted selection of image features. The performance of these visual servoing methods depends on the configuration between the camera and object. And redundant feature points require much computation efforts. This paper proposes the visual servoing method based on the disturbance obsever, which compensates the upper off-diagonal component of image feature jacobian to be the null. The performance indices such as sensitivity for a measure of richness, sensitivity of the control to noise, and comtrollability are shown to be improved when the image feature Jacobian is given as a block diagonal matrix. Computer simulations are carried out for a UUMA560 robot and show some results to verify the effectiveness of the proposed method.

  • PDF

눈동자 시선 추적에 의한 3차원 1인칭 슈팅 게임 (3D First Person Shooting Game by Using Eye Gaze Tracking)

  • 이의철;박강령
    • 정보처리학회논문지B
    • /
    • 제12B권4호
    • /
    • pp.465-472
    • /
    • 2005
  • 본 논문에서는 HMD(Head Mounted Display) 하단에 눈동자의 움직임 영상을 취득할 수 있는 USB 카메라를 부착한 후, 3차원 1인칭 슈팅(First Person Shooting) 게임에서 게임 캐릭터의 시선방향을 눈동자 움직임에 의해 조작하는 방법을 제안한다. 본 논문에서 제안하는 방법은 다음과 같은 3부분으로 이루어져 있다. 첫 번째는 입력 영상으로부터 눈동자의 중심 위치를 실시간 영상 처리 방법으로 추출하는 부분, 두번째는 HMD 모니터상의 임의 지점을 쳐다볼 때 추출된 눈동자의 위치 정보와 모니터상의 응시 지점사이의 기하학적인 연관관계를 결정하는 캘리브레이션 부분, 그리고 마지막은 캘리브레이션 정보를 기반으로 모니터 상의 최종적인 응시 위치를 결정하고 이 정보에 의해 게임상의 3차원 뷰 방향을 조정하는 부분으로 구성되어 있다. 실험 결과 본 논문의 방법에 의해 손이 불편한 사용자에게 게임을 즐길 수 있는 기회를 제공하고, 게임 캐릭터와 게임 사용자의 시선 방향을 일치시킴으로서 게임의 흥미와 몰입감을 증가시킬 수 있는 결과를 얻음을 알 수 있었다.

장소와 공간의 재현적 관점에서 본 드론 쇼트와 핸드헬드 쇼트의 영상 미학 : <세계테마기행> '유카탄 반도'편을 중심으로 (The Visual Aesthetics of Drone Shot and Hand-held Shot based on the Representation of Place and Space : focusing on World Travel' Peninsula de Yucatán' Episode)

  • 류재형
    • 한국엔터테인먼트산업학회논문지
    • /
    • 제14권3호
    • /
    • pp.251-265
    • /
    • 2020
  • 이 연구는 드론 쇼트(Drone Shot)와 핸드헬드 쇼트(Hand-held Shot)라는 두 촬영기법의 미학적 기능을 비교, 분석하는 데에 그 목적이 있다. 연구를 위해 세르토(Certeau)의 장소와 공간의 개념을 이해하였다. 두 촬영기법의 미학적 기능을 비교, 분석할 텍스트로서 <세계테마기행> '유카탄 반도'편을 선정하고 그들의 미학적 특성이 잘 드러나는 장면들을 중심으로 장소와 공간의 개념을 적용, 분석하였다. 분석 결과, 드론 쇼트는 자기반영성이 제거된 고요한 움직임으로 도시를 내려다보면서 지역의 전반적인 분위기와 정보를 제공하는 권위적인 시점을 취하였으며, 이러한 기능은 그 지역의 고유한 규칙 및 질서 등에 대한 선지식을 전달하는 내레이션이나 자막 등을 통해 강화되었다. 반대로 핸드헬드 쇼트는 도시에 내재된 규칙과 질서 등에 얽매이지 않고 자유보행을 통해 공간을 실천적으로 경험하였다. 관람 코스로 굳어진 주요 명소보다 소도시와 시골의 일상에 관심을 기울이면서 인간적인 보행을 실천한다는 점에서 권력 주체의 전략에 저항하는 전술을 담아내었다.

ERGONOMIC ANALYSIS OF A TELEMANIPULATION TECHNIQUE FOR A PYROPROCESS DEMONSTRATION FACILITY

  • Yu, Seungnam;Lee, Jongkwang;Park, Byungsuk;Kim, Kiho;Cho, Ilje
    • Nuclear Engineering and Technology
    • /
    • 제46권4호
    • /
    • pp.489-500
    • /
    • 2014
  • In this study, remote handling strategies for a large-scale argon cell facility were considered. The suggested strategies were evaluated by several types of field test. The teleoperation tasks were performed using a developed remote handling system, which enabled traveling over entire cell area using a bridge transport system. Each arm of the system had six DOFs (degrees of freedom), and the bridge transport system had four DOFs. However, despite the dexterous manipulators and redundant monitoring system, many operators, including professionals, experienced difficulties in operating the remote handling system. This was because of the lack of a strategy for handling the installed camera system, and the difficulty in recognizing the gripper pose, which might fall outside the FOV (field of vision) of the system during teleoperation. Hence, in this paper, several considerations for the remote handling tasks performed in the target facility were discussed, and the tasks were analyzed based on ergonomic factors such as the workload. Toward the development of a successful operation strategy, several ergonomic issues, such as active/passive view of the remote handling system, eye/hand alignment, and FOV were considered. Furthermore, using the method for classifying remote handling tasks, several unit tasks were defined and evaluated.