• 제목/요약/키워드: Q-방법

검색결과 1,651건 처리시간 0.029초

강화학습 Q-learning 기반 복수 행위 학습 램프 로봇 (Multi Behavior Learning of Lamp Robot based on Q-learning)

  • 권기현;이형봉
    • 디지털콘텐츠학회 논문지
    • /
    • 제19권1호
    • /
    • pp.35-41
    • /
    • 2018
  • 강화학습기반 Q-learning 알고리즘은 이산적인 상태와 액션의 조합을 사용하여, 한 번에 하나의 행위에 대한 목표를 학습하는데 유용하다. 여러 액션을 학습하기 위해서는 행위 기반 아키텍처를 적용하고 적절한 행위 조절 방법을 사용하면 로봇으로 하여금 빠르고 신뢰성 있는 액션을 가능하게 할 수 있다. Q-learning은 인기 있는 강화학습 방법으로 단순하고, 수렴성이 있고 사전 훈련 환경에 영향을 덜 받는 특성(off-policy)으로 인해 로봇 학습에 많이 사용되고 있다. 본 논문에서는 Q-learning 알고리즘을 램프 로봇에 적용하여 복수 행위(사람인식, 책상의 물체 인식)를 학습시키는데 사용하였다. Q-learning의 학습속도(learning rate)는 복수 행위 학습 단계의 로봇 성능에 영향을 줄 수 있으므로 학습속도 변경을 통해 최적의 복수 행위 학습 모델을 제시한다.

Ant-Q 학습을 이용한 Gale-Shapley 문제 해결에 관한 연구 (Solving the Gale-Shapley Problem by Ant-Q learning)

  • 김현;정태충
    • 정보처리학회논문지B
    • /
    • 제18B권3호
    • /
    • pp.165-172
    • /
    • 2011
  • 본 논문에서는 생물학의 개미들이 학습을 통해 목표를 획득하는 방법을 응용한 Ant-Q 알고리즘(Ant Q learning System)[1]을 Gale-Shapley[2]알고리즘을 통해 제시되었던 안정된 결혼문제(SMP: Stable Marriage Problem)[3]의 새로운 해법을 찾기 위해 적용 하였다. SMP는 남성($m_i$)들과 여성($w_j$)들은 각자 자신이 좋아하는 이상형에 대한 선호도(PL: preference list)를 바탕으로 안정이면서도 최선의 짝을 찾는 것을 목표로 하고 있다. Gale-Shapley 알고리즘은 남성(혹은 여성) 위주로 안정적(stability)인 짝(Matching)을 성사시키므로 다양한 조건을 수용하지 못한다. 본 논문에 적용된 Ant-Q는 개미(Ant)의 페로몬을 활용한 학습인 ACS(Ant colony system)에 강화학습의 일종인 Q-학습[9]을 추가한 방법으로, SMP의 새로운 해법을 찾을 수 있었다.

취약계층 청소년의 학교환경에 대한 주관적 인식유형 연구 (A Study on the Subjective Perception Types of Vulnerable Adolescents on the School Environment)

  • 이유진;김형태
    • 한국콘텐츠학회논문지
    • /
    • 제22권2호
    • /
    • pp.431-446
    • /
    • 2022
  • 본 연구에서는 학교환경에 대한 취약계층 청소년들의 경험과 인식의 특성을 탐색하여 유형화하고 의미를 확인하고자 하였다. 이를 위해 Q방법론을 활용하였고, Q모집단을 구성하기 위해 사전 인터뷰와 문헌분석, 미디어 매체 검색내용을 분석하여 94개의 Q표본을 추출하여 1차 연구 참여자에 대해 눈덩이 표집방식을 적용하여 참여대상자 총 54명에게 Q분류를 실시하였다. P표본의 소속학교는 서울 7곳과 경기도 4곳이다. Q소팅에서 수집된 데이터를 Q분석 프로그램인 QUANL-PC프로그램을 이용하여 주요인 분석을 실시한 결과 4가지의 유형으로 분류되었다. 제1유형은 '순응적 모범형', 제2유형 '부정적 반항형', 제3유형은 '소극적 무기력형'이며, 제4유형은 '진취적 고군분투형'으로 나타났다. 본 연구를 통해 취약계층 청소년들의 경험과 인식을 파악하고, 이들을 위한 현실적인 지원전략에 필요한 단초를 얻을 수 있을 것으로 기대한다.

이터븀 첨가 능동형 Q-스위칭 광섬유 레이저에서 Q-스위치 상승 시간이 출력 펄스에 미치는 영향에 대한 이론적 분석 (Theoretical Analysis of Impact of Q-switch Rise Time on Output Pulse Performance in an Ytterbium-doped Actively Q-switched Fiber Laser)

  • 전진우;이준수;이주한
    • 한국광학회지
    • /
    • 제24권2호
    • /
    • pp.58-63
    • /
    • 2013
  • 본 논문에서는 능동형 Q-스위칭 광섬유 레이저에서 Q-스위치 상승 시간이 출력 펄스에 미치는 영향을 이론적으로 분석하였다. Finite Difference Time Domain (FDTD) 방법을 이용해서 비율 방정식과 전파 방정식에 대한 모델링을 수행하였다. Q-스위칭 광섬유 레이저에서 발생하는 Q-스위칭 펄스의 생성에 있어서 Q-스위치의 상승 시간이 출력 펄스 특성에 미치는 영향을 이론적으로 분석하였다. 또한, Q-스위치의 반복률에 따른 출력 펄스의 에너지 변화와 파형 변화를 확인하였다. Q-스위치 반복률이 높아지고, Q-스위치의 상승 시간이 길어질수록 출력 펄스의 멀티 피크 현상이 줄어들고 안정된 가우시안 형태의 펄스 파형이 발생함을 확인 할 수 있었다.

21세기, '빈곤'을 생각해보다: 주관성연구, Q방법론을 활용하여 (Let's Think about 'POVERTY' in the 21st Century : Using the Q methodology of Subjective Study)

  • 이도희;김기운
    • 한국융합학회논문지
    • /
    • 제10권9호
    • /
    • pp.265-272
    • /
    • 2019
  • 본 연구는 우리가 일상에서 생각하는 '빈곤'은 과연 무엇인가에서 출발하였다. 특히 본 연구는 개인적인 주관적 의견을 살펴보기 위하여 주관성연구방법인 'Q방법'을 활용하여 빈곤에 대한 인식을 유형화하였다. 분석결과 다음과 같이 4개의 유형으로 정의되었다. 은 "Retraction type"으로, 빈곤이란 'Retraction', 'Individual Effort Problem', 'Social Structure Problem', 'low status', 'Laziness' 등으로 '되물림의 문제'임을 강조하였다. 는 'Individual Effort Problem', 'Laziness', 'Incompetence', 'starvation' 등을 강조하고 있어, "Individual Problem type"으로 명명하였다. 은 'The food and shelter problem', 'starvation', 'Laziness', 'No Money' 등의 삶의 기본적인 요소인 의식주문제를 강조하고 있어, "Basic Problem type"으로 명명하였다. 는 "Resource Distribution Problem type"으로 사회의 구조적인 문제에 따른 '자원분배의 문제'를 강조하고 있는 것으로 나타났다. 본 연구는 주관성연구방법을 활용하여 21세기 빈곤에 대한 인식을 유형화하였으며, 이에 대한 일반화를 위해서 향후 본 연구에서 출발하여 실증연구로의 융합적 확장연구를 기대한다.

강화 학습에서의 탐색과 이용의 균형을 통한 범용적 온라인 Q-학습이 적용된 에이전트의 구현 (Implementation of the Agent using Universal On-line Q-learning by Balancing Exploration and Exploitation in Reinforcement Learning)

  • 박찬건;양성봉
    • 한국정보과학회논문지:소프트웨어및응용
    • /
    • 제30권7_8호
    • /
    • pp.672-680
    • /
    • 2003
  • shopbot이란 온라인상의 판매자로부터 상품에 대한 가격과 품질에 관한 정보를 자동적으로 수집함으로써 소비자의 만족을 최대화하는 소프트웨어 에이전트이다 이러한 shopbot에 대응해서 인터넷상의 판매자들은 그들에게 최대의 이익을 가져다 줄 수 있는 에이전트인 pricebot을 필요로 할 것이다. 본 논문에서는 pricebot의 가격결정 알고리즘으로 비 모델 강화 학습(model-free reinforcement learning) 방법중의 하나인 Q-학습(Q-learning)을 사용한다. Q-학습된 에이전트는 근시안적인 최적(myopically optimal 또는 myoptimal) 가격 결정 전략을 사용하는 에이전트에 비해 이익을 증가시키고 주기적 가격 전쟁(cyclic price war)을 감소시킬 수 있다. Q-학습 과정 중 Q-학습의 수렴을 위해 일련의 상태-행동(state-action)을 선택하는 것이 필요하다. 이러한 선택을 위해 균일 임의 선택방법 (Uniform Random Selection, URS)이 사용될 경우 최적 값의 수렴을 위해서 Q-테이블을 접근하는 회수가 크게 증가한다. 따라서 URS는 실 세계 환경에서의 범용적인 온라인 학습에는 부적절하다. 이와 같은 현상은 URS가 최적의 정책에 대한 이용(exploitation)의 불확실성을 반영하기 때문에 발생하게 된다. 이에 본 논문에서는 보조 마르코프 프로세스(auxiliary Markov process)와 원형 마르코프 프로세스(original Markov process)로 구성되는 혼합 비정적 정책 (Mixed Nonstationary Policy, MNP)을 제안한다. MNP가 적용된 Q-학습 에이전트는 original controlled process의 실행 시에 Q-학습에 의해 결정되는 stationary greedy 정책을 사용하여 학습함으로써 auxiliary Markov process와 original controlled process에 의해 평가 측정된 최적 정책에 대해 1의 확률로 exploitation이 이루어질 수 있도록 하여, URS에서 발생하는 최적 정책을 위한 exploitation의 불확실성의 문제를 해결하게 된다. 다양한 실험 결과 본 논문에서 제한한 방식이 URS 보다 평균적으로 약 2.6배 빠르게 최적 Q-값에 수렴하여 MNP가 적용된 Q-학습 에이전트가 범용적인 온라인 Q-학습이 가능함을 보였다.

청소년기 여성의 분노표현 유형 - Q방법론적 접근 - (Types of Anger Expression in Adolescent Women - A Q-Methodological Approach -)

  • 문소현;박영주
    • 대한간호학회지
    • /
    • 제38권4호
    • /
    • pp.522-532
    • /
    • 2008
  • Purpose: The purpose of this study was to identify the types of anger expression in adolescent women. Methods: The Q-Methodology which provides a method of analyzing the individual's subjectivity was used. The 32 subjects classified 50 selected Q-statements on a 9 point scale to make a normal distribution. The collected data was analyzed by a PC-QUANL program. Results: Five types of anger expression in adolescent women were identified. Type I: Direct attacking expression type, Type II: Mature consideration type, Type III: Passive indirect expression type, Type IV: Avoidance conversion type, and Type V: Expression control type. Conclusion: This study revealed that different approaches of nursing intervention strategies are recommended based on the five types of anger expression and their characteristics.

창의성에 대한 유치원 교사의 인식 유형 분석 : Q-방법론적 접근 (An analysis of Kindergarten Teachers' Perceptions of Children's Creativity Employing Q-methodological Approach)

  • 박선미;유수경
    • 아동학회지
    • /
    • 제29권4호
    • /
    • pp.231-248
    • /
    • 2008
  • This research used Q-Methodology to investigate kindergarten teachers' perception style regarding children's creativity. The 30 participants had various teaching experiences and educational backgrounds and were teaching in a variety of types of kindergartens in the cities of Busan and Ulsan. Individual teacher's subjective perspective was the main target for the analysis. Results showed four types of teachers' perceptions of creativity : 1) perceiving creativity as children's creative thinking ability, 2) focusing on creative curriculum development 3) perceiving creativity as children's creative personality, and 4) focusing on either teacher's thorough understanding of children's creativity or teachers' creativity. These results indicate that teachers tend to perceive creativity in narrow and specific domains. These findings are discussed with respect to their educational implications.

  • PDF

정서·행동 문제아가 지각하는 두려움의 유형분석 : Q 방법론적 접근 (Fear Factors in Children with Emotional and Behavioral Problems : A Q-Methodological Approach)

  • 구미향
    • 아동학회지
    • /
    • 제26권1호
    • /
    • pp.75-90
    • /
    • 2005
  • The structure of fears was identified and measured by Q methodology. Subjects were 40 school-aged children with emotional and behavioral problems. Subjectivity of children's fears was classified into 3 types by the QUANL program. Three types occupied 52% of all variance and correlations ranged between .31 and.52. The first type is "imaginative-sensitive perception" where children are fearful about unreal and imaginative objects related to death. The second type is "rational-empirical perception" where children are concerned about the impact of fearful objects and authoritative figures based on their own personal experience. The last type is "realistic-egocentric perception" where children are fearful of possible violence, crime, and disease.

  • PDF

미디어정치콘텐츠의 인식 개선에 관한 유형화 (Typology on improvement of perception about political contents in media)

  • 이제영
    • 한국콘텐츠학회:학술대회논문집
    • /
    • 한국콘텐츠학회 2012년도 춘계 종합학술대회 논문집
    • /
    • pp.119-120
    • /
    • 2012
  • 본 연구에서는 대학생들이 바라보는 미디어정치콘텐츠들의 인식 개선에 대한 주관적 인식을 Q방법론을 통하여 진단하고, 기능적인 측면에서 세부적인 효과적 유형요인들을 짚어봄으로써 향후 개선과 방향성을 알아보고자 한다. 다시 말해서, 대학생들이 바라보는 미디어정치콘텐츠들의 인식개선에 관하여 실증적이고 심층적 Q 분석을 통해 다각적인 분석을 실시하고자 한다. 이 연구에서는 위에서 제기된 사항들의 해답을 얻기 위하여 주관성연구 분석방법을 활용하며, 이에 따른 연구문제는 아래와 같다. 이 과정에서 시도되는 구체적인 Q-statements(Q진술문)는 다양한 국내외 자료를 단계별로 정리된 다각적인 선행 사례연구를 포함하며, 조사범위는 현재 국내에서 가능한 모든 문헌을 대상으로 실시하고자 한다. 다시 말해서, 대학생들의 의견을 청취하고, 그 내용과 관련 문헌, 연구자의 의견을 중심으로 진술문 정리가 되는 과정을 거칠 것이다.

  • PDF