• 제목/요약/키워드: 희소 보상

검색결과 5건 처리시간 0.018초

Cooperative Multi-agent Reinforcement Learning on Sparse Reward Battlefield Environment using QMIX and RND in Ray RLlib

  • Minkyoung Kim
    • 한국컴퓨터정보학회논문지
    • /
    • 제29권1호
    • /
    • pp.11-19
    • /
    • 2024
  • 멀티에이전트는 전장 교전 상황, 무인 운송 차량 등 다양한 실제 협동 환경에 사용될 수 있다. 전장 교전 상황에서는 도메인 정보의 제한으로 즉각적인 보상(Dense Reward) 설계의 어려움이 있어 명백한 희소 보상(Sparse Reward)으로 학습되는 상황을 고려해야 한다. 본 논문에서는 전장 교전 상황에서의 아군 에이전트 간 협업 가능성을 확인하며, 희소 보상 환경인 Multi-Robot Warehouse Environment(RWARE)를 활용하여 유사한 문제와 평가 기준을 정의하고, 강화학습 라이브러리인 Ray RLlib의 QMIX 알고리즘을 사용하여 학습 환경을 구성한다. 정의한 문제에 대해 QMIX의 Agent Network를 개선하고 Random Network Distillation(RND)을 적용한다. 이를 통해 에이전트의 부분 관측값에 대한 패턴과 시간 특징을 추출하고, 에이전트의 내적 보상(Intrinsic Reward)을 통해 희소 보상 경험 획득 개선이 가능함을 실험을 통해 확인한다.

최소 자승법을 이용한 고해상도 밀리미터파 탐색기의 비선형 위상 오차의 추정 (Sweep Nonlinearity Estimation for High Range Resolution Millimeter-Wave Seeker Using Least Squares Method)

  • 양희성;전주환;송성찬
    • 한국전자파학회논문지
    • /
    • 제23권1호
    • /
    • pp.56-67
    • /
    • 2012
  • 본 논문 연구에서는 고해상도 레이더 탐색기에 쓰이는 FMICW(Frequency Modulated Interrupted Continuous Wave) 또는 FMCW(Frequency Modulated Continuous Wave) 시스템의 비선형 특성에 의해서 발생되는 거리 해상도(range resolution) 성능 저하 현상을 보상하기 위하여, 하드웨어의 비선형 위상 오차 성분을 다양한 진폭, 위상을 가지는 사인함수와 랜덤 성분으로 모델링하고, 이를 추정할 수 있는 신호 처리 알고리즘을 새롭게 제안하였다. 이 방법은 알고 있는 거리에 위치한 두 개의 기준점 목표물(point target)로부터 각각 측정된 두 개의 IF 신호를 연립방정식화하여 희소 선형식(sparse linear equation)을 세우고, 최소 자승법(least squares) 관점에서 최적 해로서의 비선형 오차 성분을 추정하는 방법으로써 추정된 비선형 오차 성분은 비선형 오차 특성 보상을 위한 사전 왜곡(predistortion) 기법을 위해 사용될 수 있다.

기술공학시대에서 전문직의 정체성과 윤리의 문제 (Professionalism and Professional Ethics in the Technological Era)

  • 정연재
    • 윤리연구
    • /
    • 제77호
    • /
    • pp.281-300
    • /
    • 2010
  • 이 글의 목적은 전문직의 정체성, 이른바 프로페셔널리즘(전문직업주의, professionalism)을 심도 있게 규명함으로써 통합적 관점에서의 전문직윤리의 중요성을 살피는 것이다. 구체적으로는 프로페셔널리즘에서 전문직윤리로 이행하는 과정에서 규범적 필요성을 강조함으로써 우리 사회에 적실한 전문직윤리의 가능성을 살펴볼 것이다. 해당 전문직종사자 간의 피할 수 없는 생존경쟁이 격화되고 있는 현실에서, 이른바 전문직의 희소가치가 감소 추세에 있는 오늘의 상황에서 프로페셔널리즘과 전문직윤리는 어떤 의미를 지니는가? 직업적 영향력과 경제적 보상이 전문직의 권력(professional power)을 구성하는 가장 큰 요소라고 할 때, 그 권력이 뚜렷하게 약화되고 있는 지금의 상황은 과연 통상적인 윤리(ordinary Morality)의 수준을 넘어서는 전문직윤리의 가능성을 확보할 수 있는가? 이 글은 전문직윤리를 통합적으로 다루면서 이러한 질문에 대한 답변의 실마리를 찾아볼 것이다.

연공성임금을 매개로 한 조직내 관계적 불평등: 내부자-외부자 격차에 대한 분석 (Seniority Based Pay System and the Relational basis of Workplace Inequality)

  • 권현지;함선유
    • 산업노동연구
    • /
    • 제23권2호
    • /
    • pp.1-45
    • /
    • 2017
  • 이 연구의 목표는 1990년대말 이래 비정규직 확대와 함께 '위기후 한국노동시장'에서 심화되어 온 불평등의 조직적 메카니즘을 설명하는데 있다. 현재 한국사회에서 확산, 심화되고 있는 불평등은 개인이 아니라 젠더, 고용지위 등 개인이 속한 범주의 위치에 좌우되는 경향이 농후하다. 정규-비정규로 구분되는 고용형태는 단순히 특정 고용계약관계에 대한 지시어가 아니라 불평등 담론의 지형내에서 지위범주로 제도화되었으며, 젠더 등 오랜 기간 노동시장 격차에 작용해 온 여타 사회 범주와 결합해 노동시장 불평등을 고착하는데 기능하고 있다. 이 연구는 희소한 조직자원에 대한 접근능력을 기초로 자원접근과 보상의 배타성을 주장(claims making)하는 기존 내부자집단과 주변적 지위로 분류되고 배제된 외부자 집단간 관계적 불평등(relational inequality)에 주목하고, 한국의 맥락에서 관계적 불평등을 재생산하는 실질적 조직 관행(practices)으로서 연공성 임금의 역할을 분석하였다. 조직이 연공성 임금에 의존할수록 해당 조직의 비정규, 특히 여성비정규직의 비중이 체계적으로 증가하며, 정규직과 비정규직 간 임금 격차 역시 의미있게 증가한다는 점을 분석적으로 제시함으로써, 내부자가 이익 재생산을 위해 명시적 혹은 암묵적으로 요구하는 연공 임금체계가 노동시장 분절에 관계한다는 점을 입증하였다.

메타버스 기반 NFT 아트 작품 사례 연구 - <하이브리드 네이처>를 중심으로 (A Study on the Concept and Characteristics of Metaverse based NFT Art - Focused on <Hybrid Nature>)

  • 김보슬;김민지
    • 트랜스-
    • /
    • 제14권
    • /
    • pp.1-33
    • /
    • 2023
  • 최근 블록체인 기술을 활용해 데이터 창작자에게 데이터 소유권을 부여하는 웹(Web) 3.0이 차세대 인터넷으로 부상하며 NFT를 매개로 가상경제를 구축하는 메타버스가 주목받고 있다. 웹3.0은 콘텐츠 생성자가 중개자의 역할을 하는 플랫폼에 종속되지 않고 참여에 따른 정당한 이익을 보상받는 가치를 지향한다. 웹 3.0 시대 메타버스에서 디지털 자산의 소유권을 보장하기 위해서는 블록체인 NFT 기술 적용이 필수불가결하다. 본 연구는 이러한 시대적 변화를 인지하며, 메타버스의 개념과 특징을 고찰한 이론에 기반해 NFT 아트와 연결할 수 있는 메타버스의 5가지 특징을 ①'연속성', ②'실재감', ③'동시성', ④'경제성', ⑤ '첨단과학기술의 활용성'으로 도출했다. 그리고 이를 메타버스 기반 NFT 아트 <하이브리드 네 이처 Hybrid Nature> 작품 사례연구에 적용하여 메타버스 및 NFT 아트의 개념과 특징이 작품 내에 어떠한 식으로 반영되었는지 분석하였다. 본 연구를 통해 웹 3.0 기술과 예술, 시장과 산업의 접목 지점에서 기존의 예술시장과 다른 형태로 전개되고 있는 NFT 아트의 기본 개념을 파악하고, 경제적 투자 가치 이외에 NFT 아트의 예술적, 미학적, 문화적 가치를 연구하는 것의 필요성을 제기하고자 하였다. NFT 아트를 학술적으로 분석하고 미학적 특징을 고찰한 연구가 희소한 현 상황에서 향후 관련 분야 연구자 및 전문가들이 메타버스 기반 NFT 아트의 장르적 특성과 구체적인 면모를 파악해나갈 수 있는 초석을 다졌다는 것에 본 연구의 의의가 있다.