• 제목/요약/키워드: Q Method

검색결과 2,702건 처리시간 0.038초

Q-value Initialization을 이용한 Reinforcement Learning Speedup Method (Reinforcement learning Speedup method using Q-value Initialization)

  • 최정환
    • 대한전자공학회:학술대회논문집
    • /
    • 대한전자공학회 2001년도 하계종합학술대회 논문집(3)
    • /
    • pp.13-16
    • /
    • 2001
  • In reinforcement teaming, Q-learning converges quite slowly to a good policy. Its because searching for the goal state takes very long time in a large stochastic domain. So I propose the speedup method using the Q-value initialization for model-free reinforcement learning. In the speedup method, it learns a naive model of a domain and makes boundaries around the goal state. By using these boundaries, it assigns the initial Q-values to the state-action pairs and does Q-learning with the initial Q-values. The initial Q-values guide the agent to the goal state in the early states of learning, so that Q-teaming updates Q-values efficiently. Therefore it saves exploration time to search for the goal state and has better performance than Q-learning. 1 present Speedup Q-learning algorithm to implement the speedup method. This algorithm is evaluated. in a grid-world domain and compared to Q-teaming.

  • PDF

호수 생태계에서 살아있는 세균을 측정하기 위한 qDVC 방법의 적용 (Application of qDVC Method for Measuring Viable Cells in Lakes)

  • 김미리;서은영;최승익;안태석
    • 미생물학회지
    • /
    • 제42권3호
    • /
    • pp.205-209
    • /
    • 2006
  • 호소수내의 '살아있는 세균'을 측정하기 위하여 quantitative direct viable count (qDVC) 방법을 적용하였다. qDVC방법에 적용되는 최적 glycine 농도는 2%였으며, '살아있는 세균'을 계수하는데 있어서 평판계수법, CTC법 보다는 qDVC 방법이 보다 효과적이라는 것을 확인하였다. qDVC방법으로 '살아있는 세균'을 측정한 결과 다른 두 방법보다 $2.4{\sim}6.0$배 높은 값이었다. 또한 qDVC방법은 '살아있는 세균'을 죽은 세포 또는 휴면세포와 쉽게 구별할 수 있었다.

I/Q 불균형에 의하여 왜곡된 OFDM 신호의 검출방식 (A Detection Method for An OFDM Signal Distorted by I/Q Imbalance)

  • 박경원;조용수
    • 한국통신학회논문지
    • /
    • 제30권1A호
    • /
    • pp.37-45
    • /
    • 2005
  • 본 논문에서는 OFDM(Orthogonal Frequency Division Multiplexing) 시스템에서 I/Q(In-phase/Quadrature) 불균형에 의한 영향을 분석하고 I/Q 불균형이 발생하는 경우에 신호를 검출하는 방식을 제안한다. 또한, 제안된 검출방법을 위한 채널 추정 방식 및 파일럿 신호를 설계하는 방식을 제안한다. OFDM 시스템에서 I/Q 불균형은 SIR(Signal to Interference Noise Ratio)을 감소시켜, 성능을 열화시키므로 강건한 검출방식이 요구된다. 제안된 검출방식은 기존의 방식과 달리, I/Q 불균형에 의하여 발생되는 OFDM 신호의 특성을 이용하여 신호를 검출함으로써 SIR 손실을 줄이며 I/Q 불균형에 의한 영향을 효과적으로 억제할 수 있다.

Q의 실험적 측정법 (The Experimental Method of Measuring Q)

  • 김동학;이정현;강기주
    • 대한기계학회:학술대회논문집
    • /
    • 대한기계학회 2003년도 춘계학술대회
    • /
    • pp.285-291
    • /
    • 2003
  • An experimental method to measure Q-parameter in-situ is described. The basic idea comes from the fact that the side necking near a crack tip indicates the loss of stress triaxiality, which can be scaled by Q. From the out-of-plane displacement and the in-plane strain near the surface of side necking, stress field averaged through the thickness is calculated and then Q is determined from the difference between the stress field and the HRR field corresponding to the identical J-integral. To prove the validity, three-dimensional finite element analysis has been performed for a CT configuration with side-groove. Q-value which was calculated directly from the near-tip stress field is compared with that determined by simulating the experimental procedure according to the proposed method, that is, the Q-value determined from the lateral displacement and the inplane strain. Also, the effect of location where the displacement and strain are measured is explored.

  • PDF

Reversed Two Station Method (RSTM)에 의한 중부지방 $Q_{Lg}^{-1}$ 연구 (A study of $Q_{Lg}^{-1}$ by the reversed two station method in the crust of central South Korea)

  • 정태웅
    • 지구물리
    • /
    • 제5권3호
    • /
    • pp.211-218
    • /
    • 2002
  • $Q_{Lg}^{-1}$를 구하는 방법 중에서 Chun et al. (1987)이 고안한 Reversed two station method (RSTM)는 진앙거리 90 km 이상의 Lg파에 대하여 시행되고 있다. 진앙거리 95 km 에서 381 km에 이르는 중부지역 지진자료에 대하여 RSTM에 의한 $Q_{Lg}^{-1}$를 구한 결과, 비슷한 진앙거리에 대한 동일한 방법으로부터 얻어진 남한 남동부지역의 값과 비슷한 높은 값이 도출되었다. 남한 남동부 및 중부지방의 높은 $Q_{Lg}^{-1}$는 실제와 다른 것으로, RSTM이 본 연구 진앙거리 구간에서는 감쇠율이 표면파 감쇠율 0.5 보다 크기 때문인 것으로 해석된다.

  • PDF

A 4-step Inference Method for Natural Language Propositions Involving Fuzzy Quantifiers and Truth Qualifiers

  • Okamoto, Wataru
    • 한국지능시스템학회:학술대회논문집
    • /
    • 한국퍼지및지능시스템학회 2003년도 ISIS 2003
    • /
    • pp.579-582
    • /
    • 2003
  • In this paper, we propose a 4-step inference method needed for constructing a natural language communication system. The method is used to obtain fuzzy quantifier Q′when QA is Fisr τ⇔ Q′(m′A) is mF is m"is τ is inferred (Q, Q′: quantifiers, A: fuzzy subject, m′, m": modifiers, y: fuzzy predicate, τ: truth qualifier). We show that Q′is resolved step by step for two types of Q, including a non-increasing type (few,...) and a non-decreasing type(most,...).

  • PDF

Estimating the Queue Length Distribution of ATM multiplexer using Threshold Bootstrap

  • 김윤배
    • 한국시뮬레이션학회:학술대회논문집
    • /
    • 한국시뮬레이션학회 1999년도 추계학술대회 논문집
    • /
    • pp.62-62
    • /
    • 1999
  • In this paper, we propose a new technique of estimating tail of steady-state queue length distribution; Pr(Q>q), fo ATM multiplexer. Pr(Q>q) is a fundamental measure of network congestion. Assessing Pr(Q>q) properly is crucial for design and control of ATM networks. Data traffic pattern of high-speed networks is highly correlated and bursty. Estimating Pr(Q>q) is very difficult because of correlation and burstiness. We estimate entropy(rate-function) using large deviation principles and threshold bootstrap. Simulation studies are conducted to compare the performance of an existing method and our new method.

  • PDF

한반도 남동부지역의 해석적방법에 의한 다중산란모델 연구 (A Study of Multiple Scattering Model by Analytic Method for Southeastern Korea)

  • 정태웅
    • 지구물리와물리탐사
    • /
    • 제14권3호
    • /
    • pp.242-248
    • /
    • 2011
  • 균일한 모델에 대하여 해석적인 방법을 적용하여 한반도 남동부의 감쇠상수 고유치를 분리하였다. 해석적인 방법에 의한 이론치와 759 지진자료에 의한 관측치를 다중지연시간창법으로 비교하여 분리를 행하였다. 이전의 연구에서 한반도의 전체 $Q_i^{-1}$$Q_s^{-1}$ 값은 매우 낮은 값이 도출되어 지진 안정지대의 값을 반영하는 것으로 풀이된 반면, 한반도 남동부는 비교적 높은$Q^{-1}$값이어서 이는 한반도 타지역에 비해 높은 지진활동도와 연관된 것으로 보인다.

OFDM 전송방식 기반의 Direct-Conversion 수신기에서 I/Q 불균형 보상을 위한 새로운 방법 제안 (A Novel Compensation Scheme for I/Q Mismatch in an OFDM Direct-Conversion Architecture)

  • 배정화;박진우
    • 한국통신학회논문지
    • /
    • 제31권12C호
    • /
    • pp.1265-1272
    • /
    • 2006
  • 본 논문에서는 OFDM을 기반으로 하는 직접변환(Direct-conversion) 수신기에서 발생하는 I/Q 불균형(mismatch)문제를 효과적으로 제거할 수 있는 새로운 보상기법을 제시한다. OFDM심볼에 0의 값을 갖는 null 부반송파를 삽입하여 전송한 후에, 수신단에서 FFT후의 null 부반송파로부터 I/Q 불균형 관한 파라미터 값을 추정하고, 이를 이용하여 데이터 심볼에서 I/Q 불균형 효과를 제거하는 방법으로, 효율적이며 낮은 복잡성(complexity)이 제안 방식의 수요 특징이다. 모의실험 결과로부터 소수의 null 부반송파로도 충분한 I/Q 불균형 효과를 제거하는 결과를 얻을 수 있었다. 또한 제안된 방식은 주파수 선택적 페이딩 채널에서도 I/Q 불균형이 잘 제거됨을 보였다.

WiBro 상량링크에서 I/Q 불균형 성분을 추정하기 위한 새로운 부채널 할당 방식 (Novel allocation method of tiles in Subchannel for I/Q imbalances Estimation in WiBro uplink)

  • 김혜진;진영환;안재민
    • 한국통신학회논문지
    • /
    • 제32권11A호
    • /
    • pp.1146-1153
    • /
    • 2007
  • 본 논문에서는 RF 단에서 직접변환 방식을 사용하고 있는 Wibro 상향링크에서 대칭되는 부반송파 간 확산으로 작용하여 성능 저하를 일으키는 I/Q 불균형(I/Q Imbalances)의 영향을 분석하였다. 전체 부반송파를 한 사용자가 모두 사용하는 OFDM 시스템과 달리, OFDMA 시스템에서는 대칭되는 부반송파가 각기 다른 사용자에게 할당 되는 부채널 할당 방법을 사용한다. 그러므로 I/Q 불균형 성분의 추정은 불가능 해지고, 이로 인해 왜곡된 수신 신호를 보상해줄 수 없다. 이러한 I/Q 불균형 문제를 해결하기 위해, 본 논문에서는 대칭되는 부반송파들이 한 사용자에게 할당 될 수 있도록 새로운 부채널 할당 방법을 제안한다. 새로운 부채널 할당방법을 적용하면, I/Q 불균형으로 인한 왜곡 성분의 추정이 가능해지곤 I/Q 불균형이 존재하지 않을 때의 성능과 비슷한 수준가지 보상할 수 있게 된다. 적절한 신호 검출 기법을 사용할 경우, 채널 성분과 결합한 I/Q 불균형 성분으로 인해 다이버시티 이득으로 인한 성능 향상 효과까지 얻을 수 있음을 SER(Symbol Error Rate) 성능을 통해 확인 할 수 있다.