The Role of the Cauchy Probability Distribution in a Continuous Taboo Search

연속형 타부 탐색에서 코시 확률 분포의 역할

  • 이창용 (공주대학교 산업시스템공학과) ;
  • 이동주 (공주대학교 산업시스템공학과)
  • Received : 2010.04.05
  • Accepted : 2010.06.07
  • Published : 2010.08.15

Abstract

In this study, we propose a new method for generating candidate solutions based on the Cauchy probability distribution in order to complement the shortcoming of the solutions generated by the normal distribution. The Cauchy probability distribution has infinite mean and variance, and it has rather large probability in the tail region relative to the normal distribution. Thus, the Cauchy distribution can yield higher probabilities of generating candidate solutions of large-varied variables, which in turn has an advantage of searching wider area of variable space. In order to compare and analyze the performance of the proposed method against the conventional method, we carried out an experiment using benchmarking problems of real valued function. From the result of the experiment, we found that the proposed method based on the Cauchy distribution outperformed the conventional one for all benchmarking problems, and verified its superiority by the statistical hypothesis test.

본 논문에서는 연속형 최적화 문제를 위한 타부 탐색에서 후보 해를 생성하기 위해 사용되는 정규 분포의 단점을 보완하기 위하여 코시 확률 분포에 기초한 후보 해 생성 방법을 제안하였다. 코시 확률 분포는 평균 및 분산 등이 무한대인 확률 분포이며, 분포의 꼬리 부분의 확률이 정규 분포에 비하여 상대적으로 크다. 따라서 코시 분포를 사용하면 변수의 변화가 큰 후보 해가 생성될 확률이 높기 때문에 보다 넓은 변수 공간을 탐색할 수 있는 장점이 있다. 코시 확률 분포를 사용한 타부 탐색의 성능을 기존의 정규 분포를 사용한 방법과 비교 분석하기 위하여 실변수 함수로 구성된 벤치마킹 문제에 적용하여 실험을 실행하였다. 실험 결과를 통해 볼 때, 실험에 사용한 모든 함수에 대하여 코시 분포를 사용한 방법이 보다 나은 결과를 나타냈으며, 또한 통계적 가설 검정을 통하여 코시 확률 분포의 우수성을 입증하였다.

Keywords

References

  1. F. Glover, "Tabu search - Part I," ORSA J. Comput., vol.1, pp.190-206, 1989. https://doi.org/10.1287/ijoc.1.3.190
  2. F. Glover, "Tabu search - Part I," ORSA J. Comput., vol.2, pp.4-32, 1990. https://doi.org/10.1287/ijoc.2.1.4
  3. M. Gendreau, A. Hertz, G. Laporte, "A Tabu Search Heuristic for the Vehicle Routing Problem," Management Science, vol.40, pp.1276-1286, 1994. https://doi.org/10.1287/mnsc.40.10.1276
  4. E. Nowicki and C. Smutnicki, "A Fast Tabu Search Algorithm for the job shop problem," Management Science, vol.42, pp.797-813, 1996. https://doi.org/10.1287/mnsc.42.6.797
  5. D. Cvijovic and J. Klinowski, "Taboo search - an approach to the multiple minima problem," Science, vol.267, pp.664-666, 1995. https://doi.org/10.1126/science.267.5198.664
  6. N. Hu, "Tabu search method with random moves for globally optimal design," Int. J. Numer. Methods Eng., vol.35, pp.1055-1070, 1992. https://doi.org/10.1002/nme.1620350508
  7. O. Hajji, S. Brisset, and P. Brochet, "A new tabu search method for optimization with continuous parameters," IEEE Trans. Magn., vol.40, pp.1184-1187, 2004. https://doi.org/10.1109/TMAG.2004.824909
  8. Chelouah, R., P. Siarry, "A hybrid method combining continuous tabu search and Nelder-Mead simplex algorithms for the global optimization of multiminima functions," EJOR, vol.161, pp.636-654, 2005. https://doi.org/10.1016/j.ejor.2003.08.053
  9. Chen, X., J. Yang, Z. Li, D. Tian, and Z. Shao, "A combined global and local search method to deal with constrained optimization for continuous tabu search," Int. J. Numer. Methods Eng., vol.76, pp.1869-1891, 2008. https://doi.org/10.1002/nme.2393
  10. X. Yao and Y. Lin, "Fast evolutionary programming," in Evolutionary Programming V: Proceedings of the Fifth Annual Conference on Evolutionary Programming, MIT Press, Cambridge, MA, 1996.
  11. X. Yao and Y. Lin, "Fast evolutionary strategies," in Evolutionary Programming VI: Proceedings of the Sixth Annual Conference on Evolutionary Programming, pp.151-161, Springer, 1997.
  12. R, Hogg and A. Craig, Introduction to mathematical statistics, 4th Ed., Macmillan Publishing Co., Inc. New York, 1978.
  13. A. Bunde and S. Halvin, Fractals in Science, Springer-Verlag, Berlin, 1994.
  14. 김우철 등, 통계학 개론, 영지문화사, 2000.