• 제목/요약/키워드: Fusion Image

검색결과 882건 처리시간 0.024초

Real Scene Text Image Super-Resolution Based on Multi-Scale and Attention Fusion

  • Xinhua Lu;Haihai Wei;Li Ma;Qingji Xue;Yonghui Fu
    • Journal of Information Processing Systems
    • /
    • 제19권4호
    • /
    • pp.427-438
    • /
    • 2023
  • Plenty of works have indicated that single image super-resolution (SISR) models relying on synthetic datasets are difficult to be applied to real scene text image super-resolution (STISR) for its more complex degradation. The up-to-date dataset for realistic STISR is called TextZoom, while the current methods trained on this dataset have not considered the effect of multi-scale features of text images. In this paper, a multi-scale and attention fusion model for realistic STISR is proposed. The multi-scale learning mechanism is introduced to acquire sophisticated feature representations of text images; The spatial and channel attentions are introduced to capture the local information and inter-channel interaction information of text images; At last, this paper designs a multi-scale residual attention module by skillfully fusing multi-scale learning and attention mechanisms. The experiments on TextZoom demonstrate that the model proposed increases scene text recognition's (ASTER) average recognition accuracy by 1.2% compared to text super-resolution network.

SPECT/CT에서 감쇠 보정 및 위치 정보의 유용성 평가 (The Usefulness Assessment of Attenuation Correction and Location Information in SPECT/CT)

  • 최종숙;정우영;신상기;조시만
    • 핵의학기술
    • /
    • 제12권3호
    • /
    • pp.214-221
    • /
    • 2008
  • 목적 : 융합 SPECT/CT가 기존 SPECT에 비해 병소의 해부학적 위치를 정확히 판단할 수 있는지 정성 평가하고, CT 감쇠 보정이 SPECT 영상에 미치는 효과를 알아보아 SPECT/CT의 유용성을 제시하고자 한다. 실험재료 및 방법 : 1. 융합 영상의 평가 : 2008년 1월(月)부터 8월(月)까지 Precedence 16 혹은 Symbia T2에서 $^{131}I$-MIBG, Bone, $^{111}In$-Octreotide, Meckel 게실, Parathyroid MIBI 등을 SPECT/CT 시행한 환자를 대상으로 하였고, SPECT/CT영상을 융합한 것과 하지 않은 것을 비교하여 정성 평가하였다. 2. 감쇠보정의 평가 : Symbia T2로 2008년 6월에서 8월까지 $^{201}Tl$ 심근 검사를 한 환자 38명을 대상으로 Cedars-Sinai의 QPS를 이용하여 산출하였다. Ant, Inf, Lat, Septum, Apex로 5개부분으로 분류하고, 각 부분에 대한 관류의 상태를 백분율로 산출했다. CT AC와 Non AC를 평균${\pm}$표준편차로 각 부분에 대한 관류 상태를 비교하고 차이를 분석하였다. 결과 : 1. 융합 영상의 평가 : 에너지가 높은 $^{131}I$ SPECT의 경우 병소와 주위 조직 간의 섭취율 차이로 인해 (주위 조직이 saturation 됨) 병소의 위치 파악이 어려웠으나 CT로 융합한 결과 해부학적 위치를 정확히 평가할 수 있었다. 또한 멕켈게실이나 $^{111}In$과 같이 장이나 장기쪽에 질환을 찾는 경우에는 그 우수성이 더욱 뛰어 났다. Bone SPECT/CT는 척추간의 구별을 확실히 할 수 있어 임상의가 정확한 결과를 제시하는데 도움을 준다. 2. 감쇠 보정의 평가 : 감쇠 보정 전후의 관류 백분율의 차이가 Ant, Lat에서는 통계적으로 유의한 차이가 없었으나(p>0.05), Inferior, Apex, Septum에서는 유의한 차이가 있었다(p<0.05). 차이를 보이는 값 중 Inferior Wall에서 CT AC perfusion : $76.84{\pm}6.52%$, Non AC perfusion : $68.58{\pm}7.55%$로 CT 보정에 의한 차이가 $8.26{\pm}4.95%$로 가장 크게 측정되었다(t=10.29, p<0.01). 결론 : SPECT에 CT가 부착되면서 병변의 기능적 활성도를 나타내는 분자학적 영상은 물론 병변의 해부학적 위치 정보를 보다 정확하게 확인할 수 있게 되었다. 이것은 비정상적 부위를 찾아내는 것에 그치지 않고 복잡한 인체 부위에서 정상군과 비정상군을 분리하는데 많은 도움을 주게 되었다. 따라서 임상의는 하나의 검사 영상으로 진단과 치료계획을 동시에 시행할 수 있을 것이다. 또한 감쇠가 잘 되는 흉곽 부위 안에 있는 심근 검사에는, CT로 보다 정확한 감쇠 보정을 할 수 있기 때문에 SPECT 검사 시 관심부위의 관류 상태를 더욱 신뢰할 수 있어 치료 예후의 정당성을 입증할 수 있을 것으로 판단된다.

  • PDF

SURF 기법과 상호정보기법을 활용한 농경지 지역 무인항공기 영상 간 정밀영상등록 (Coarse to Fine Image Registration of Unmanned Aerial Vehicle Images over Agricultural Area using SURF and Mutual Information Methods)

  • 김태헌;이기림;이원희;염준호;정세정;한유경
    • 대한원격탐사학회지
    • /
    • 제35권6_1호
    • /
    • pp.945-957
    • /
    • 2019
  • 본 연구에서는 무인항공기(Unmanned Aerial Vehicle, UAV)를 활용하여 취득된 농경지 지역에 대한 영상 간 기하 오차를 제거하기 위한 정밀영상등록(Coarse to Fine Image Registration) 방법론을 제시한다. 먼저 무인항공기를 활용하여 농경지 지역에 대한 영상을 취득한 후 정사영상을 생성하였다. 영상등록 시 오차를 유발하는 오정합쌍이 추출되는 확률을 감소시키기 위해 생성된 정사영상의 메타데이터를 기반으로 관심지역을 선정하여 탐색영역을 최소화하였다. 그리고 Speeded Up Robust Features (SURF) 기법을 활용하여 추출된 정합쌍(Tie-points)을 기반으로 초기영상등록을 수행하여 정사영상 간 기하 오차를 전반적으로 제거하였다. 이어서 영상내에 두드러진 공간특성이나 구조가 없어도 효과적으로 정합쌍 추출이 가능한 상호정보(Mutual Information) 기법을 통해 추출된 정합쌍을 활용하여 정밀영상등록을 수행하였다. 총 8장의 정사영상을 이용하여 제안기법의 우수성 및 효율성을 검증하기 위해 SURF 기법, 상호정보기법을 개별적으로 활용하여 영상등록을 수행한 결과와 비교분석을 수행하였다. 그 결과, 제안기법을 활용한 경우 효과적으로 정사영상 간 기하 오차가 제거된 것을 확인하였다.

CycleGAN 기반 영상 모의를 적용한 건물지역 변화탐지 분석 (The Analysis of Change Detection in Building Area Using CycleGAN-based Image Simulation)

  • 조수민;원태연;어양담;이승우
    • 한국측량학회지
    • /
    • 제40권4호
    • /
    • pp.359-364
    • /
    • 2022
  • 원격탐사 영상의 변화탐지는 카메라의 광학적 요인, 계절적 요인, 토지피복 특성에 의해 오류가 발생한다. 본 연구에서는 CycleGAN (Cycle Generative Adversarial Network) 방법을 사용하여 촬영 각도에 따른 영상 내 건물 기울기를 모의 조정하였고, 이렇게 모의한 영상을 변화탐지에 활용하여 탐지 정확도 향상에 기여하도록 하였다. CycleGAN 기반으로 두 개 시기 영상 중 한 시기 영상을 기준으로 건물의 기울기를 다른 한 영상 내 건물에 유사하게 모의하였고 원 영상과 건물 기울기에 대한 오류를 비교 분석하였다. 실험자료로는 서로 다른 시기에 다른 각도로 촬영되었고, 건물이 밀집한 도시지역을 포함한 Kompsat-3A 고해상도 위성영상을 사용하였다. 실험 결과, 영상 내 건물 영역에 대하여 두 영상의 건물에 의한 오탐지 화소 수가 원 영상에서는 12,632개, CycleGAN 기반 모의 영상에서는 1,730개로 약 7배 감소하는 것으로 나타났다. 따라서, 제안 방법이 건물 기울기로 인한 탐지오류를 감소시킬 수 있음을 확인하였다.

영상처리와 센서융합을 활용한 지능형 6족 이동 로봇 (Intelligent Hexapod Mobile Robot using Image Processing and Sensor Fusion)

  • 이상무;김상훈
    • 제어로봇시스템학회논문지
    • /
    • 제15권4호
    • /
    • pp.365-371
    • /
    • 2009
  • A intelligent mobile hexapod robot with various types of sensors and wireless camera is introduced. We show this mobile robot can detect objects well by combining the results of active sensors and image processing algorithm. First, to detect objects, active sensors such as infrared rays sensors and supersonic waves sensors are employed together and calculates the distance in real time between the object and the robot using sensor's output. The difference between the measured value and calculated value is less than 5%. This paper suggests effective visual detecting system for moving objects with specified color and motion information. The proposed method includes the object extraction and definition process which uses color transformation and AWUPC computation to decide the existence of moving object. We add weighing values to each results from sensors and the camera. Final results are combined to only one value which represents the probability of an object in the limited distance. Sensor fusion technique improves the detection rate at least 7% higher than the technique using individual sensor.

직각정규화와 DEM 자료 융합을 이용한 광역 DEM 생성 (A Wide DEM Generation Based on Orthoretification and DEM Data Fusion)

  • 예철수;전병민;이쾌희
    • 대한원격탐사학회지
    • /
    • 제16권1호
    • /
    • pp.99-108
    • /
    • 2000
  • 본 논문에서는 SPOT 위성 영상을 사용하여 얻어진 수치 표고 모형을 결합하는 기법을 제안한다. 추출된 수치 표고 모형의 결과를 사용하여 위도와 경도로 이루어지는 격자를 생성한다. 생성된 격자 위치에서의 고도 값은 이미 획득된 수치 표고 모형으로부터 세 개의 가장 근접한 화소의 고도 값을 이용하는 삼각형 영상 워핑 방법을 사용하여 보간한다. 각 격자의 최종 고도 값은 최대 가능성 규칙의 융합 방법을 이용하여 결정한다 본 논문에 사용된 영상은 두 쌍의 스테레오 SPOT 위성영상을 사용하였으며 실험결과 수치 표고 모형의 고도 값을 성공적으로 융합할 수 있었다.

카메라와 라이다 센서 융합에 기반한 개선된 주차 공간 검출 시스템 (Parking Space Detection based on Camera and LIDAR Sensor Fusion)

  • 박규진;임규범;김민성;박재흥
    • 로봇학회논문지
    • /
    • 제14권3호
    • /
    • pp.170-178
    • /
    • 2019
  • This paper proposes a parking space detection method for autonomous parking by using the Around View Monitor (AVM) image and Light Detection and Ranging (LIDAR) sensor fusion. This method consists of removing obstacles except for the parking line, detecting the parking line, and template matching method to detect the parking space location information in the parking lot. In order to remove the obstacles, we correct and converge LIDAR information considering the distortion phenomenon in AVM image. Based on the assumption that the obstacles are removed, the line filter that reflects the thickness of the parking line and the improved radon transformation are applied to detect the parking line clearly. The parking space location information is detected by applying template matching with the modified parking space template and the detected parking lines are used to return location information of parking space. Finally, we propose a novel parking space detection system that returns relative distance and relative angle from the current vehicle to the parking space.

Creep of stainless steel under heat flux cyclic loading (500-1000℃) with different mechanical preloads in a vacuum environment using 3D-DIC

  • Su, Yong;Pan, Zhiwei;Peng, Yongpei;Huang, Shenghong;Zhang, Qingchuan
    • Smart Structures and Systems
    • /
    • 제24권6호
    • /
    • pp.759-768
    • /
    • 2019
  • In nuclear fusion reactors, the key structural component (i.e., the plasma-facing component) undergoes high heat flux cyclic loading. To ensure the safety of fusion reactors, an experimental study on the temperature-induced creep of stainless steel under heat flux cyclic loading was performed in the present work. The strains were measured using a stereo digital image correlation technique (3D-DIC). The influence of the heat haze was eliminated, owing to the use of a vacuum environment. The specimen underwent heat flux cycles ($500^{\circ}C-1000^{\circ}C$) with different mechanical preloads (0 kN, 10 kN, 30 kN, and 50 kN). The results revealed that, for a relatively large preload (for example, 50 kN), a single temperature cycle can induce a residual strain of up to $15000{\mu}{\varepsilon}$.

Multi-Scale Dilation Convolution Feature Fusion (MsDC-FF) Technique for CNN-Based Black Ice Detection

  • Sun-Kyoung KANG
    • 한국인공지능학회지
    • /
    • 제11권3호
    • /
    • pp.17-22
    • /
    • 2023
  • In this paper, we propose a black ice detection system using Convolutional Neural Networks (CNNs). Black ice poses a serious threat to road safety, particularly during winter conditions. To overcome this problem, we introduce a CNN-based architecture for real-time black ice detection with an encoder-decoder network, specifically designed for real-time black ice detection using thermal images. To train the network, we establish a specialized experimental platform to capture thermal images of various black ice formations on diverse road surfaces, including cement and asphalt. This enables us to curate a comprehensive dataset of thermal road black ice images for a training and evaluation purpose. Additionally, in order to enhance the accuracy of black ice detection, we propose a multi-scale dilation convolution feature fusion (MsDC-FF) technique. This proposed technique dynamically adjusts the dilation ratios based on the input image's resolution, improving the network's ability to capture fine-grained details. Experimental results demonstrate the superior performance of our proposed network model compared to conventional image segmentation models. Our model achieved an mIoU of 95.93%, while LinkNet achieved an mIoU of 95.39%. Therefore, it is concluded that the proposed model in this paper could offer a promising solution for real-time black ice detection, thereby enhancing road safety during winter conditions.

Wavelet Transform based Image Registration using MCDT Method for Multi-Image

  • Lee, Choel;Lee, Jungsuk;Jung, Kyedong;Lee, Jong-Yong
    • International Journal of Internet, Broadcasting and Communication
    • /
    • 제7권1호
    • /
    • pp.36-41
    • /
    • 2015
  • This paper is proposed a wavelet-based MCDT(Mask Coefficient Differential and Threshold) method of image registration of Multi-images contaminated with visible image and infrared image. The method for ensure reliability of the image registration is to the increase statistical corelation as getting the common feature points between two images. The method of threshold the wavelet coefficients using derivatives of the wavelet coefficients of the detail subbands was proposed to effectively registration images with distortion. And it can define that the edge map. Particularly, in order to increase statistical corelation the method of the normalized mutual information. as similarity measure common feature between two images was selected. The proposed method is totally verified by comparing with the several other multi-image and the proposed image registration.