• 한국멀티미디어학회논문지
• /
• 제22권5호
• /
• pp.535-546
• /
• 2019

Recently, there have been a lot of researches on the whole face replacement system, but it is not easy to obtain stable results due to various attitudes, angles and facial diversity. To produce a natural synthesis result when replacing the face shown in the video image, technologies such as face area detection, feature extraction, face alignment, face area segmentation, 3D attitude adjustment and facial transposition should all operate at a precise level. And each technology must be able to be interdependently combined. The results of our analysis show that the difficulty of implementing the technology and contribution to the system in facial replacement technology has increased in facial feature point extraction and facial alignment technology. On the other hand, the difficulty of the facial transposition technique and the three-dimensional posture adjustment technique were low, but showed the need for development. In this paper, we propose four facial replacement models such as 2-D Faceswap, OpenPose, Deekfake, and Cycle GAN, which are suitable for the Cox platform. These models have the following features; i.e. these models include a suitable model for front face pose image conversion, face pose image with active body movement, and face movement with right and left side by 15 degrees, Generative Adversarial Network.

• 한국전자통신학회논문지
• /
• 제16권1호
• /
• pp.175-182
• /
• 2021

본 논문에서는 오리와 같은 유해조류에 의한 양식장의 피해를 방지하기 위해서 머신러닝 기반 해상용 드론 개발을 목적으로 한다. 기존 드론은 공중에서 새와 충돌하거나 바다에 떨어지는 경우 유실되는 문제점을 해결하기 위해서 해상드론으로 개발하였다. 자율주행으로 작동하는 해상드론이 해상에 나타난 유해조류를 판단하기 위해 CNN기반 머신러닝 학습 알고리즘을 설계하였다. 유해조류의 위치 인식 및 추적을 위해 카메라에 라즈베리파이를 연결하여 관제 PC로 영상을 전송하도록 설계하였다. 모바일 기반 관제 센터에서 미리 GPS 좌표와 연동된 맵을 미리 제작한 후, 유해조류의 위치에 대한 GPS 위치값을 전달받아 설정된 위치로 해상용 드론이 출동하여 유해조류를 퇴치하는 자율주행 기반의 해상용 조류 퇴치 드론 시스템을 설계 및 구현하였다.

• 한국정보통신학회논문지
• /
• 제24권5호
• /
• pp.576-583
• /
• 2020

이 논문은 최근 엄청난 성장을 하고 있는 유튜브의 댓글 중 스팸 댓글을 판별하는 기법을 제안한다. 유튜브에서는 광고를 통한 수익 창출이 가능하기 때문에 인기 동영상에서 자신의 채널이나 동영상을 홍보하거나 영상과 관련 없는 댓글을 남기는 스패머(spammer)들이 나타났다. 유튜브에서는 자체적으로 스팸 댓글을 차단하는 시스템을 운영하고 있지만 여전히 제대로 차단하지 못한 스팸 댓글들이 있다. 따라서, 유튜브 스팸 댓글 판별에 대한 관련 연구들을 살펴 보고 인기 동영상인 싸이, 케이티 페리, LMFAO, 에미넴, 샤키라의 뮤직비디오 댓글 데이터에 6가지 머신러닝 기법(의사결정나무, 로지스틱 회귀분석, 베르누이 나이브 베이즈, 랜덤 포레스트, 선형 커널을 이용한 서포트 벡터 머신, 가우시안 커널을 이용한 서포트 벡터 머신)과 이들을 결합한 앙상블 모델로 스팸 탐지 실험을 진행하였다.

• 방송공학회논문지
• /
• 제27권3호
• /
• pp.283-294
• /
• 2022

딥 러닝 네트워크에서 사용되는 특징 맵은 일반적으로 영상보다 데이터가 크며 특징 맵을 전송하기 위해서는 영상의 압축률보다 더 높은 압축률이 요구된다. 본 논문은 딥러닝 기반의 영상처리에서 객체의 크기에 대한 강인성을 가지는 FPN 구조의 네트워크에서 사용되는 피라미드 특징 맵을 높은 압축률로 전송하기 위해 제안한 복원-예측 네트워크를 통해 전송된 일부 계층의 피라미드 특징 맵으로 전송하지 않은 계층의 피라미드 특징 맵을 예측하며, 압축으로 인한 손상을 복원하는 구조를 제안한다. 제안한 방법의 COCO 데이터셋 2017 Train images에 대한 객체 탐지의 성능은 rate-precision 그래프에서 VTM12.0을 통해 특징 맵을 압축한 결과 대비 BD-rate 31.25%의 성능향상을 보였고, PCA와 DeepCABAC을 통한 압축을 수행한 방법 대비 BD-rate 57.79%의 성능향상을 보였다.

• Smart Structures and Systems
• /
• 제31권4호
• /
• pp.421-436
• /
• 2023

This paper presents a vibration displacement measurement and damage identification method for a space truss structure from its vibration videos. Features from Accelerated Segment Test (FAST) algorithm is combined with adaptive threshold strategy to detect the feature points of high quality within the Region of Interest (ROI), around each node of the truss structure. Then these points are tracked by Kanade-Lucas-Tomasi (KLT) algorithm along the video frame sequences to obtain the vibration displacement time histories. For some cases with the image plane not parallel to the truss structural plane, the scale factors cannot be applied directly. Therefore, these videos are processed with homography transformation. After scale factor adaptation, tracking results are expressed in physical units and compared with ground truth data. The main operational frequencies and the corresponding mode shapes are identified by using Subspace Stochastic Identification (SSI) from the obtained vibration displacement responses and compared with ground truth data. Structural damages are quantified by elemental stiffness reductions. A Bayesian inference-based objective function is constructed based on natural frequencies to identify the damage by model updating. The Success-History based Adaptive Differential Evolution with Linear Population Size Reduction (L-SHADE) is applied to minimise the objective function by tuning the damage parameter of each element. The locations and severities of damage in each case are then identified. The accuracy and effectiveness are verified by comparison of the identified results with the ground truth data.

• 한국작물학회:학술대회논문집
• /
• 한국작물학회 2022년도 추계학술대회
• /
• pp.89-89
• /
• 2022

Soybean (Glycine max (L.) Merr.) is a representative food resource. To preserve the integrity of soybean, it is necessary to protect soybean yield and seed quality from threats of various pests and diseases. Riptortus pedestris is a well-known insect pest that causes the greatest loss of soybean yield in South Korea. This pest not only directly reduces yields but also causes disorders and diseases in plant growth. Unfortunately, no resistant soybean resources have been reported. Therefore, it is necessary to identify the distribution and movement of Riptortus pedestris at an early stage to reduce the damage caused by insect pests. Conventionally, the human eye has performed the diagnosis of agronomic traits related to pest outbreaks. However, due to human vision's subjectivity and impermanence, it is time-consuming, requires the assistance of specialists, and is labor-intensive. Therefore, the responses and behavior patterns of Riptortus pedestris to the scent of mixture R were visualized with a 3D model through the perspective of artificial intelligence. The movement patterns of Riptortus pedestris was analyzed by using time-series image data. In addition, classification was performed through visual analysis based on a deep learning model. In the object tracking, implemented using the YOLO series model, the path of the movement of pests shows a negative reaction to a mixture Rina video scene. As a result of 3D modeling using the x, y, and z-axis of the tracked objects, 80% of the subjects showed behavioral patterns consistent with the treatment of mixture R. In addition, these studies are being conducted in the soybean field and it will be possible to preserve the yield of soybeans through the application of a pest control platform to the early stage of soybeans.

• 한국심리학회지 : 문화 및 사회문제
• /
• 제11권4호
• /
• pp.83-95
• /
• 2005

본 연구는 상황인식의 첫 번째 단계인 지각, 특히 운전상황과 관련한 대부분의 정보를 획득하는 공간지각 능력과 상황인식의 다음 단계인 이해와 예측 사이의 관계를 검토하였다. 실제 도로상황을 편집한 동영상으로 구성된 실험 재료를 이용해 재인과 예측 능력을 측정하였으며, 이 두 가지 요소들을 통합하는 과제로 운전 시뮬레이터를 조작하면서 간단한 숫자 배열 규칙에 따라 결과를 계산(예측)하는 과제를 사용하였다. 본 연구의 결과를 요약하면 다음과 같다. 첫째, 운전-관련 상황에서 오퍼레이터의 공간지각 능력이 우수할수록 실제 도로상황 재인과제 수행의 민감도가 높았다. 둘째, 공간지각 능력이 좋을수록 실제 도로상황 예측과제에서의 예측률이 높았다. 마지막으로 공간지각능력이 우수할수록 이해와 예측을 통합적으로 요구되는 숫자-계산 과제에서의 수행이 우수하였다. 본 연구 결과, 운전자 상황인식 능력의 측정방법으로 공간지각능력 검사의 활용을 제안할 수 있으며, 비교적 간단한 절차인 계산검사를 통해 상황인식의 이해와 예측을 통합적으로 살펴볼 수 있음을 시사한다.

• 융합신호처리학회논문지
• /
• 제24권2호
• /
• pp.82-89
• /
• 2023

선박 구조 특성상 격실 구조는 복잡하고 협소하여 작업 과정에서 안전사고가 빈번히 발생하고 있다. 사고의 주된 원인은 구조물 충돌, 낙하물, 독성물질 누출, 화재, 폭발, 질식 등이 존재한다. 사고 발생 시 작업자의 현장 상황을 파악하는 것이 피해를 완화하는 요소 중 하나이다. 이에 안전성을 확보하기 위해 선박 내 CCTV로 현장 상황을 모니터링하고 있으나, 기존의 방식으로는 사고를 예방하기엔 어려움이 있다. 이를 해결하기 위해 안전 기술로 위치 식별, 음성/영상 통신 기능이 탑재되는 스마트 안전모가 개발 중에 있다. 또한, 작업 구역 내 환경 정보 수집 및 저장기능을 포함한 온도, 습도, 진동, 소음, 기울기(자이로 센서), 가스 센서를 사용하여 스마트 안전모를 착용한 작업자에게 위험 상황을 알릴 수 있다. 이를 통해 스마트 안전모 및 환경 센서의 사용으로 선박 내 작업자의 안전성을 강화할 수 있을 것이다.

• The Korean Journal of Physiology and Pharmacology
• /
• 제28권4호
• /
• pp.335-344
• /
• 2024

Diphenyleneiodonium (DPI) has been widely used as an inhibitor of NADPH oxidase (Nox) to discover its function in cardiac myocytes under various stimuli. However, the effects of DPI itself on Ca²⁺ signaling and contraction in cardiac myocytes under control conditions have not been understood. We investigated the effects of DPI on contraction and Ca²⁺ signaling and their underlying mechanisms using video edge detection, confocal imaging, and whole-cell patch clamp technique in isolated rat cardiac myocytes. Application of DPI suppressed cell shortenings in a concentration-dependent manner (IC₅₀ of ≅0.17 µM) with a maximal inhibition of ~70% at ~100 µM. DPI decreased the magnitude of Ca²⁺ transient and sarcoplasmic reticulum Ca²⁺ content by 20%-30% at 3 µM that is usually used to remove the Nox activity, with no effect on fractional release. There was no significant change in the half-decay time of Ca²⁺ transients by DPI. The L-type Ca²⁺ current (I_Ca) was decreased concentration-dependently by DPI (IC₅₀ of ≅40.3 µM) with ≅13.1%-inhibition at 3 µM. The frequency of Ca²⁺ sparks was reduced by 3 µM DPI (by ~25%), which was resistant to a brief removal of external Ca²⁺ and Na⁺. Mitochondrial superoxide level was reduced by DPI at 3-100 µM. Our data suggest that DPI may suppress L-type Ca²⁺ channel and RyR, thereby attenuating Ca²⁺-induced Ca²⁺ release and contractility in cardiac myocytes, and that such DPI effects may be related to mitochondrial metabolic suppression.

• 정보처리학회논문지B
• /
• 제14B권4호
• /
• pp.311-320
• /
• 2007

본 논문에서는 강건한 얼굴 포즈 추정과 실시간 표정제어가 가능한 비전 기반 3차원 얼굴 모델의 자동 표정 생성 방법 및 시스템을 제안한다. 기존의 비전 기반 3차원 얼굴 애니메이션에 관한 연구는 얼굴의 움직임을 나타내는 모션 추정을 반영하지 못하고 얼굴 표정 생성에 초점을 맞추고 있다. 그러나, 얼굴 포즈를 정확히 추정하여 반영하는 작업은 현실감 있는 얼굴 애니메이션을 위해서 중요한 이슈로 인식되고 있다. 본 연구 에서는 얼굴 포즈추정과 얼굴 표정제어가 동시에 가능한 통합 애니메이션 시스템을 제안 하였다. 제안된 얼굴 모델의 표정 생성 시스템은 크게 얼굴 검출, 얼굴 모션 추정, 표정 제어로 구성되어 있다. 얼굴 검출은 비모수적 HT 컬러 모델과 템플릿 매칭을 통해 수행된다. 검출된 얼굴 영역으로부터 얼굴 모션 추정과 얼굴 표정 제어를 수행한다. 얼굴 모션 추정을 위하여 3차원 실린더 모델을 검출된 얼굴 영역에 투영하고 광류(optical flow) 알고리즘을 이용하여 얼굴의 모션을 추정하며 추정된 결과를 3차원 얼굴 모델에 적용한다. 얼굴 모델의 표정을 생성하기 위해 특징점 기반의 얼굴 모델 표정 생성 방법을 적용한다. 얼굴의 구조적 정보와 템플릿 매칭을 이용하여 주요 얼굴 특징점을 검출하며 광류 알고리즘에 의하여 특징점을 추적한다. 추적된 특징점의 위치는 얼굴의 모션 정보와 표정 정보의 조합으로 이루어져있기 때문에 기하학적 변환을 이용하여 얼굴의 방향이 정면이었을 경우의 특징점의 변위인 애니메이션 매개변수(parameters)를 계산한다. 결국 얼굴 표정 복제는 두 개의 정합과정을 통해 수행된다. 애니메이션 매개변수 3차원 얼굴 모델의 주요 특징점(제어점)의 이동은 획득된 애니메이션 매개변수를 적용하여 수행하며, 정점 주위의 부가적 정점의 위치는 RBF(Radial Basis Function) 보간법을 통해 변형한다. 실험결과 본 논문에서 제안된 비전기반 애니메이션 시스템은 비디오 영상으로부터 강건한 얼굴 포즈 추정과 얼굴의 표정변화를 잘 반영하여 현실감 있는 애니메이션을 생성함을 입증할 수 있었다.