학력EDUCATION

  • 연세대학교 대학원 석사

    Computer Vision & Graphics Lab (CVML)

    2017.03 - 2019.02 (2Y)

  • 연세대학교 공과대학 학사

    공과대학 · 글로벌융합공학부

    2014.03 - 2017.02 (3Y, 조기 졸업)

  • American School of Bombay

    International Baccalaureate · Math / Physics / Chemistry HL

    2010.03 - 2013.05 (3Y 3M)

연구 프로젝트RESEARCH PROJECTS

대학원 · Computer Vision & Graphics Lab (CVML)

학부 · 글로벌융합공학부

  • 파장을 통한 3D 캡처 3D Capture with Wavelength

    2016.09 - 2017.02 (6M)

    MATLAB

    빛의 파장 정보를 이용해 물체의 3차원 형상을 측정하고 복원하는 분야

  • 무화면 3D 디스플레이 Glassless 3D Display

    2016.03 - 2016.08 (6M)

    MATLAB

    화면 없이 공간에 입체 영상을 띄우는 디스플레이 분야

  • 안면 인식 Face Recognition

    2015.12 - 2016.02 (3M)

    MATLABOpenCV

    이미지 속 얼굴을 찾아 누구인지 식별하는 분야

  • 자율주행 자동차 Autonomous Vehicle

    2014.12 - 2015.02 (3M)

    MATLAB

    센서와 영상으로 주변을 인식해 사람 없이 차량을 주행하도록 제어하는 분야

논문PUBLICATIONS

  • Image and Vision Computing 2019 · SCIE · 1저자 · 스타일 전이 연구

    Semantic-aware Neural Style Transfer

    J Park, S Park, H Shim

    석사 학위논문 「Hierarchical Semantic Aware Neural Style Transfer」의 저널 게재본 (Vol. 87, pp. 13–23)

    인용18DOI ↗

    단어 임베딩으로 사진과 그림의 영역을 의미적으로 대응시키고, 도메인 적응으로 그림의 의미 영역을 추출해 기존 스타일 전이의 의미 불일치 문제 해결

    ▸초록 보기

    This study proposes a semantic-aware style transfer method for resolving semantic mismatch problems in existing algorithms. As the primary focus of this study, the consideration of semantic matching is expected to improve the quality of artistic style transfer. Here, each image is partitioned into several semantic regions for both a target photograph and a source painting. All partitioned regions of the target are then associated with one of the partitioned regions in the source according to their semantic interpretation. Given a pair of target and source regions, style is learned from the source region whereas content is learned from the target region. By integrating both the style and content components, we can successfully generate a stylized output. Unlike previous approaches, we obtain the best semantic match between regions using word embeddings. Thus, we guarantee that semantic matching is always established between the target and source. Moreover, it is unreliable to partition a painting using existing algorithms because of statistical gaps between the real photographs and paintings. To bridge such gaps, we apply a domain adaptation technique on the source painting to extract its semantic regions. We evaluated the effectiveness of the proposed algorithm based on a thorough experimental analysis and comparison. Through a user study, it is confirmed that semantic information considerably influences the quality assessment of style transfer.

  • IPIU 2018 · 1저자 · 스타일 전이 연구

    Realistic Fast Neural Style Transfer using Generative Adversarial Network Discriminator Loss

    J Park, H Shim

    느리고 왜곡이 생기는 기존 스타일 전이의 한계를 미리 학습한 GAN을 활용해 빠르고 현실적인 스타일 전이로 개선

    ▸초록 보기

    스타일 전이에 대한 관심은 Gatys et al.이 처음 Convolutional Neural Network를 이용해 스타일을 이전하는 방법을 제안한 이후 급격하게 증가하고 있다. 이에 추가적으로 더 빠르게 만들거나, 더 면밀하게 스타일을 이전하고자 하는 연구하는 사례 또한 늘고 있다. 하지만, 현실적인 결과물을 뽑고자 하는 연구는 많지 않다. 이 논문에서는 Generative Adversarial Network의 판별기를 이용한 현실적인 스타일 이전법을 제안하고자 한다. 이 논문은 판별기가 실제 이미지와 스타일 전이를 통해 생성된 이미지를 구분하는 능력을 가지고 있음을 보이고, 이를 이전의 스타일 전이 네트워크와 접목하여 새로운 현실적 스타일 전이가 가능함을 주장한다.

  • arXiv 2018 · 2저자 · 객체 위치 추정 연구

    Improved Techniques for Weakly-Supervised Object Localization

    J Choe, J Park, H Shim

    프리프린트 (BMVC 2018 투고)

    arXiv ↗

    객체 위치 추정에서 객체의 덜 두드러지는 부분까지 학습하도록 데이터 증강과 CNN 학습 기법을 개선해 위치 추정 정확도 향상

    ▸초록 보기

    We propose an improved technique for weakly-supervised object localization. Conventional methods have a limitation that they focus only on most discriminative parts of the target objects. The recent study addressed this issue and resolved this limitation by augmenting the training data for less discriminative parts. To this end, we employ an effective data augmentation for improving the accuracy of the object localization. In addition, we introduce improved learning techniques by optimizing Convolutional Neural Networks (CNN) based on the state-of-the-art model. Based on extensive experiments, we evaluate the effectiveness of the proposed approach both qualitatively and quantitatively. Especially, we observe that our method improves the Top-1 localization accuracy by 21.4 - 37.3% depending on configurations, compared to the current state-of-the-art technique of the weakly-supervised object localization.

  • ICCV Workshop 2017 · 공동 1저자 · 로우샷 러닝 연구

    Face Generation for Low-Shot Learning Using Generative Adversarial Networks

    J Choe, S Park, K Kim, J Park, D Kim, H Shim

    인용44DOI ↗

    적은 양의 데이터로 학습하는 로우샷 러닝에서, GAN으로 데이터셋을 확장해 안정적인 안면 인식 학습 구현

    ▸초록 보기

    Recently, low-shot learning has been proposed for handling the lack of training data in machine learning. Despite of the importance of this issue, relatively less efforts have been made to study this problem. In this paper, we aim to increase the size of training dataset in various ways to improve the accuracy and robustness of face recognition. In detail, we adapt a generator from the Generative Adversarial Network (GAN) to increase the size of training dataset, which includes a base set, a widely available dataset, and a novel set, a given limited dataset, while adopting transfer learning as a backend. Based on extensive experimental study, we conduct the analysis on various data augmentation methods, observing how each affects the identification accuracy. Finally, we conclude that the proposed algorithm for generating faces is effective in improving the identification accuracy and coverage at the precision of 99% using both the base and novel set.

인용 수 기준 - Crossref (기준 일자: 2026.11.05)

기타MISCELLANEOUS

이수

IB 이수UI / UX 이수경제학 이수알고리즘 이수머신러닝 전공어셈블리어 이수미국 / 인도 유학

수상

ICCVW 대회 수상브레인스토밍 관련 대회 수상