딥러닝을 활용한 컴퓨터 비전과 기하학 문제를 해결하는 연구를 주로 합니다.
I am interested in solving computer vision and geometry problems using deep learning.

• 최근 연구 (Accepted: 8 October 2024, Published: 18 October 2024)

  • Multi-modal CrossViT using 3D Spatial Information for Visual Localization
  • Online
  • Visual Localization 문제를 Deep Metric Learning으로 풀어내어 SCIE 급 저널에 1저자로 논문을 작성하였습니다. (Code)

• 컴퓨터공학과 석사 (2022.03 ~ 2024.02)

  • 석사학위논문 : 영상 위치 파악을 위한 공간적 CrossViT 기반 다중 모달 메트릭 학습
  • GPA : 4.26 / 4.5

• SKT AI Fellowship 5기 (2023.05 ~ 2023.11)

  • 우수상(3위) 수상
  • AI 기반 고화질 3D 변환 기술 연구 (NeRF: Neural Radiance Fields)
  • SKT AI Fellowship 5기 최종 발표 영상
  • SKT AI Feillowship 6기 모집 영상 인터뷰

• Deep Metric Learning(좌) : LLM 및 Vision의 Foundation model로, 유사한 데이터의 임베딩 벡터는 서로 가까워지도록, 다른 데이터의 임베딩 벡터는 서로 멀어지도록 학습하는 딥러닝 기법.

  • AI Service : LLM, Multi-Modal, Computer Vision, OpenAI API, VectorDB, LlamaIndex , LangChain , etc

• Visual Localization(중앙) : 대규모 데이터셋에서의 카메라 매핑 및 카메라 포즈를 추정하는 기술 (로보틱스, 자율주행, AR 등에 적용).

• Neural Radiance Fields, 3D Gaussian Splatting(우) : 카메라 촬영만으로 조명변화를 고려한 고화질의 3D를 제작하는 인공지능 기술 (VFX, 디지털 트윈, XR 등에 적용).

• And other computer vision tasks : Object Detection, Object Segmentation, Image Generation and Translation, Weakly Supervised Learning, Self-supervised Learning, Knowledge distillation model for Computer vision, Local Feature Matching, Dense Correspondence, 3D Computer Vision, Multi-Modal Model

• Github 페이지 바로가기
• 프로젝트 개요 :
  * 기간: 4개월 (2024-05 ~ 2024-08)
  * 유형: 개인 프로젝트
  * 역할: 벡터DB와 LLM 기반 상품 검색 및 추천 시스템 개발
  * 목적 : Deep Metric Learning 및 이미지 검색에 관한 석사 연구 경험을 확장하여, LLM을 활용한 상품 검색 및 추천 시스템 개발

• International Journal (SCIE)
  • 2024.10. Multi-modal CrossViT using 3D Spatial Information for Visual Localization
    • 1 저자
    • Multimedia Tools and Applications
  • 2023.03. Clustering Reference Images Based on Covisibility for Visual Localization
    • 2 저자
    • CMC-Computers, Materials & Continua
• 석사 학위 논문
  • 2023.12. 영상 위치 파악을 위한 공간적 CrossViT 기반 다중 모달 메트릭 학습
    • 1 저자
• Domestic Journal (KCI)
  • 2022.04. 시각 장애인의 보행 보조를 위한 점자블록 인식 정확도 향상 방안 : YOLOv5와 꼭짓점 좌표 분석 활용
    • 발표영상
    • 1 저자
    • 우수논문 선정
    • 2021 한국정보과학회 최우수논문상 수상 (1위)
• Domestic Conference
  • 2023.09. NeRF 배경 장면 제작을 위한 최적의 카메라 궤적 (Domestic Conference)
    • 발표영상
    • 1 저자
    • 2023 한국인공지능학술대회
  • 2021.06 안정적인 점자블록의 인식을 위한 YOLOv5와 평균 해시 매칭 기법 연구 (Domestic Conference)
    • 2 저자
    • 2021 한국정보과학회

• SKT AI Fellowship 5기, AI기반 고화질 3D 변환 기술 (2023.05 ~ 2023.10) [우수상(3위) 수상]

  • 팀장 역할 수행 (프로젝트 전체 파이프라인 기획 및 개발)
  • 연구계획
  • 연구과정
  • 연구결과
  • 최종 발표 영상

• Capstone Design (학부 졸업 작품) (2021)

  • 딥러닝을 활용한 위험상황 인지 시스템 개발
  • Summary PDF / 발표영상
  • 최우수상 수상 (1위)

• 도전성 동부직포를 이용한 공기 환기필터 교체 시기 알림장치
  • 출원일 2020년 12월 15일, 등록일 2022년 04월 22일
  • 특허번호 : 제 10-2391293 호