Project
๐๐ผโโ๏ธ
์์ฑ์์์์์ ํธ๋์คํฌ๋จธ ๊ตฌ์กฐ ๊ธฐ๋ฐ ํ์ ํ์ง/์ธ์ ์ฐ๊ตฌ
Research on target detection/recognition from satellite imagery based on transformer structures
In charge of
๊น์์ฐฌ (yechankim@gm.gist.ac.kr)
Funded by
ADD ๊ตญ๋ฐฉ๊ณผํ์ฐ๊ตฌ์
Graphical Abstract
Motivation
์ค์ธ๊ณ ๋๋ฉ์ธ์์ ์์ ๋ด ํ์ ์ ํ์ง ๋ฐ ์ธ์์ ์ํด ๋ฅ๋ฌ๋ ๊ธฐ๋ฐ์ ์ธ๊ณต์ง๋ฅ ๋ชจ๋ธ์ด ํฐ ์ฃผ๋ชฉ์ ๋ฐ๊ณ ์์
ํนํ R-CNN ๋ฐ YOLO ๊ณ์ด ๋ฑ ๋ฅ๋ฌ๋ ๊ธฐ๋ฐ์ ๊ฐ์ฒด ํ์ง ๋ชจ๋ธ์ ํฐ ์ฑ๋ฅ ํฅ์์ ๋ฌ์ฑํ ๋ฐ ์์ผ๋ฉฐ, ์ต๊ทผ ์ค์ง๋ํ์ต (Semi-supervised Learning), ์ง์ ์ฆ๋ฅ (Knowledge Distillation)๋ฅผ ์ด์ฉํ ์ต์ ํ ๊ธฐ๋ฒ๊ณผ ํธ๋์คํฌ๋จธ (Transformer)์ ๊ฐ์ ์๋ก์ด ์ํคํ ์ฒ์ ๋ฑ์ฅ์ ๋์ฑ ํฅ์๋ ํ์ง ๋ฐ ์ธ์์ ๊ฐ๋ฅ์ผ ํจ
ํ์ง๋ง ํ์ฌ ํธ๋์คํฌ๋จธ ๋ชจ๋ธ์ ์ผ๋ฐ ์์์ ๋์์ผ๋ก ํ ์ฐ๊ตฌ๊ฐ ๋ค์์ด๋ฉฐ, ์์ฑ ์์์ ๋์์ผ๋ก ํ ์ฐ๊ตฌ๋ ์์ง ํ๋ฐํ์ง ์์ ํธ์
ํนํ ์ต๊ทผ ๋ง์ ๊ตญ๊ฐ์์ ์ ์ฐฐ์์ฑ ๊ฐ๋ฐ์ ์ฐฉ์ํ๋ฐ, ์ ์ ์ ํํ ์ ์ฐฐํ์ ๊ฐ์ง ๋ฐ ์ธ์์ ์ํ ํธ๋์คํฌ๋จธ ๋ชจ๋ธ ์ฐ๊ตฌ๋ ๋ฏธ๋ ๊ตญ๋ฐฉ ๊ธฐ์ ๋ ฅ ํ๋ณด๋ฅผ ์ํด ํ์ํจ
Research Goal
์ต์ข ๋ชฉํ
๊ด์ญ ์์ฑ ์์์ ์ ํฉํ ํ์ ํ์ง ํธ๋์คํฌ๋จธ ์ํคํ ์ฒ ์ฐ๊ตฌ
์ธ๋ถ ์ฐ๊ตฌ๋ชฉํ
์์ฑ ์์ ์ ๋๊ท๋ชจ ๊ตฐ ํ์ ํ์ง ํฉ์ฑ ๋ฐ์ดํฐ ๊ตฌ์ถ ์๋ํ ์ฐ๊ตฌ
์์ฑ์์ ํ์ ํ์ง์ ์ ํฉํ ๋ฐ์ดํฐ ์ฆ๊ฐ ๊ธฐ๋ฒ ์ฐ๊ตฌ
์์ฑ์์์ ์ ํฉํ ํ์ ํ์ง ํธ๋์คํฌ๋จธ ๋ชจ๋ธ ๋ฐ ์ต์ ํ ๊ธฐ๋ฒ ์ฐ๊ตฌ
์ด๊ณ ํด์๋ ๊ด์ญ ์์ฑ์์์ ์ ํฉํ ๋ณ๋ ฌ ์ฒ๋ฆฌ ํ๋ ์์ํฌ / ์ถ๋ก ๊ณ ์ํ ๊ธฐ๋ฒ ์ฐ๊ตฌ
๋น๊ณ ์ฌํญ
์ฃผ์ ์์ด๋์ด ๋ฐ ์คํ ๊ณํ์ ๋ณด์ ๋ฌธ์ ๋ก ๊ณต๊ฐํ ์ ์์
๋จ, ๋ ผ๋ฌธ ๊ฒ์ฌ / ํนํ ๋ฑ๋ก ๋ฑ์ผ๋ก ๊ธฐ์ ๋ณดํธ๊ฐ ๊ฐ๋ฅํ ๊ฒฝ์ฐ์ ํํด, ๊ฐ๋ฐ ์๋ฃ๋ ๊ธฐ์ ์ ๋ณธ ํํ์ด์ง๋ฅผ ํตํด ๊ณต๊ฐ ์์ ย
Contributions
๊ธฐ๋ํจ๊ณผ
Roles & Responsibilities
๊น์์ฐฌ
์ค๋ฌด์ฑ ์
๊ตฐ ํ์ ํ์ง์ฉ ๋ฐ์ดํฐ ์๋ ์์ฑ ์ฐ๊ตฌ (์๋ฎฌ๋ ์ด์ ๊ธฐ๋ฐ)
ํ์ ํ์ง ๋ชจ๋ธ ์ํคํ ์ฒ ์ค๊ณ
ํ์ ํ์ง ๋ชจ๋ธ ์ต์ ํ ์ฐ๊ตฌ
๋ฐ์ข ํ
๊ตฐ ํ์ ํ์ง์ฉ ๋ฐ์ดํฐ ์๋ ์์ฑ ์ฐ๊ตฌ (์๋ฎฌ๋ ์ด์ ๊ธฐ๋ฐ)
๊น์ํ
๊ตฐ ํ์ ํ์ง์ฉ ๋ฐ์ดํฐ ์๋ ์์ฑ ์ฐ๊ตฌ (์๋ฎฌ๋ ์ด์ ๊ธฐ๋ฐ)
๊น์ฑํ
๊ตฐ ํ์ ํ์ง์ฉ ๋ฐ์ดํฐ ์์ฑ ์ ์ด๋ ธํ ์ด์ ๋ฌด๊ฒฐ์ฑ ๊ฒ์ฌ ๊ธฐ๋ฒ ๊ฐ๋ฐ
์ด๋ ธํ ์ด์ ์ ์ ํดํท ๊ฐ๋ฐ
๊น์์ฐ
๊ตฐ ํ์ ํ์ง ๋ชจ๋ธ ํ๋ จ ์ด์ง์ ์ํ ๋ฐ์ดํฐ ์ฆ๊ฐ ์ฐ๊ตฌ
์ด๊ณ ํด์๋ ๊ด์ญ ์์ฑ์์์ ์ ํฉํ ๋ณ๋ ฌ ์ฒ๋ฆฌ ํ๋ ์์ํฌ ๊ฐ๋ฐ
Acknowledgement
๐ ๊ณ ์๋ฏผ
(2022-2023.8 ์ฐธ์ฌ)
๊ฐ์ ํ๊ฒฝ์์ ์นด๋ฉ๋ผ ํ๋ ฌ ํ๋ / 3D -> 2D Data Point Projection ์๊ณ ๋ฆฌ์ฆ ๊ฐ๋ฐ ์ ์๋ฌธ
Raw Meta Data๋ก๋ถํฐ Bounding Box ์ถ์ถ ์๊ณ ๋ฆฌ์ฆ ๊ฐ๋ฐ ์ ์๋ฌธ
๐ ์ค์ค๊ท
(2022-2023.12 ์ฐธ์ฌ)
์ ํ์ฐ๊ตฌ (๋ฐ์ดํฐ ๋ฐ ๋ชจ๋ธ) ์กฐ์ฌ ์ํ
๋ฐ์ดํฐ ์๊ฐํ ๋๊ตฌ ๊ฐ๋ฐ
์ด๋ ธํ ์ด์ ์ ์ ํดํท ๊ฐ๋ฐ
Achievements
๊ตญ๋ด ์ปจํผ๋ฐ์ค
๊น์์ฐฌ, ๋ฐ์ข ํ, ์ค์ค๊ท , ๊ณ ์๋ฏผ, ์ ๋ฌธ๊ตฌ. "์์ฑ์์์์์ ๊ตฐ ํ์ ํ์ง ๊ณ ๋ํ๋ฅผ ์ํ ๊ฐ์ ๋ฐ์ดํฐ ์์ฑ ์ฐ๊ตฌ", Korea Computer Congress 2023 (๊ตญ๋ฐฉSW๋ถ์ผ ์ต์ฐ์๋ ผ๋ฌธ์)
๊น์์ฐฌ, ๋ฐ์ข ํ, ์ค์ค๊ท , ๊ณ ์๋ฏผ, ์ ๋ฌธ๊ตฌ. "๊ตฐ ํ์ ํ์ง๋ฅผ ์ํ ๊ดํ-์ดํ์ ์์ ์์ฑ์์ ๊ฐ์ ๋ฐ์ดํฐ ์์ฑ ์ฐ๊ตฌ", Korea Software Congress 2023
๊น์์ฐฌ, ๋ฐ์ข ํ, ์ค์ค๊ท , ์ค์์ฐ, ์ ๋ฌธ๊ตฌ. "Dynamic Backbone Freezing: ์๊ฒฉํ์ฌ ํ์ ํ์ง ๋ชจ๋ธ์ ์ ํฉํ ํน์ง ์ถ์ถ์ ์ํ ๋ฐฑ๋ณธ์ ์๋ก์ด ๋ฏธ์ธ์กฐ์ ๊ธฐ๋ฒ", Korea Software Congress 2023
๊ตญ๋ด ํนํ
๊น์์ฐฌ, ๋ฐ์ข ํ, ์ ๋ฌธ๊ตฌ. "ํ์ ํ์ง๋ฅผ ์ํ ๊ฐ์ ์์ ๋ฐ์ดํฐ ์์ฑ ์ฅ์น, ๋ฐฉ๋ฒ ๋ฐ ์ปดํจํฐ ํ๋ก๊ทธ๋จ", ๊ตญ๋ด ์ถ์๋ฒํธ: 10-2023-0156525, ์ถ์์ผ์: 2023.11.13.