๐จโ๐ป Name : Tae Gyun Kim
๐ฑ h.p : 010-3069-3943
๐ง Email : kimtg0003@gmail.com
๐ฅ Github : ASOTEA
โ๏ธ Education : Kangnam University / Double Major in Data Science and Semiconductor System convergence
๐จ๐ปโ๐ย ์๊ธฐ์๊ฐ
์ ๋ ์ฌ๋๋ค์ด ์ฝ๊ฒ ์ ํ์ง ๋ชปํ๋ ๋ฐ์ดํฐ์์ ์๋ก์ด ํจํด๊ณผ ์ ๋ณด๋ฅผ ๋ฐ๊ฒฌํ๋ ๋ฐ ํฅ๋ฏธ๋ฅผ ๋๊ปด ๋ฐ์ดํฐ์ AI ๋ถ์ผ๋ฅผ ์ ํํ์์ต๋๋ค. ์ด์ ์ฒ๋ฆฌ, ์ฐ์ฃผ, ์์ฑ ๋ฑ ๋ค์ํ ํํ์ ๋ฐ์ดํฐ๋ฅผ ๋ค๋ฃจ๋ฉฐ, ์ ๋ต์ด ์ ํด์ง์ง ์์ ๋ฌธ์ ๋ฅผ ๊ฐ์ค๊ณผ ์คํ์ ํตํด ํด์ํ๋ ๊ณผ์ ์ ๋ฐ๋ณตํด ์์ต๋๋ค. ๊ฐ์ค ์ค์ ๊ณผ ์คํ ๊ณผ์ ์ ํตํด ์๋ฏธ๋ฅผ ๋์ถํ๋ ๊ฒฝํ์ ์ค์ํ๊ฒ ์๊ฐํ๋ฉฐ, ๋ถ์์ ๊ณผ์ ์ ๊ทผ๊ฑฐ๋ก ํ๋จํ ์ ์๋ ๋ฐ์ดํฐ ๋ถ์๊ฐ๋ก ์ฑ์ฅํ๊ณ ์ ํฉ๋๋ค.
๐ป Activities
๐ย ์ค๋์ค ์ธ์ด๋ชจ๋ธ์ ๊ฒฝ๋ ๋ชจ๋ธ๋ง ๋ ์ํผ ํ๊ตฌ(2025)
- SALMONN ๊ธฐ๋ฐ Audio LLM์ ๋์์ผ๋ก, ๋ฒ ์ด์ค๋ผ์ธ ์ฑ๋ฅ์ ์ ์งํ๋ฉด์ ๋ฉ๋ชจ๋ฆฌ์ ์ถ๋ก ์ง์ฐ์ ์ค์ด๊ธฐ ์ํ ๊ฒฝ๋ํ ์ ๋ต์ ์คํ์ ์ผ๋ก ํ๊ตฌํจ
- Audio Encoder, LLM, Prompt, Q-Former ๋ฑ ๊ตฌ์ฑ ์์๋ฅผ ๋ถ๋ฆฌํ์ฌ ๊ต์ฒดยท๋น๊ต ์คํ์ ์ํํ๊ณ , ์ฑ๋ฅ(AAC, ASR)๊ณผ ํจ์จ(Memory, Latency)์ ๊ธฐ์ค์ผ๋ก ์ต์ ์กฐํฉ์ ์ ์ ํจ
- ๋ฉ๋ชจ๋ฆฌ๋ฅผ ์ฝ 9.2GB์์ 5.3GB๋ก ์ ๊ฐํ๋ฉด์ AAC ์ฑ๋ฅ์ ์ ์๋ฏธํ๊ฒ ํฅ์์์ผฐ๊ณ , ASR์ ๋ฒ ์ด์ค๋ผ์ธ๊ณผ ์ ์ฌํ ์์ค์ ์ ์งํจ
๐ผ Single - Tower VLM์ ํตํฉ๋ ์๋ฒ ๋ฉ ๋ ์ด์ด ๋ณํ๋ก ์ฑ๋ฅํฅ์์ ์ํ ์ฐ๊ตฌ ์ค๊ณ(2024)
- ์ต๊ทผ AI ๋ชจ๋ธ์ ๋ฐ์ ์ ์๋ก์ด ์ํคํ ์ฒ ์ค๊ณ๋ณด๋ค ๊ธฐ์กด ํ์ ๋ชจ๋์ ์กฐํฉ๊ณผ ์ต์ ํ๊ฐ ์ฑ๋ฅ์ ๋ฏธ์น๋ ์ํฅ์ ๋ถ์ํ๋ ๋ฐฉํฅ์ผ๋ก ํ์ฅ๋๊ณ ์์
- ๋ชจ๋ธ ๋ณต์ก๋์ ์ฐ์ฐ ๋ฆฌ์์ค๋ฅผ ์ค์ด๋ฉด์๋ ๋ฉํฐ๋ชจ๋ฌ ํํ์ ์ ์งํ ์ ์๋ One-tower VLM ๊ตฌ์กฐ์ ์ฃผ๋ชฉํ์ฌ ์ฐ๊ตฌ๋ฅผ ์ค๊ณํจ
- CLIPPO๋ฅผ ๊ธฐ๋ฐ์ผ๋ก, ํตํฉ ์๋ฒ ๋ฉ ๊ตฌ์กฐ๋ฅผ ์ ์งํ ์ฑ ์ด๋ฏธ์ง ์ธ์ฝ๋(backbone)์ ๊ตฌ์ฑ ๋ณํ๊ฐ ๋ชจ๋ธ ํน์ฑ์ ๋ฏธ์น๋ ์ํฅ์ ์ด๋ก ์ ์ผ๋ก ๋ถ์ํจ
๐ ์ธ๊ณต์ง๋ฅ ๊ธฐ๋ฐ ๋ง ๋ฐ๊ตฐ ์งํ ์ง๋จ(2023)
- ๋ง์ ๋ณดํ ์ํ ๋ฐ ๋ฐ๊ตฝ ๊ฑด๊ฐ์ํ๋ฅผ ํ์ ํ ์ ์๋ ๋ณดํ ๋์์ ๋ฐ ๋ฐ๊ตฝ ์ด๋ฏธ์ง๋ฑ์ ํ์ค ๋ฐ์ดํฐ ๊ตฌ์ถ ๋ฐ ์ธ๊ณต์ง๋ฅ ํ์ฉ ์ง๋จ์ผ๋ก ๋ง ์ฌ์ก ๋๊ฐ์ ๋น์ฉ ์ ๊ฐ๊ณผ ๋ง ์ฐ์ ์ก์ฑ์ ์ง๋ฅํ ๊ธฐ๋ฐ ๋ง๋ จ
- Deeplabcut๋ฅผ ์ด์ฉํ์ฌ ๋ง ๋ณดํ ๋ฐ์ดํฐ๋ฅผ ๊ฐ์ด๋๋ผ์ธ์ ๋ฐ๋ผ ๋ผ๋ฒจ๋ง
- HRNet์ ์ด์ฉํด์ ๋ง ๋ณดํ ๋ฐ์ดํฐ point ์์ธก ํ ๋ง ๋ณดํ ๋ฐ์ดํฐ ๋ฆฌ๋ผ๋ฒจ๋ง
๐ ์ฐ์ฃผ์ ์จ๊ฒจ์ง ๋น๋ฐ์ ํธ๋ ํต์ฌ ๋๊ตฌ(2023)
- ์๋ฏผ ํ๋ก์ ํธ(Galaxy Zoo)์ ๋ํด์ ์๋ฆฌ๊ณ ์ง์ ์ฅ๋ฒฝ์ ๋ฎ์ถ ํ์ ์์
- ์นํ์ด์ง์ ๋์์ ์งํํ๊ธฐ ๋๋ฌธ์ ๋ถ๋ฅ์ ๋ชจ๋ธ์ ์ฑ๋ฅ๋ณด๋ค ์๋, ์ต์ ํ ๊ด์ ์์ ์ ๊ทผ
- MVP ๋ฐฉ์์ผ๋ก ๋ฐ๋ชจ ๊ตฌํ(Streamit)
๐บ ์ค๋งํธ ๊ณต์ฅ์ ์ ์ด์์คํ ๊ตฌ์ถ์ ์ํ ์์ฐํ ํ์ง ๋ถ๋ฅ(2022)
- Tabular data์ ์๋ ์ด์์น ์ ์ง ๋ฐ ๊ฒฐ์ธก์น๋ฅผ 0์ฒ๋ฆฌ F1 Score(0.65412 โ 0.68412)
- Caboost์ feature_importances๋ฅผ ์ด์ฉํด์ columns 3331์ค์์ 300๊ฐ ์ถ์ถ F1 Score (0.68412 โ 0.70444)
๐ Stacks
Python Matplotlib Numpy Pandas Seaborn
Scikit_learn TenserFlow Pytorch R studio
๐ย Education
- Boostcamp ai 7th
- ๊ฐ๋จ๋ํ๊ต: ๋ฐ์ดํฐ ์ฌ์ด์ธ์ค/ ๋ฐ๋์ฒด์์คํ ์ตํฉ ์ ๊ณต
- LG Aimers Hackathon
- ํ์ด์ ICT ๋ฉํ ๋ง
๊ธฐ๊ฐ : 24.08 ~ 25.02 / ์๋ฃ : 2025.02
ํ์ : 3.9(4.5) / ์กธ์ : 2024.08
2nd, 3rd, 4th
๊ธฐ๊ฐ : 23.04 ~ 23.11