๐Ÿ‘จโ€๐Ÿ’ป Name : Tae Gyun Kim

๐Ÿ“ฑ h.p : 010-3069-3943

๐Ÿ“ง Email : kimtg0003@gmail.com

๐Ÿ–ฅ Github : ASOTEA

โœ๏ธ Education : Kangnam University / Double Major in Data Science and Semiconductor System convergence


๐Ÿ‘จ๐Ÿปโ€๐ŸŽ“ย ์ž๊ธฐ์†Œ๊ฐœ


์ €๋Š” ์‚ฌ๋žŒ๋“ค์ด ์‰ฝ๊ฒŒ ์ ‘ํ•˜์ง€ ๋ชปํ•˜๋Š” ๋ฐ์ดํ„ฐ์—์„œ ์ƒˆ๋กœ์šด ํŒจํ„ด๊ณผ ์ •๋ณด๋ฅผ ๋ฐœ๊ฒฌํ•˜๋Š” ๋ฐ ํฅ๋ฏธ๋ฅผ ๋А๊ปด ๋ฐ์ดํ„ฐ์™€ AI ๋ถ„์•ผ๋ฅผ ์„ ํƒํ•˜์˜€์Šต๋‹ˆ๋‹ค. ์ด์ƒ ์ฒ˜๋ฆฌ, ์šฐ์ฃผ, ์Œ์„ฑ ๋“ฑ ๋‹ค์–‘ํ•œ ํ˜•ํƒœ์˜ ๋ฐ์ดํ„ฐ๋ฅผ ๋‹ค๋ฃจ๋ฉฐ, ์ •๋‹ต์ด ์ •ํ•ด์ง€์ง€ ์•Š์€ ๋ฌธ์ œ๋ฅผ ๊ฐ€์„ค๊ณผ ์‹คํ—˜์„ ํ†ตํ•ด ํ•ด์„ํ•˜๋Š” ๊ณผ์ •์„ ๋ฐ˜๋ณตํ•ด ์™”์Šต๋‹ˆ๋‹ค. ๊ฐ€์„ค ์„ค์ •๊ณผ ์‹คํ—˜ ๊ณผ์ •์„ ํ†ตํ•ด ์˜๋ฏธ๋ฅผ ๋„์ถœํ•˜๋Š” ๊ฒฝํ—˜์„ ์ค‘์š”ํ•˜๊ฒŒ ์ƒ๊ฐํ•˜๋ฉฐ, ๋ถ„์„์˜ ๊ณผ์ •์„ ๊ทผ๊ฑฐ๋กœ ํŒ๋‹จํ•  ์ˆ˜ ์žˆ๋Š” ๋ฐ์ดํ„ฐ ๋ถ„์„๊ฐ€๋กœ ์„ฑ์žฅํ•˜๊ณ ์ž ํ•ฉ๋‹ˆ๋‹ค.

๐Ÿ’ป Activities


๐Ÿ”˜ย ์˜ค๋””์˜ค ์–ธ์–ด๋ชจ๋ธ์˜ ๊ฒฝ๋Ÿ‰ ๋ชจ๋ธ๋ง ๋ ˆ์„œํ”ผ ํƒ๊ตฌ(2025)

  • SALMONN ๊ธฐ๋ฐ˜ Audio LLM์„ ๋Œ€์ƒ์œผ๋กœ, ๋ฒ ์ด์Šค๋ผ์ธ ์„ฑ๋Šฅ์„ ์œ ์ง€ํ•˜๋ฉด์„œ ๋ฉ”๋ชจ๋ฆฌ์™€ ์ถ”๋ก  ์ง€์—ฐ์„ ์ค„์ด๊ธฐ ์œ„ํ•œ ๊ฒฝ๋Ÿ‰ํ™” ์ „๋žต์„ ์‹คํ—˜์ ์œผ๋กœ ํƒ๊ตฌํ•จ
  • Audio Encoder, LLM, Prompt, Q-Former ๋“ฑ ๊ตฌ์„ฑ ์š”์†Œ๋ฅผ ๋ถ„๋ฆฌํ•˜์—ฌ ๊ต์ฒดยท๋น„๊ต ์‹คํ—˜์„ ์ˆ˜ํ–‰ํ•˜๊ณ , ์„ฑ๋Šฅ(AAC, ASR)๊ณผ ํšจ์œจ(Memory, Latency)์„ ๊ธฐ์ค€์œผ๋กœ ์ตœ์  ์กฐํ•ฉ์„ ์„ ์ •ํ•จ
  • ๋ฉ”๋ชจ๋ฆฌ๋ฅผ ์•ฝ 9.2GB์—์„œ 5.3GB๋กœ ์ ˆ๊ฐํ•˜๋ฉด์„œ AAC ์„ฑ๋Šฅ์„ ์œ ์˜๋ฏธํ•˜๊ฒŒ ํ–ฅ์ƒ์‹œ์ผฐ๊ณ , ASR์€ ๋ฒ ์ด์Šค๋ผ์ธ๊ณผ ์œ ์‚ฌํ•œ ์ˆ˜์ค€์„ ์œ ์ง€ํ•จ

๐Ÿ—ผ Single - Tower VLM์˜ ํ†ตํ•ฉ๋œ ์ž„๋ฒ ๋”ฉ ๋ ˆ์ด์–ด ๋ณ€ํ™”๋กœ ์„ฑ๋Šฅํ–ฅ์ƒ์„ ์œ„ํ•œ ์—ฐ๊ตฌ ์„ค๊ณ„(2024)

  • ์ตœ๊ทผ AI ๋ชจ๋ธ์˜ ๋ฐœ์ „์€ ์ƒˆ๋กœ์šด ์•„ํ‚คํ…์ฒ˜ ์„ค๊ณ„๋ณด๋‹ค ๊ธฐ์กด ํ•˜์œ„ ๋ชจ๋“ˆ์˜ ์กฐํ•ฉ๊ณผ ์ตœ์ ํ™”๊ฐ€ ์„ฑ๋Šฅ์— ๋ฏธ์น˜๋Š” ์˜ํ–ฅ์„ ๋ถ„์„ํ•˜๋Š” ๋ฐฉํ–ฅ์œผ๋กœ ํ™•์žฅ๋˜๊ณ  ์žˆ์Œ
  • ๋ชจ๋ธ ๋ณต์žก๋„์™€ ์—ฐ์‚ฐ ๋ฆฌ์†Œ์Šค๋ฅผ ์ค„์ด๋ฉด์„œ๋„ ๋ฉ€ํ‹ฐ๋ชจ๋‹ฌ ํ‘œํ˜„์„ ์œ ์ง€ํ•  ์ˆ˜ ์žˆ๋Š” One-tower VLM ๊ตฌ์กฐ์— ์ฃผ๋ชฉํ•˜์—ฌ ์—ฐ๊ตฌ๋ฅผ ์„ค๊ณ„ํ•จ
  • CLIPPO๋ฅผ ๊ธฐ๋ฐ˜์œผ๋กœ, ํ†ตํ•ฉ ์ž„๋ฒ ๋”ฉ ๊ตฌ์กฐ๋ฅผ ์œ ์ง€ํ•œ ์ฑ„ ์ด๋ฏธ์ง€ ์ธ์ฝ”๋”(backbone)์˜ ๊ตฌ์„ฑ ๋ณ€ํ™”๊ฐ€ ๋ชจ๋ธ ํŠน์„ฑ์— ๋ฏธ์น˜๋Š” ์˜ํ–ฅ์„ ์ด๋ก ์ ์œผ๋กœ ๋ถ„์„ํ•จ

๐ŸŽ ์ธ๊ณต์ง€๋Šฅ ๊ธฐ๋ฐ˜ ๋ง ๋ฐœ๊ตฐ ์งˆํ™˜ ์ง„๋‹จ(2023)

  • ๋ง์˜ ๋ณดํ–‰ ์ƒํƒœ ๋ฐ ๋ฐœ๊ตฝ ๊ฑด๊ฐ•์ƒํƒœ๋ฅผ ํŒŒ์•…ํ•  ์ˆ˜ ์žˆ๋Š” ๋ณดํ–‰ ๋™์˜์ƒ ๋ฐ ๋ฐœ๊ตฝ ์ด๋ฏธ์ง€๋“ฑ์˜ ํ‘œ์ค€ ๋ฐ์ดํ„ฐ ๊ตฌ์ถ• ๋ฐ ์ธ๊ณต์ง€๋Šฅ ํ™œ์šฉ ์ง„๋‹จ์œผ๋กœ ๋ง ์‚ฌ์œก ๋†๊ฐ€์˜ ๋น„์šฉ ์ ˆ๊ฐ๊ณผ ๋ง ์‚ฐ์—… ์œก์„ฑ์˜ ์ง€๋Šฅํ™” ๊ธฐ๋ฐ˜ ๋งˆ๋ จ
  • Deeplabcut๋ฅผ ์ด์šฉํ•˜์—ฌ ๋ง ๋ณดํ–‰ ๋ฐ์ดํ„ฐ๋ฅผ ๊ฐ€์ด๋“œ๋ผ์ธ์— ๋”ฐ๋ผ ๋ผ๋ฒจ๋ง
  • HRNet์„ ์ด์šฉํ•ด์„œ ๋ง ๋ณดํ–‰ ๋ฐ์ดํ„ฐ point ์˜ˆ์ธก ํ›„ ๋ง ๋ณดํ–‰ ๋ฐ์ดํ„ฐ ๋ฆฌ๋ผ๋ฒจ๋ง

๐ŸŒŒ ์šฐ์ฃผ์˜ ์ˆจ๊ฒจ์ง„ ๋น„๋ฐ€์„ ํ‘ธ๋Š” ํ•ต์‹ฌ ๋„๊ตฌ(2023)

  • ์‹œ๋ฏผ ํ”„๋กœ์ ํŠธ(Galaxy Zoo)์— ๋Œ€ํ•ด์„œ ์•Œ๋ฆฌ๊ณ  ์ง„์ž… ์žฅ๋ฒฝ์„ ๋‚ฎ์ถœ ํ•„์š” ์žˆ์Œ
  • ์›นํŽ˜์ด์ง€์™€ ๋™์‹œ์— ์ง„ํ–‰ํ•˜๊ธฐ ๋•Œ๋ฌธ์— ๋ถ„๋ฅ˜์˜ ๋ชจ๋ธ์˜ ์„ฑ๋Šฅ๋ณด๋‹ค ์†๋„, ์ตœ์ ํ™” ๊ด€์ ์—์„œ ์ ‘๊ทผ
  • MVP ๋ฐฉ์‹์œผ๋กœ ๋ฐ๋ชจ ๊ตฌํ˜„(Streamit)

๐Ÿ“บ ์Šค๋งˆํŠธ ๊ณต์žฅ์˜ ์ œ์–ด์‹œ์Šคํ…œ ๊ตฌ์ถ•์„ ์œ„ํ•œ ์ƒ์‚ฐํ’ˆ ํ’ˆ์งˆ ๋ถ„๋ฅ˜(2022)

  • Tabular data์— ์žˆ๋Š” ์ด์ƒ์น˜ ์œ ์ง€ ๋ฐ ๊ฒฐ์ธก์น˜๋ฅผ 0์ฒ˜๋ฆฌ F1 Score(0.65412 โ†’ 0.68412)
  • Caboost์— feature_importances๋ฅผ ์ด์šฉํ•ด์„œ columns 3331์ค‘์—์„œ 300๊ฐœ ์ถ”์ถœ F1 Score (0.68412 โ†’ 0.70444)

๐Ÿ›  Stacks


Python Matplotlib Numpy Pandas Seaborn Scikit_learn TenserFlow Pytorch R studio

๐ŸŽ“ย Education


- Boostcamp ai 7th

- ๊ฐ•๋‚จ๋Œ€ํ•™๊ต: ๋ฐ์ดํ„ฐ ์‚ฌ์ด์–ธ์Šค/ ๋ฐ˜๋„์ฒด์‹œ์Šคํ…œ ์œตํ•ฉ ์ „๊ณต

- LG Aimers Hackathon

- ํ•œ์ด์Œ ICT ๋ฉ˜ํ† ๋ง

๊ธฐ๊ฐ„ : 24.08 ~ 25.02 / ์ˆ˜๋ฃŒ : 2025.02

ํ•™์  : 3.9(4.5) / ์กธ์—… : 2024.08

2nd, 3rd, 4th

๊ธฐ๊ฐ„ : 23.04 ~ 23.11