Overview
본 발표는 "음성 뉴비의 Whisper Fine-tuning 해보기"라는 주제로 처음 음성데이터를 만지는 팀이 OpenAI에서 제공한 Whisper, 모델을 활용하여 Speech-to-Text 기능을 파인 튜닝했던 고된 과정을 소개하려고 합니다.
LLM의 시대에 Whisper 모델과 LLM이 합쳐서 해양 통신과 같은 새로운 영역을 어떻게 변화 시킬 수 있는지 또한 목적에 맞게 Whisper 모델을 fine-turning 할 수 있는지에 대해서 Backend.AI를 활용한 학습 방법에 대해서도 공유합니다.
발표자 소개
현재 부경대학교에서 시스템 경영공학부 교수로 재직 중이며, 주로 NLP 분야의 AI 연구를 수행하였습니다. 교수면서도 최근 ChatGPT를 위시한 LLM을 기술의 변화로 세상이 변화하고 있다고 믿고 무모하게 무역 영역의 AI 회사인 "팀리부뜨"를 창업한 창업가이기도 합니다. 회사를 하다 보니 NLP가 아닌 음성 분야도 해야 해서 (연구원이) 눈물을 흘리며 도전 중입니다.
슬라이드 요청
