🔎 Daily Prompt #38: OpenAI의 Whisper를 사용해 영상 자막 생성하기

구독자님, 안녕하세요?
매일 1개의 프롬프트를 배달해드리는 Daily Prompt입니다.

오늘은 OpenAI의 Whisper를 사용해 영상 자막을 생성하는 법을 다룹니다. Whisper는 ChatGPT를 만든 OpenAI에서 출시한 AI로, 영상이나 음성파일에서 음성을 인식하고 자막파일로 생성해줍니다. 

1. Google Colab를 사용하여 Whisper AI 설치하기

내 컴퓨터에 설치하는 방식이 아닌, Google Colab 서비스를 이용해 클라우드에 설치합니다. 내 컴퓨터에 설치하는 방법도 가능하긴 하지만 이보다는 Colab을 이용하는게 쉽고 간단한 편입니다.

먼저 아래 링크에 접속합니다.

- 링크: https://github.com/jhj0517/Whisper-WebUI

보기만해도 낯설고 어지럽지만, 스크롤을 내려 "Notebook"이라고 적힌 곳 아래 "here"를 클릭합니다.

클릭하면 아래와 같은 페이지로 이동합니다. 여기서 "Drive로 복사"를 클릭합니다.

아래와 같이 사본이 생성됩니다. Check GPU, Installation, Run 이렇게 순서대로 3가지 단계를 거치면 사용을 할 수 있습니다. 먼저 Check GPU 아래 실행 버튼을 클릭합니다.

아래와 같이 초록색 체크 표시(V)가 뜨면 Installation의 실행 버튼을 클릭하시면 됩니다.

만약 "선택한 GPU 유형은 사용할 수 없습니다"와 같은 메시지가 뜨면, 런타임>런타임 유형 변경으로 들어갑니다.

런타임 유형 변경에서 아래와 같이 설정이 되어있는지 확인하시면 됩니다. 동일한 설정이어도 경고 메시지가 뜬다면, 무시하고 다음 Installation 실행으로 진행합니다.

Installation을 실행하고 초록색 체크 표시(V)가 뜨면 마지막 단계 Run의 실행 버튼을 클릭합니다.

클라우드에 Whisper AI 설치가 완료되었으므로, 이제 실행(Run)하는 단계입니다. Run의 실행 버튼을 클릭한 뒤 조금 기다리시면 아래와 같이 진행되며, 여기서 "Running on public URL:"에 적힌 주소를 클릭합니다.

URL을 클릭하면 아래와 같은 페이지로 이동합니다. 이제 Whisper AI를 사용할 수 있습니다.(아래 페이지로 이동 후 Whisper를 설치하던 Colab페이지는 닫지 말고 그대로 두시면 됩니다)

2. 음성/영상 파일을 업로드해서 자막파일을 생성합니다.

아래 빨간 박스를 클릭하여 업로드하거나 파일을 끌어와서 음성이나 영상 파일을 업로드한 뒤, "GENERATE SUBTITLE FILE"을 클릭하여 자막 파일을 생성합니다.

생성이 완료되면, 생성된 자막파일(.srt)을 다운로드하기 위해 설치를 하던 Colab으로 돌아가 폴더 모양 아이콘을 클릭합니다. 아이콘 클릭 후 "outputs"폴더에 있는 srt 파일을 다운로드 받습니다.

마무리

1) 오늘 소개해드린 Whisper AI 설치하는 법은 이 영상을 참고하였습니다(한국어)

2) 이전에 영상편집을 해본적 없던 저는 Whisper AI와 Vrew(워드 문서처럼 영상을 편집하는 툴)를 복합적으로 사용하여 영상편집을 시작할 수 있게 되었습니다. Vrew에서도 음성/영상 파일을 텍스트로 변환해주지만, OpenAI에서 출시한 Whisper를 사용한 결과가 더 좋다고 느껴졌습니다. 그 이유는, 화자가 습관적으로 반복하는 의미없는 군소리들(이제~, 막~)을 제거하고 매끄러운 문장으로 만들어줬고, 발음이 불분명한 단어도 텍스트로 잘 변환하였기 때문입니다. 제 추측으로는 발음이 불분명한 단어의 경우 ChatGPT가 문장을 생성하는 방식처럼 '다음에 올 확률이 높은 단어'이면서 소리가 비슷한 단어를 선택하는 게 아닐까 싶습니다.

3) Colab에서는 72시간이 지나면 링크가 만료됨에 따라 이후 1의 설치과정을 다시 반복해야합니다. 이 점 참고해주세요.

4) 번거로운 설치 과정을 거쳐야하지만 이는 금방 해결될 문제로 보입니다. Colab을 사용하는게 낯설어서 그동안 시도해보지 못했는데 Whisper 덕분에 시도해보게 되었습니다. Colab을 사용해 이제 다른 AI들도 시도해봐야겠습니다:)

오늘의 프롬프트는 어떠셨나요? 댓글과 공유하기로 표현해주세요:)

필요한 프롬프트가 있다면 언제든지 댓글로 알려주세요.
감사합니다. 내일 또 뵙겠습니다.

카카오톡 문의하기 [클릭]
www.secondbrush.co.kr