• 2023. 7. 3.

    by. T.swan

    반응형

     

     

    누구나 한번 해봤던 상상, 현실이 되다.

     

    남학생들이라면 한번쯤 해봤을  상상, 어렸을 때 일본 애니메이션 코난을 보고 자라면서 실시간 번역이 되었음 하죠. 자연스레 일본 영상들을 접하면서 한반에 한명쯤은 일본어 잘하는 친구들이 꼭 있습니다.

     

    매일 구글에 품번을 적고 밤새 한국어 자막을 찾던게 이제 whisper AI로 해결이 끝났습니다. 이러면 이제 번역가들은 뭐먹고 살아야되는지 제가 번역가는 아니지만 걱정이 되겠어요. 

     

    Whiper AI는 유튜브 영상, 그리고 내가 가진 파일에서 음성을 추출해서 원어 자막으로 만들어줍니다. 그 만들어진 원어 자막을 파파고 번역기에 붙여넣기 하면 한글 자막이 생성됩니다. 물론 완벽하게 싱크가 맞지 않겠지만, 번역가의 도움없이 내가 원하는 외국영상을 내 스스로 한글자막으로 만들어 볼 수 있다는 기회가 열린게 의미가 크다고 봅니다.

     

    Whisper AI로 실시간 한글자막 만들기

     

    유튜브에서 Whisper AI 작동영상을 보고 실제로 따라해 보았습니다.Whiper AI는 현재 3가지 작동방식이 존재합니다.

     

    Whisper 방식 장점 단점
    무설치 방식 누구나 사용가능 속도가 매우 느림
    구글 co lab 방식 무료로 사용가능 잦은 alt-tab시 서버 끊겨서 다시 처음부터 실행...
    컴퓨터에 직접 설치 위에 2 방식보다 속도가 빠름 고사양 그래픽 카드 필요

     

    우선 Whisper AI 홈페이지에 들어갑니다. 저는 아직 초보라 무설치 방식을 이용하였습니다. 

     

    Whisper Webui - a Hugging Face Space by aadnk

     

    Whisper Webui - a Hugging Face Space by aadnk

     

    huggingface.co

    홈페이지 접속하신 후 파일을 업로드 할건지 유튜브 영상에서 음성을 추출할건지 선택사항이 나옵니다.

     

    우선 테스트이기 때문에 저는 일본어 유튜브 영상 쇼츠를 사용하였습니다. 

     

    모델에는 5가지가 존재하는데 전문적인 일본어가 필요한 수준이 아니라면 현재는 medium으로 하시는게 좋습니다. 위에 상위 3가지 버전이 존재하지만 작업시간이 굉장히 길어집니다.

     

    다음으로는 언어에는 추출할 언어 일본어를 선택해주시고 URL에 유튜브 추출영상 주소를 복사해서 넣어줍니다.

     

    일본어 추출에 사용된 영상 : https://www.youtube.com/shorts/I0J0Mvzod_k

     

    제출하기 버튼을 누르면 영상에서 자막이 추출됩니다. 쇼츠영상이라 1분내외의 짧은 영상인데 5분이 걸렸습니다....

     

    그렇게 추출된 자막영상을 메모장으로 불러와준다음 복사해서 파파고에서 한국어로 번역해주면 한글자막이 완성됩니다.

     

    만들어진 자막은 영상과 같은 제목.srt로 저장해야 되며 반드시 영상과 같은 파일안에 존재해야 합니다.

     

     

    whisper AI PC 설치 버전

     

    현재 웹에서 구동되는 whisper AI는 맛보기로 이용하는게 좋습니다. 현존 다른 자막 추출 프로그램 브루보다도 자막 이해도와 간결함에서는 훨씬 압도적이라는 평점이 많으나 실제 영화나 애니메이션 영상에서 한글자막을 추출하는데는 웹버전은 시간이 너무 많이 소요될 것으로 예상됩니다.

     

    Whisper AI PC버전 설치는 파이썬을 이용해야 하고 매우 복잡하기 때문에 전문가 설치방법 보시고 따라하시면 좋겠습니다.

     

    반응형