[GN] Subs AI - OpenAI Whisper를 사용한 자동 동영상 자막 생성기

9bow · 8월 17, 2023, 3:38오전

GeekNews의 xguru님께 허락을 받고 GN에 올라온 글들 중에 AI 관련된 소식들을 공유하고 있습니다.

소개

demo

완전히 오프라인으로 동작하는 자동 자막 생성기
리눅스/맥/윈도우
다양한 Whisper 구현체 지원 : whisper-timestamped, whisper.cpp, faster-whisper, whisperX
서브타이틀 수정 기능
dl-translate 를 이용한 번역기능 제공 (페이스북 M2M 모델)
Web-UI + CLI + Python 패키지
CLI 를 통한 배치프로세싱, 파이썬 패키지로 자신만의 스크립트 개발 가능
SubRip(SRT), WebVTT, MicroDVD, MPL2, TMP 등의 자막 포맷 지원

원문

GitHub 저장소

API 문서

https://abdeladim-s.github.io/subsai/

예제: VAD

silero-vad를 사용한 긴 오디오 파일 처리 예제

github.com

abdeladim-s/subsai/blob/main/examples/subsai_vad.ipynb

{
 "cells": [
  {
   "cell_type": "markdown",
   "metadata": {},
   "source": [
    "# [SubsAI](https://github.com/abdeladim-s/subsai): Voice Activity Detection (VAD) example\n",
    "\n",
    "If you have any issues, questions or suggestions, post a new issue [here](https://github.com/abdeladim-s/subsai/issues) or create a new discussion [here](https://github.com/abdeladim-s/subsai/discussions)\n",
    "\n",
    "## This notebook shows how to use subsai with a VAD, in this example we have used [silero-vad](https://github.com/snakers4/silero-vad).\n",
    "\n",
    "* ### The idea is to cut long media files into chunks using the VAD and process them one by one.\n",
    "* ### The progress is saved with each processed chunk, so you can interrupt the process whenever you want."
   ]
  },
  {
   "cell_type": "markdown",
   "metadata": {},
   "source": [

This file has been truncated. show original

예제: 번역하기

이미 존재하는 자막 파일을 번역하는 예제

github.com

abdeladim-s/subsai/blob/main/examples/subsai_translation.ipynb

{
 "cells": [
  {
   "cell_type": "markdown",
   "metadata": {
    "id": "Z0pb7VXI8mS0"
   },
   "source": [
    "# [SubsAI](https://github.com/abdeladim-s/subsai): subtitles translation example\n",
    "\n",
    "If you have any issues, questions or suggestions, post a new issue [here](https://github.com/abdeladim-s/subsai/issues) or create a new discussion [here](https://github.com/abdeladim-s/subsai/discussions)\n",
    "\n",
    "## This notebook shows how to use **SubsAI** to translate a subtitles' file. \n",
    "## SubsAI is using [dl-translate](https://github.com/xhluca/dl-translate) under the hood. \n"
   ]
  },
  {
   "cell_type": "markdown",
   "metadata": {
    "id": "bTPjYuiz8mS5"

This file has been truncated. show original

[GN] Subs AI - OpenAI Whisper를 사용한 자동 동영상 자막 생성기

소개

원문

GitHub 저장소

API 문서

예제: VAD

예제: 번역하기

출처 / GeekNews