Clips Kitty: 콘텐츠 제작자를 위한 로컬 AI 비디오 클리핑
자동 하이라이트 추출, 화자 인식 얼굴 추적 및 로컬 자막 생성을 경험하여 긴 스트림을 수직 쇼트로 변환하세요. ColinGPT9이 만든 Clips Kitty는 AI 파이프라인을 Windows PC에서 실행하여 영상이 기계를 떠나지 않도록 합니다. 이 도구는 전사, 얼굴 기반 9:16 크롭 및 내장 자막을 자동화하며 다국어 전사 및 선택적 번역을 제공합니다. 이 도구는 개인 정보 보호를 우선시하며 클라우드 업로드 없이 자동 클리핑이 필요한 스트리머와 소셜 미디어 관리자에게 적합합니다.
Clips Kitty는 긴 형식의 비디오에서 실제로 무엇을 하나요?
Clips Kitty는 긴 녹화를 분석하고 짧은 하이라이트를 추출합니다 로컬 대형 언어 모델과 빠른 전사(faster-whisper)를 사용하여. YouTube, Twitch 및 Kick과 같은 플랫폼의 로컬 파일과 링크를 수락하고, YOLOv8 및 TalkNet으로 스피커 인식 얼굴 추적을 실행하며, 단어가 동기화된 자막이 포함된 9:16 세로 크롭을 생성합니다. 이 파이프라인은 제목, 설명 및 해시태그도 자동으로 생성하여 짧은 형식의 게시물을 준비하는 작업을 가속화합니다.
처리 중에 예상되는 시스템 영향은 얼마나 되나요?
처리는 사용자의 Windows PC에서 로컬로 실행됩니다, Electron 프런트 엔드와 빠른 전사(faster-whisper) 및 Ollama를 호출하는 Python 백엔드를 결합합니다. 즉, CPU 및 GPU 부하는 실행하는 모델에 따라 달라집니다. 이 앱은 데이터를 원격 서비스로 전송하는 대신 장치에서 작업을 유지하도록 설계되었습니다. 소비자급 하드웨어에서 긴 배치 작업을 실행할 때 속도와 정확성을 균형 있게 조정할 수 있는 로컬 모델 옵션을 선택할 수 있습니다.
Clips Kitty는 개인 영상과 함께 사용하기에 안전한가요?
이 앱은 설계상 비디오 데이터를 로컬로 유지합니다, 이는 클라우드 서비스에 대한 자동 업로드를 방지하고 AGPL-3.0에 따라 프로젝트가 오픈 소스이기 때문에 커뮤니티 감사도 지원합니다. 로컬 LLM 및 전사 도구를 사용하므로 민감한 녹음은 디스크에 남아 있습니다. 개발자는 AI 파이프라인 동안 외부 네트워크 호출을 줄이기 위해 Ollama와 같은 모델을 로컬에서 실행할 수 있는 옵션을 제공합니다.
정확하게 작동하기 위해 기술 지식이 필요한가요?
기본 워크플로우는 자동화되어 있지만, 고급 구성은 모델 선택 및 로컬 도구에 대한 어느 정도의 친숙함이 필요합니다. 인터페이스는 클리핑 단계를 배치합니다: 가져오기, 전사, 하이라이트 감지, 크롭, 자막, 렌더링 및 선택적으로 자동 게시. 일반 사용자는 기본값을 실행할 수 있으며, 파워 사용자는 모델을 교체하거나 얼굴 추적 매개변수를 조정할 수 있습니다. 프로젝트가 오픈 소스라는 것은 기술 사용자가 필요할 경우 파이프라인 스크립트를 검사하거나 수정할 수 있다는 것을 의미합니다.
실용적이고 개인 정보 보호에 중점을 둔 클리핑 도구, 알파 개발 주의사항
Clips Kitty는 클라우드 의존 없이 장치에서 하이라이트 추출 및 자막 생성을 필요로 하는 스트리머와 소셜 관리자에게 적합합니다. 이 도구는 전사, 얼굴 인식 크롭 및 자막 렌더링을 단일 로컬 워크플로로 통합하며, 여러 언어를 지원합니다. 이 개인 정보 우선 파이프라인에 조기 액세스하는 대가로 활성 알파 개발 상태와 가끔 불안정성을 기대하세요.
