Clips AI: Die Zukunft der Videoverarbeitung

Clips AI ist eine Open-Source-Python-Bibliothek, die es Entwicklern ermöglicht, lange Videos in Clips zu segmentieren und deren Seitenverhältnis von 16:9 auf 9:16 zu ändern. Mit nur wenigen Zeilen Code können Sie Ihre Videos effizient bearbeiten und anpassen.

Einführung

Clips AI ist ideal für audiozentrierte, narrativ basierte Videos wie Podcasts, Interviews, Reden und Predigten. Der Clipping-Algorithmus analysiert das Transkript eines Videos, um Clips zu identifizieren und zu erstellen. Der Resizing-Algorithmus passt Videos dynamisch an, um den aktuellen Sprecher in verschiedenen Seitenverhältnissen in den Fokus zu rücken.

Installation

Um Clips AI zu installieren, befolgen Sie diese Schritte:

1. Installieren Sie die Python-Abhängigkeiten. Es wird empfohlen, eine virtuelle Umgebung (z. B. venv) zu verwenden, um Konflikte zu vermeiden:

   pip install clipsai
   pip install whisperx@git+https://github.com/m-bain/whisperx.git
   

2. Installieren Sie libmagic und ffmpeg.

Clips erstellen

Um Clips zu erstellen, muss das Video zuerst transkribiert werden. Dies geschieht mit WhisperX, einer Open-Source-Wrapper-Bibliothek für Whisper, die zusätzliche Funktionen zur Erkennung von Start- und Endzeiten jedes Wortes bietet. Hier ist ein einfaches Beispiel:

from clipsai import ClipFinder, Transcriber
transcriber = Transcriber()
transcription = transcriber.transcribe(audio_file_path="/abs/path/to/video.mp4")
clipfinder = ClipFinder()
clips = clipfinder.find_clips(transcription=transcription)
print("StartTime: ", clips[0].start_time)
print("EndTime: ", clips[0].end_time)

Video anpassen

Um ein Video auf das gewünschte Seitenverhältnis anzupassen, benötigen Sie ein Hugging Face-Zugangs-Token, da Pyannote für die Sprecherdiarisierung verwendet wird. Hier ist ein Beispiel für das Anpassen eines Videos:

from clipsai import resize
crops = resize(
    video_file_path="/abs/path/to/video.mp4",
    pyannote_auth_token="pyannote_token",
    aspect_ratio=(9, 16)
)
print("Crops: ", crops.segments)

Fazit

Clips AI revolutioniert die Art und Weise, wie wir Videos verarbeiten und anpassen. Egal, ob Sie Clips für soziale Medien erstellen oder Inhalte für Podcasts aufbereiten möchten, Clips AI bietet Ihnen die Werkzeuge, die Sie benötigen.

Call-to-Action

Probieren Sie Clips AI noch heute aus und verwandeln Sie Ihre Videos in ansprechende Clips! Besuchen Sie unser für weitere Informationen und Anleitungen.

© 2024 Clips AI, Inc. Folgen Sie uns auf GitHub.