Clips AI

什么是"Clips AI"？

Clips AI是一款开源的Python库，可自动将长视频转换为短视频片段。它通过分析视频的转录内容，识别并创建片段，同时还可以动态调整视频的画面比例，使其更加专注于当前演讲者。这款工具适用于以音频为主的叙述性视频，如播客、采访、演讲和布道。

"Clips AI"有哪些功能？

• 自动将长视频转换为多个短视频片段。
• 动态调整视频的画面比例，从16:9转换为9:16。

产品特点：

• 通过视频的转录内容识别和创建片段。
• 可以根据当前演讲者动态重新构建视频画面。
• 适用于各种音频为主的叙述性视频。

应用场景：

Clips AI适用于许多场景，包括：

• 播客制作：将长篇播客转换为短视频片段，以增加观众的注意力。
• 采访节目：从长时间的采访视频中提取关键片段，以便分享和推广。
• 演讲录音：将演讲录音转换为视觉化的内容，以便在社交媒体上分享。

"Clips AI"如何使用？

1. 安装Python依赖：使用虚拟环境（如venv）避免依赖冲突。

   pip install clipsai

2. 安装libmagic和ffmpeg：

   pip install whisperx@git+https://github.com/m-bain/whisperx.git

3. 创建视频片段：

   • 首先对视频进行转录，使用WhisperX进行转录并检测每个单词的开始和结束时间。
   • 然后使用ClipFinder查找并创建视频片段。
     python
     from clipsai import ClipFinder, Transcriber

   transcriber = Transcriber()
   transcription = transcriber.transcribe(audio_file_path="/abs/path/to/video.mp4")

   clipfinder = ClipFinder()
   clips = clipfinder.find_clips(transcription=transcription)

   print("StartTime: ", clips[0].start_time)
   print("EndTime: ", clips[0].end_time)

4. 调整视频画面比例：

   • 需要Hugging Face访问令牌才能调整视频画面比例。
   • 使用resize函数将原始视频调整为所需的画面比例。
     python
     from clipsai import resize

   crops = resize(
   video_file_path="/abs/path/to/video.mp4",
   pyannote_auth_token="pyannote_token",
   aspect_ratio=(9, 16)
   )

   print("Crops: ", crops.segments)

常见问题：

• 如何获取Hugging Face访问令牌？
  您可以在Pyannote HuggingFace页面上找到有关如何获取访问令牌的说明。
• Clips AI是否收费？
  Clips AI是一款开源工具，您可以免费使用它进行视频转换和调整画面比例。