ハイライト検出
長尺の録画を文字起こしし、候補となるシーンを特定するため、クリエイターはソース全体を手作業で確認する代わりに、選ばれたセグメントをレビューできます。
SupoClip
SupoClipは、長尺動画から注目シーンを見つけ、縦型にリフレームし、字幕を同期表示するオープンソースAI動画クリッパー。YouTube動画や録画をShorts、TikTok、Reels向けに再利用できます。
短尺動画向けオープンソースAIクリッピング
SupoClipは、長時間の録画やYouTube動画を短尺の縦型コンテンツに変換するオープンソースAI動画クリッパーです。文字起こし、候補セグメントの検出、スコアリング、顔認識対応のリフレーム、字幕、エクスポート設定を1つのワークフローにまとめ、YouTube Shorts、TikTok、Instagram Reelsに対応します。
ユーザーはYouTube URLを貼り付けるか動画ファイルをアップロードし、システムが特定したシーンを確認して、選択したクリップを字幕付きの9:16形式でレンダリングできます。アプリケーションはホステッドサービスとして利用できる一方、AGPL-3.0のコードベースはセルフホストして、インフラ、モデルプロバイダー、処理動作を管理したいチーム向けに適応できます。
AIによるクリッピングと短尺動画制作
バイラリティスコアリング
フックの強さ、エンゲージメント、価値、共有されやすさなどの要素を用いて、候補クリップを0〜100で評価します。このスコアはレビューの優先順位付けを目的としています。
顔認識対応の縦型クロップ
MediaPipeとOpenCVを使用して、映像を縦型9:16フレームに変換する際の顔を検出・追跡します。複数人のシーンや画面共有では、手動レビューも引き続き有用です。
単語同期字幕
単語単位のタイムスタンプを使用してアニメーション字幕を作成し、字幕テンプレート、フォントプリセット、調整可能なスタイル設定を提供します。
Bロールオーバーレイ
サイトで説明されているホステッドワークフローを使用する場合、Pexelsから関連するストック映像を自動的に取得してオーバーレイできます。
プラットフォーム別エクスポートプリセット
TikTok、Instagram Reels、YouTube Shorts向けのエクスポートプリセットを提供し、各プラットフォームに合わせたエンコード設定を利用できます。
SupoClipの実用的な活用方法
ポッドキャストやインタビューを再利用
ポッドキャストやインタビューの録音を候補Shortsのセットに変換し、公開前に文脈、話者のフレーミング、字幕を確認して、最も優れた抜粋を選べます。
教育用の短尺動画を作成
講義、チュートリアル、講演を、録画全体を手作業で編集するのではなく、個々の説明やアイデアを軸に整理した集中型クリップに変換できます。
創業者・ブランドコンテンツを拡張
創業者やマーケティングチームが、長尺録画から製品説明、顧客向けの知見、イベントのハイライトを抽出するための、再現性のあるワークフローを利用できます。
管理された社内クリッピングパイプラインを運用
より簡単なワークフローにはホステッドアプリケーションを使用し、プロバイダーの選択、ソースへのアクセス、カスタマイズが重要な場合は、オープンソースのスタックをチームのインフラにデプロイできます。
ローカル処理を試す
外部モデルプロバイダーへの依存を減らすことを優先する場合、Docker Compose、Ollama、ローカルWhisper文字起こしを使って、ローカルまたはカスタマイズした処理環境を構築できます。
Pros and Cons
Pros
- オープンソースのAGPL-3.0コードベースを検証、変更、フォーク、セルフホストできます。
- ハイライト検出、スコアリング、顔認識対応の9:16リフレーム、字幕付け、ソーシャル向けエクスポートプリセットを1つのワークフローにまとめています。
- YouTube URLとアップロードした動画ファイルの両方をソース入力としてサポートします。
- ホステッドまたはローカルのモデル設定を利用でき、クリップ選定にはOllama、ローカルの文字起こしにはWhisperを使用できます。
Cons
- セルフホスティングでは、コンピューティング、ストレージ、環境変数、バックグラウンドジョブ、プロバイダー設定をユーザー自身で管理する必要があります。
- ソースコードは無料ですが、セルフホスト環境では有料の文字起こしサービスやAIプロバイダーを利用する必要が生じる場合があります。
- AIが選んだシーン、自動クロップ、字幕、スコアは、公開前に人によるレビューが必要です。特に複雑なシーンや正確性が重視されるコンテンツでは注意が必要です。
FAQ
SupoClipはYouTube動画をShortsに変換できますか？
はい。SupoClipはYouTube URLを受け付け、ソースを文字起こしし、候補セグメントを提案して、選択したシーンを縦型で字幕付きのクリップとしてレンダリングできます。
SupoClipは生成したクリップに字幕を追加できますか？
はい。単語単位で同期する字幕を生成し、レンダリング前にフォント、色、出力設定を調整できる字幕テンプレートを提供します。
SupoClipはどのようにセルフホストできますか？
文書化されているフルスタック構成では、Docker Composeを使用し、Next.jsフロントエンド、FastAPIバックエンド、バックグラウンドワーカー、PostgreSQL、Redisが含まれます。開発者はこれらのコンポーネントを個別に実行することもできます。
SupoClipは無料でセルフホストできますか？
AGPL-3.0ライセンスの下でセルフホスト自体は無料ですが、コンピューティング、ストレージ、文字起こしサービス、言語モデルの設定はユーザーが用意する必要があります。インフラの管理を望まないユーザー向けに、SupoClipはホステッド版も提供しています。
SupoClipはAIが選んだクリップのパフォーマンスの良さを保証できますか？
いいえ。バイラリティスコアは、フックの強さ、エンゲージメント、価値、共有されやすさなどの要素に基づくレビュー補助です。公開前に、クリエイター自身が文脈、字幕の正確性、フレーミング、視聴者との適合性を確認する必要があります。
Quick Facts
- カテゴリー
- AI動画編集
- 主なワークフロー
- 長尺動画から字幕付き縦型クリップへ
- ソース入力
- YouTube URLとアップロードした動画ファイル
- 出力プラットフォーム
- YouTube Shorts、TikTok、Instagram Reels
- デプロイ
- ホステッドアプリケーションまたはDocker Composeによるセルフホスト
- ライセンス
- AGPL-3.0
SupoClipの代替品
Zella
ZellaはMacとiPhone向けの画面録画・デバイス上で動作するAI動画編集ツール。画面やカメラを録画し、映像の整理、字幕追加、リフレーム、書き出しまで、コアプロジェクトをクラウドへアップロードせずに行えます。
Tactiq
Tactiqは、Google Meet、Zoom、Microsoft Teams向けのAIメモ作成ツールです。会議をライブ文字起こしし、要約、アクション項目、フォローアップを生成。Chrome拡張機能と共有・連携に対応。
CAMB.AI Streams
CAMB.AI Streams は、YouTube、Twitch、X などの配信でライブ音声を多言語にリアルタイム吹き替え。SRT、RTMP、HLS対応で既存のライブワークフローに接続し、後編集なしで多言語配信を実現します。
CAKIE
CAKIEは、AIエージェント向けに画面と音声を録画できるMacアプリです。文字起こしとスクリーンショットのハイライトを追加し、プロンプトをコピーして別のAIアプリに貼り付けたり添付したりできます。
SpeakoFlow
SpeakoFlowは、Windows、macOS、Linux対応の無料・オープンソースのデスクトップ音声入力アプリ。あらゆるアプリに дикationでき、Flow、要約整理、翻訳、画面認識アシスタントにも対応。
Video Effects SDK
Video Effects SDKは、背景ぼかし、背景置換・削除、ノイズ除去、画面の自動フレーミング、美肌補正、カラー調整などのリアルタイムWebカメラエフェクトを追加します。Web、デスクトップ、モバイル向けのライブ動画体験を提供するチーム向けです。