VideoHighlighterとは?
VideoHighlighterは、GoProやスマートフォンで撮った1日分の映像のような素材を受け取り、場面の切り替わり、動き、音、検出した物体や動作、Whisperの書き起こしを採点して、最も印象的な瞬間を見つけます。タイムラインでそれぞれの場面がなぜ高得点だったかを示し、ハイライト動画と個別のクリップを書き出します。BGMの追加も選べ、スマートフォンで回転して撮った映像も正しく扱います。
Autoタブは全工程をこなします。カメラのカードを見つけ、中身をコピーし、ハイライトを探し、動画を組み立て、音楽を付けます。視覚的な検索と字幕の生成もでき、Ollama経由のローカルモデルを使います。Ollamaはネットワーク上の別のパソコンで動かすこともできます。
Windows、macOS、Linuxで動き、Intel、AMD、NVIDIAのGPUに対応します。ライセンスはAGPL-3.0で、別に商用ライセンスと、ライブのオーバーレイや独自カテゴリーを加える有料のPro版があります。
VideoHighlighterは使う価値があるか?
VideoHighlighterは狭いけれど現実的な問題を解決します。旅行や試合から何時間もの映像を持ち帰ったのに、見返す時間がないという問題です。場面の切り替わり、動き、音量、検出した物体や動作、Whisperによる発言内容という複数の信号で映像の各区間を同時に採点し、上位の部分をつないで1本の動画にします。
役に立つのは、選んだ理由を説明してくれる点です。信号のタイムラインとレポートが各クリップの得点の理由を示すので、ゴールは観客の歓声で、スキーの滑走は動きで選ばれたと分かり、当て推量ではなく調整できます。Autoタブはさらに進んで、カメラのカードをコピーし、動画を組み立て、音楽を付けるまでを、再開可能な1つの作業として行います。