Castream AI Shortsが動画の見どころを見つける仕組み

配信者に「前回の配信で一番よかった場面は？」と聞けば、自信たっぷりに答えてくれるでしょう。でも、チャットに聞くと、違う答えが返ってくるかもしれません。そして、チャットのほうが正しいこともよくあります。

Castream AI Shortsの場面検出は、この考え方をもとにしています。動画のノイズやテンポだけを見るのではありません。動画全体を分析して発言内容を読み取り、配信動画の場合は、発言とチャットを1つのタイムライン上で照合します。そして、発言内容と視聴者の反応が重なる場面、つまり「見どころがあり、視聴者も明らかに注目した場面」を選びます。

2つのシグナルを照らし合わせる

1つ目のシグナル：音声。 AI Shortsは動画の最初の数分や、音量の大きい場面だけでなく、動画全体を分析します。発言を文字起こしするため、音の大きさだけでなく、その場面で何を話していたかも把握できます。

2つ目のシグナル：チャット（配信動画の場合）。 配信動画からショートを作る場合、Castreamは発言とチャットを1つのタイムライン上に並べます。視聴者が笑ったり、反応したり、もっと見たいと求めたりしたタイミングを、そのときの発言と結び付けて確認できます。

この2つを組み合わせることがポイントです。誰も反応しなかった面白い一言も、何も起きていない時間に盛り上がったチャットも、単独では有力な手がかりになりません。両方を照らし合わせることで、切り抜くべき場面が見えてきます。

配信先のすべてのプラットフォームのチャットを1か所に集約します。配信中に表示される統合ビューと同じです。そのため、視聴者の多くが別のプラットフォームにいても、他の配信先での反応を見落としません。

一般的なクリップツールとCastreamの違い

一般的なクリップツールが検出するのは、次のような情報です。

• 動画と、その中で話された言葉
• 視聴者が注目したかどうかにかかわらず、音量やテンポが目立つ場面

Castreamが検出するのは、次のような情報です。

• 同じタイムライン上に並べた発言とチャット
• 視聴者が反応したり、笑ったり、もっと見たいと求めたりした場面
• 配信先すべてのプラットフォームのチャットを集約した情報

この違いは、生成されるクリップに表れます。ゲーム配信なら、チャットが盛り上がった、静かで絶妙なタイミングのコールアウトが、誰も反応しなかった大きな断末魔より高く評価されます。講師の動画なら、質問が続いた明快な解説が、視聴者がついていけなかった早口の場面より選ばれます。音が大きいことと、見どころであることは別です。AI Shortsは、その違いを踏まえて作られています。

配信以外の動画の場合

スマートフォンで撮影した動画や、リンクした動画にはチャットがありませんが、問題ありません。AI Shortsは動画全体を分析し、音声と内容をもとに見どころを選びます。ただし、チャットという追加のシグナルは使えません。配信にはリアルタイムで反応する視聴者がいるため、このシグナルも活用できます。

録画した配信と、同じ内容をスマートフォンからアップロードした動画のどちらを切り抜くか迷ったら、配信版のほうが有利です。チャットの反応から、どの場面が視聴者に響いたかを判断できるためです。過去の配信から先にショートを作ることをおすすめする理由の1つです。詳しくはCastream AI Shortsで過去の配信をショート動画にする方法をご覧ください。

見つかる場面の数と長さ

AI Shortsは、1本の動画から最大3つの場面を見つけ、それぞれ最大60秒のショート動画にします。形式は縦型の9:16です。見どころが少ない動画では、3つ未満になることもあります。これは失敗ではありません。価値のないクリップでフィードを埋めないための仕組みです。

各ショートには、単語ごとに表示される字幕、画面上のフック、タイトル、説明文、ハッシュタグが付属します。字幕についてはAI Shortsの字幕：スタイルと単語ごとのハイライト、投稿についてはAI Shortsのタイトル、フック、ハッシュタグ：ショート動画の投稿方法をご覧ください。

「最も見どころのある場面」は「最も長い場面」ではない

42分の配信でも90分のポッドキャストでも、処理方法は同じです。動画全体を分析し、特に見どころのある場面だけを選びます。ショート動画は5分目ではなく最初の数秒で視聴者の関心をつかむ必要があるため、ほどほどに面白い5分間より、印象的な40秒のやり取りのほうが適しています。

手作業で切り抜くときによくあるのが、見どころの前後まで残してしまい、クリップが長く、印象の薄いものになることです。AI Shortsは、見どころそのものに絞って切り抜きます。

覚えておきたいこと

場面検出は出発点であり、最終的な判断ではありません。気に入ったショートは残し、それ以外は削除しましょう。手元に残しておきたいものはダウンロードできます。ショートの保存期間は30日間です。選ばれた場面がしっくりこない場合も、参考になります。視聴者の反応と自分の感覚が常に一致するわけではありません。その両方を知ることには意味があります。

クレジットや対応する入力形式を含む機能の詳細は、Castream AI Shorts：配信やスマートフォンの動画を縦型ショートにをご覧ください。機能ページはCastream AI Shortsです。