INISOFTは11月4日、ライブ配信の映像と音声を解析し、重要な瞬間からSNS向け動画を生成する「AI Highlight Agent」のベータ版を提供開始しました。
スポーツの試合やコンサートを対象に、シーンの検知からクリップ作成、投稿までを支援します。
正式提供は2027年1月を予定しています。
記事の概要
AI Highlight Agentは、SRT、HLS、RTMPのライブ配信を取り込み、映像フレームと音声をリアルタイムに解析します。
コンピュータビジョン、顔認識、音声分類、LLMを組み合わせ、ゴールやホームラン、重要な発言などを検知します。
野球では、イベントの種類、イニング、アウトカウント、選手の役割、シーンの1行要約をカード形式で表示します。
検知したシーンはトリミングしてクリップ化でき、X、Instagram、YouTube、TikTokへ投稿できます。
LLMはタイトル、1行要約、トレンドハッシュタグを生成し、音声認識で歌詞や発言の字幕も作成します。
コンサートでは、映像を「歌」「トーク」「MC」「VCR」などに分類し、9:16の縦型ショート動画を生成できます。
顔認識による画像辞書エンジンやBGM識別にも対応し、人物別の検索や著作権管理、ライセンス料算出を支援します。
記事のポイント
- マルチモーダル解析: 映像と音声を複数のAIで解析し、ライブ中の重要な場面をリアルタイムに検知します。
- 投稿まで一気通貫: 検知したシーンをクリップ化し、字幕や投稿文を生成してSNSへ公開できる仕組みです。
- 権利処理も支援: 出演者や選手の顔、BGMを識別し、検索や再編集、著作権管理の効率化に役立ちます。
このニュースがもたらす影響
- ライブ運営企業: イベント中の見どころ探索から投稿までを自動化できるため、編集者の配置や承認フローを見直し、完全自動化と人手確認の使い分けを検討する必要がありそうです。
- 権利者・広告主: 人物やBGMの識別、ブランド入り動画の生成が可能になることで、出演者・楽曲の利用許諾を確認しながら、SNS動画や広告挿入を新たな収益枠として設計できる可能性があります。
- 動画制作会社: 見どころの発見や短尺化を担ってきた事業者は、リアルタイム処理や権利管理、投稿運用まで含めた支援へサービス範囲を広げる必要に迫られる可能性があります。
このニュースの背景
従来のライブハイライト制作は、編集者が映像から見せ場を探した後、配信システムのオペレーターがエンコードやパッケージングを行う手作業が中心でした。
スポーツやコンサートは夜間・休日に開催されることが多く、制作本数や人員の制約から、ハイライト化されない映像が生じていました。
一方で、若年層ではインターネット利用時間がテレビ視聴時間を上回り、スポーツ視聴でも試合全体よりクリップやハイライトを好む傾向が示されています。
ライブ中のSNS拡散と本編への誘導を両立するには、見どころの検知から短尺動画の生成・投稿までを短時間で処理する仕組みが求められていました。
関連するニュース
- PLAINERは、ソフトウェアの操作案内や承認後の入力代行に対応するAI Agentを提供開始しました。
- IFSは、産業オペレーションのデータ分析からアクション実行まで支援するAI製品を提供します。
- エーアイ・アンドは、国内自社インフラで動くAI動画生成サービス「ai& video」を提供開始しました。
詳しい記事の内容はこちらから(引用元)
INISOFT Co.,Ltd.(東京都渋谷区渋谷2-7-14 VORT AOYAMA 401号室、代表取締役社長:Ja…
https://www.atpress.ne.jp/news/643128