Twitter によるテレビ番組重要シーン検出及びラベル付与手法 Detection ...

たところ, 提 案 手 法 により 検 出 した 重 要 シーンには,「キックオフ」,「ゴール」,「イエロー」,「 前 半 終 了 」などのラベルが 付 与 された.このことから, 提 案 手 法は,サッカー 中 継 にも 適 用 可 能 であることが 示 された.サッカー 番 組 に 対 する 主 要 人 物 推 定 で ,キックオフシーンの 主 要 人 物 が 選 手 ではない「 松 木 ( 解 説 者 )」となった.Twitter 上 で 松 木 に 対 する 意 見 が 数 多 く 述 べられているため, 解 説 者 にもかかわらず 主 要 人 物 として抽 出 された.このように, 視 聴 者 間 で 話 題 になるシーンやラベルが 抽 出 できるのが, 視 聴 者 視 点 にたった 本提 案 手 法 の 特 徴 であり,その 目 的 が 果 たされているといえる.ゆらぎ 修 正 前 ・ 修 正 後 ともラベリング 結 果 と 一 致 しなかった 推 定 イベントラベルの 内 容 を 調 べる. 不 正 解になった 推 定 イベントラベルは, 野 球 イベント 以 外 のラベル 名 が 付 与 されている. 具 体 的 には,「よしよし」,「キタ」,「 残 念 」 等 の 感 想 を 表 現 したラベルや「ナイスプレー」,「ナイスピッチング」といったプレーに 対する 賞 賛 を 表 すラベル,「 満 塁 」,「ノースリー」,「 同 点 」等 の 状 況 を 表 すラベルがあった.このようなラベルは,シーンに 付 与 する 野 球 イベントラベルとしては 相 応 しいとはいえないが, 付 加 情 報 として 利 用 することができる. 例 えば, 感 想 を 表 すラベルからポジティブ・ネガティブ 判 定 を 行 うことができ, 賞 賛 を 表 すラベルからファインプレー 等 の 貴 重 なシーンが 存 在 することが分 かる. 状 況 を 表 すラベルの 中 でも, 塁 上 のラベルはピンチやチャンスの 状 況 判 断 に 利 用 でき, 得 点 のラベルは 得 点 変 化 や 試 合 の 流 れを 表 すことができる.感 情 ラベルを 利 用 すると, 対 象 チームのポジティブ/ネガティブなシーンのみを 見 る/ 見 ないといった 視 聴方 法 が 可 能 になる. 例 えば, 賞 賛 を 表 すラベルは,ファインプレー 検 索 に 利 用 できる. 塁 上 ラベルは,ピンチやチャンス 等 のターニングポイントの 視 聴 に 利 用 でき, 得 点 ラベルは 大 まかな 試 合 の 流 れをつかむヒントとして 利 用 できる.このように, 野 球 イベントとして相 応 しいとはいえないイベント 内 容 ラベルについても,アプリケーション 化 する 際 に 有 効 であるといえる.本 提 案 手 法 を 利 用 すると, 図 7 のようなグラフが 作成 できる.グラフを 見 ながら 録 画 した 番 組 を 視 聴 することで, 多 くの 人 が 盛 り 上 がったシーンが 一 目 でわかり,キーワードを 見 ることで 盛 り 上 がった 内 容 を 知 ることが 可 能 となる.Twitter を 利 用 していないユーザが,この 解 析 結 果 グラフを 見 ながらテレビ 視 聴 することで,Twitter 上 での 盛 り 上 がった 番 組 の 見 どころシーンを共 感 するといった 体 験 ができる.図 7.( 上 )プロ 野 球 の 例 ,( 下 )サッカーの 例5. おわりに本 稿 では,テレビ 番 組 に 対 する Tweet を 解 析 することで, 重 要 シーンを 自 動 的 に 検 出 し,そのシーンにおける 主 要 人 物 を 推 定 し,その 人 物 をもとにイベント 内容 を 推 定 する 手 法 を 提 案 した.プロ 野 球 番 組 を 対 象 に提 案 手 法 を 評 価 した 結 果 , 試 合 中 の 重 要 シーンを 高 精度 で 検 出 できることが 示 された.また, 検 出 された 重要 シーンに 対 する 主 要 人 物 ラベルを 高 精 度 な 付 与 が 可能 であることが 実 証 できた. 主 要 人 物 をもとにしたイベント 内 容 推 定 では 一 定 の 有 効 性 が 示 せた.今 後 は, 他 のスポーツ 番 組 や 他 ジャンルの 番 組 にも適 用 し, 提 案 手 法 の 有 効 性 を 調 査 する.また, 提 案 手法 をもとに, 重 要 シーンジャンプ 機 能 を 含 むアプリケーションの 開 発 を 進 める.参 考 文 献[1] D A Shamma, L Kennedy, E F Churchill “Tweet thedebates”, Proc WSM'09, 2009.[2] A Hanjalic, “Adaptive Extraction of HighlightsFrom a Sport Video Based on Excitement ModelingMultimedia”, IEEE Transactions on, 2005[3] Newton’s method.http://en.wikipedia.org/wiki/Newton%27s_methodAccessed January 7, 2011.[4] 宮 内 進 吾 , 馬 場 口 登 , 北 橋 忠 宏 ,“テキスト・ 音声 ・ 画 像 の 協 調 的 処 理 による 放 送 型 スポーツ 映 像の 意 味 内 容 獲 得 のためのストーリー 分 割 法 ”, 電子 情 報 通 信 学 会 論 文 誌 . D-II, 情 報 ・システム, II-パターン 処 理 J85-D-II(11), 1692-1700, 2002