インターネット情報からのニュースショー自動生成放送
TV News Show Broadcast Generated Automatically from Data on the Internet
林 正樹
†中嶋 正之
‡†スティーブン・バチェルダー
†Masaki HAYASHI
†Masayuki NAKAJIMA
‡†Steven Bachelder
††
ゴットランド大学
‡東京工業大学世界文明センター
†
Gotland University
‡Tokyo Institute of Technology, Center for the Study of World Civilizations
Abstract We propose an automatic news broadcasting system, which generates full-CG animated news-shows from original text formats from the Internet. This paper introduces the overall system and provides a feasibility test and working model of the news show application generated from a HTML Internet news site. We also describe the future collaboration work.
1. は じ め に
ス マ ー ト フ ォ ン を 代 表 と す る モ バ イ ル 、 ブ ロ ー ド バ ン ド イ ン タ ー ネ ッ ト 、 タ ブ レ ッ ト コ ン ピ ュ ー タ の 普 及 な ど 、 メ デ ィ ア と コ ン テ ン ツ の 姿 は 多 様 化 し て い る 。 我 々 は 、 こ の 状 況 の 中 で 特 に 「 テ レ ビ ジ ョ ン 」 を 取 り 上 げ 、 次 世 代 の テ レ ビ シ ス テ ム の あ り 方 に つ い て 検 討 を 続 け て き た 。 テ レ ビ の 一 つ の あ り 方 と し て こ れ ま で 我 々 は 、 テ レ ビ 番 組 を コ ン ピ ュ ー タ で 自 動 的 に 作 っ て 配 信 す る 「 自 動 放 送 」 に つ い て 検 討 し て き た 。 今 回 、 特 に テ レ ビ の 基 本 で あ る ニ ュ ー ス 番 組 に ス ポ ッ ト を 当 て 、 こ れ を す べ て 電 子 的 に 自 動 生 成 し て ユ ー ザ ー に 配 信 す る シ ス テ ム を 改 め て 提 案 す る 。 方 法 と し て は 、 ニ ュ ー ス ソ ー ス の テ キ ス ト を 受 け て 、 こ れ を コ ン ピ ュ ー タ で 解 析 し 、 ニ ュ ー ス シ ョ ー 台 本 を 自 動 生 成 し 、 そ れ に 基 づ き リ ア ル タ イ ム CG や 音 声 合 成 で ニ ュ ー ス シ ョ ー を 丸 ご と 電 子 的 に 自 動 生 成 し 、 配 信 す る 。 本 稿 で は 、 以 上 の ニ ュ ー ス 番 組 自 動 生 成 ・ 配 信 シ ス テ ム に 至 る 背 景 、 そ し て そ の 概 要 、 さ ら に 実 際 に ニ ュ ー ス 番 組 を 自 動 生 成 す る 実 験 を 紹 介 し 、 最 後 に 、 こ の 生 成 ・ 配 信 シ ス テ ム の 実 現 に お け る 課 題 に つ い て 述 べ る 。2. 背 景
従 来 型 の 大 型 メ デ ィ ア の ひ と つ で あ る テ レ ビ は 、 テ レ ビ 産 業 が 巨 大 で あ る が ゆ え か 、 な か な か そ の 体 質 が 変 わ ら な い 。 こ れ ま で イ ン タ ー ネ ッ ト 上 の ソ ー シ ャ ル ネ ッ ト ワ ー ク と テ レ ビ を 結 び つ け る 試 み [1] な ど が 多 く な さ れ て い る 。さ ら に 、昨 今 、Apple 、Google、Samsung な ど か ら 相 次 い で ス マ ー ト TV と い う コ ン セ プ ト で 次 世 代 の テ レ ビ が 発 表 さ れ た が 、 そ の い ず れ も 、 い ま だ に 華 々 し い 成 功 に 至 っ て い な い の が 現 状 で あ る 。 次 世 代 の テ レ ビ に 関 す る 試 み は 、 イ ン タ ー ネ ッ ト と モ バ イ ル を ベ ー ス と し た メ デ ィ ア や コ ン テ ン ツ の ユ ビ キ タ ス 化 の 著 し い 成 功 と 対 照 的 で あ る 。 そ う い う 意 味 で 、 テ レ ビ は 現 在 、 最 後 に 残 っ た チ ャ レ ン ジ と も 言 え る 。 こ れ ま で の チ ャ レ ン ジ で は 、 テ レ ビ 番 組 と い う コ ン テ ン ツ を 中 心 と し て 、 そ れ に 対 し て イ ン タ ー ネ ッ ト コ ン テ ン ツ や ソ ー シ ャ ル ネ ッ ト ワ ー ク 、 直 感 的 GUI な ど を う ま く 統 合 す る 、 と い う 方 向 性 が 大 半 で あ っ た 。 し か し な が ら 、 そ の 前 提 と な る テ レ ビ コ ン テ ン ツ が 従 来 型 の ま ま で は ど う し て も 発 展 に 限 界 が あ る 。 我 々 は 、 そ の テ レ ビ 番 組 コ ン テ ン ツ そ の も の に 焦 点 を 当 て 、 そ れ を 電 子 的 に 自 動 生 成 す る こ と に よ っ て 一 気 に 次 世 代 の テ レ ビ シ ス テ ム へ 飛 躍 し よ う と す る も の で あ る 。3. 自 動 ニ ュ ー ス 番 組 生 成 ・ 配 信 シ ス テ ム
今 回 は 、 特 に ニ ュ ー ス 番 組 に 焦 点 を 当 て 、 こ れ を 電 子 的 に 自 動 生 成 し 配 信 す る シ ス テ ム を 提 案 す る 。 図 1 に 、 提 案 シ ス テ ム の 構 成 図 を 示 す 。 入 力 は ニ ュ ー ス 原 稿 、 取 材 映 像 な ど の ニ ュ ー ス ソ ー ス で あ る 。 こ れ ら は コ ン ピ ュ ー タ で 解 析 さ れ 、 ア ナ ウ ン サ ー が し ゃ べ る 読 み 原 稿 の 生 成 や 、 取 材 映 像 の 適 切 な 自 動 編 集 、 さ ら に 演 出 の 一 つ と し て た と え ば 画 面 に 出 す ス ー パ ー イ ン ポ ー ズ に よ る キ ャ プ シ ョ ン の 自 動 抽 出 な ど を 行 う 。 Ar t i cl e : パ リ “自 由 の 女 神 像 ” を 美 術 館 に 移 設 Ma i n bo d y: フ ラ ン ス 革 命 1 0 0 年 を 記 念 し て 作 ら れ 、 パ リ の 公 園 に 置 か れ て い た 「 自 由 の 女 神 像 」 が 傷 み が 激 し く な っ た た め 修 復 さ れ 、 2 日 、 オ ル セ ー 美 術 館 で お 披 露 目 さ れ ま し た 。 .. . .. . . .. ニ ュ ー ス ソ ー ス ア ナ ラ イ ザ | こ ん に ち は 、 ロ イ タ ー ニ ュ ー ス で す 。 あ の パ リ の 自 由 の 女 神 が 美 術 館 に 移 設 さ れ ま し た 。 フ ラ ン ス 革 命 10 0 年 を 記 .. . . . 読 み 原 稿 編 集 映 像 ア ー ト ワ ー ク (o p e ni n g mo v i e) su p e ru p p e ri g h t: lo g o .g i f a n n o u n c e r : Ca t h y se t : ne w s sh o w #1 (c a m er a cl o s eu p ) こ ん に ち は 、ロ イ タ ー ニ ュ ー ス で す 。 di s p la y : a 15 2 3 4. j p g (w a i t) あ の パ リ の 自 由 の 女 神 が 美 術 館 に 移 設 さ れ ま し た .. . ニ ュ ー ス 台 本 ビ ジ ュ ア ラ イ ザ | フ ル CG ニ ュ ー ス 番 組 図 1. 自 動 ニ ュ ー ス 番 組 生 成 の 構 成 図こ れ ら の 結 果 を い っ た ん ニ ュ ー ス 台 本 の 形 式 と し て ま と め る 。 そ の 後 、 こ の 台 本 を 元 に 、 リ ア ル タ イ ム CG で 作 ら れ た ニ ュ ー ス キ ャ ス タ ー を 音 声 合 成 で し ゃ べ ら せ 、 さ ら に 映 像 挿 入 な ど の 演 出 を 加 え て ニ ュ ー ス ア ニ メ ー シ ョ ン を 自 動 生 成 す る 。 一 方 、配 信 の 方 法 に は 、(1)ム ー ビ ー と し て 配 信 す る 、 (2)台 本 と 素 材 を 配 信 し て ユ ー ザ ー 側 で 映 像 化 す る 、(3) 映 像 化 の 仕 組 み を ク ラ ウ ド 側 に 置 き ス ト リ ー ミ ン グ で ユ ー ザ ー 側 に 配 信 す る 、 と い っ た 方 法 が 考 え ら れ る 。 次 に 述 べ る 対 話 性 を 考 慮 す る と (2)と (3)が 適 し て お り 、 最 終 的 に は (3)に 収 斂 し て 行 く で あ ろ う 。 以 上 に 加 え 、 我 々 は ニ ュ ー ス 番 組 に イ ン タ ラ ク テ ィ ブ 性 と イ ン テ リ ジ ェ ン ト 性 を 持 た せ る こ と も 考 え て 行 く 。ユ ー ザ ー が CG ニ ュ ー ス キ ャ ス タ ー と 直 接 対 話 し て 見 た い ニ ュ ー ス 番 組 を そ の 場 で 生 成 し て 見 た り 、 ニ ュ ー ス の 意 味 内 容 を 自 動 検 出 し て そ れ に 応 じ た 演 出 ス タ イ ル で 見 せ る な ど 、 ニ ュ ー ス 番 組 の コ ン テ ン ツ そ の も の を イ ン タ ラ ク テ ィ ブ で イ ン テ リ ジ ェ ン ト な も の に す る 。こ れ に よ っ て 、現 状 の ス マ ー ト TV で ネ ッ ク と な っ て い た コ ン テ ン ツ そ の も の が 旧 態 の テ レ ビ 番 組 で あ る 、 と い う 限 界 を 突 破 す る こ と を 試 み た い 。
4. 実 験 ア プ リ ケ ー シ ョ ン
実 際 に 撮 影 し て 編 集 し て テ レ ビ 番 組 を 制 作 す る 代 わ り に 、CG な ど を 使 っ て 番 組 を コ ン ピ ュ ー タ で 作 り 出 す 研 究 [2]は 古 く か ら 行 わ れ て お り 、テ キ ス ト 台 本 か ら 自 動 生 成 す る T2V (Text-To-Vision)[3] な ど の 例 が 上 げ ら れ る 。 今 回 、 こ の T2V 技 術 を 使 っ た 簡 単 な ニ ュ ー ス 番 組 自 動 生 成 ア プ リ ケ ー シ ョ ン を 作 成 し て 実 験 を 行 っ た の で 紹 介 す る 。 図 2 に 試 作 し た ア プ リ ケ ー シ ョ ン を 示 す 。 ニ ュ ー ス 表 示 ウ ィ ン ド ウ と 、 チ ャ ン ネ ル 選 択 ボ タ ン と 、 対 話 用 テ キ ス ト 入 力 窓 を 持 っ て い る 。 ニ ュ ー ス ソ ー ス と し て NHK オ ン ラ イ ン ニ ュ ー ス や Reuters の Web サ イ ト を 利 用 し て お り 、 チ ャ ン ネ ル ボ タ ン で 切 り 替 え る 。 ア プ リ ケ ー シ ョ ン は Web サ イ ト の HTML を 取 得 し 、こ れ を 解 析 し 、 ニ ュ ー ス 記 事 の タ イ ト ル と 本 文 と JPEG イ メ ー ジ 、 日 時 、 カ テ ゴ リ な ど を 取 得 す る 。 以 上 を テ キ ス ト 処 理 し 、い っ た ん ニ ュ ー ス 台 本 形 式 に 自 動 変 換 し 、こ れ に 、 CG ア ナ ウ ン サ ー や ニ ュ ー ス セ ッ ト 、効 果 音 な ど を 加 え た 演 出 を 適 用 し T2V 台 本 に 変 換 す る 。 最 後 に こ の T2V 台 本 が T2V 再 生 エ ン ジ ン に よ っ て 再 生 さ れ リ ア ル タ イ ム CG と 音 声 合 成 に よ る フ ル CG ニ ュ ー ス 映 像 が 得 ら れ る 。 T2V は 多 言 語 な の で 、 英 語 を 始 め 多 く の 言 語 に 対 応 で き る 。 ま た 、 キ ー を 押 す こ と で ニ ュ ー ス 番 組 に 割 り 込 ん で 対 話 モ ー ド に 入 り ア ナ ウ ン サ ー キ ャ ラ ク タ と 対 話 す る こ と が で き る 。 実 験 の 結 果 だ が 、 な か な か 快 適 で あ り 、 単 に ニ ュ ー ス を 合 成 音 で 読 み 上 げ る だ け で は な く 、ニ ュ ー ス シ ョ ー と し て 演 出 と 共 に 提 供 し て く れ る こ と で 、リ ラ ッ ク ス し て 見 ら れ る 、と い っ た 感 想 が 多 か っ た 。5 つ 並 ん だ ボ タ ン に「 今 さ ら チ ャ ン ネ ル な の か 」と い う 批 判 や 、 対 話 モ ー ド で は 文 字 打 ち 込 み じ ゃ な く て 音 声 認 識 に な ら な い の か 、 な ど 様 々 な 意 見 や ア イ デ ア が 寄 せ ら れ た 。 そ う し た 新 し い メ デ ィ ア デ ザ イ ン に 関 す る 刺 激 を 生 み 出 す こ と こ そ 、 こ の 実 験 ア プ リ ケ ー シ ョ ン の 狙 い だ っ た の で 、 成 功 と 言 っ て よ い と 思 う 。5. お わ り に
ニ ュ ー ス 番 組 を タ ー ゲ ッ ト と し 、 こ れ を 電 子 的 に 自 動 的 に 生 成 し 、 フ ル CG に よ る ニ ュ ー ス 番 組 を 生 成 し 、 こ れ を ニ ュ ー ス 生 成 ・ 配 信 シ ス テ ム と し て 構 築 す る 提 案 と 実 験 に つ い て 述 べ た 。 本 シ ス テ ム の 実 現 に は 、 ニ ュ ー ス ソ ー ス か ら の 意 味 抽 出 、 台 本 生 成 に お け る 自 然 言 語 処 理 技 術 、CG や ニ ュ ー ス 演 出 に お け る デ ザ イ ン ワ ー ク 、 多 言 語 の 音 声 合 成 技 術 、 イ ン タ ラ ク シ ョ ン を 実 現 す る ゲ ー ム デ ザ イ ン 技 術 な ど 、 多 く の 技 術 の 集 積 が 必 要 で あ る 。 逆 に そ れ ら の 研 究 分 野 に お け る 研 究 成 果 を 、 一 つ の 大 き な プ ロ ジ ェ ク ト で 現 実 の 世 界 で 役 立 た せ る チ ャ ン ス で も あ る 。 今 後 は 、 複 数 の 国 か ら な る 研 究 グ ル ー プ の 立 ち 上 げ を 行 う と 共 に 、 将 来 計 画 の 策 定 、 詳 細 な 技 術 的 検 討 、 加 え て 、 ニ ュ ー ス ソ ー ス と の 提 携 な ど の メ デ ィ ア 的 な 問 題 を 解 決 す る べ く 活 動 す る 予 定 で あ る 。文
献
[1] 浜 口 , 米 倉 :“ソ ー シ ャ ル メ デ ィ ア に よ る 視 聴 行 動 の 新 潮 流 ~ 大 規 模 ソ ー シ ャ ル テ レ ビ 実 験 teleda の 分 析 結 果 か ら ~ ” , 映 像 情 報 メ デ ィ ア 学 会 誌 , vol.66, no.4, pp.244-247(2012) [2] 道 家 、 林 、 牧 野 : “TVML を 用 い た 番 組 情 報 か ら の ニ ュ ー ス 番 組 自 動 生 成 ”, 映 像 情 報 メ デ ィ ア 学 会 誌 , No.7, pp.1097-1103 (2000) [3] T2V ホ ー ム ペ ー ジ : http://t2vlab.jpGotland University, Department of Game Design SE - 621 67 Visby, Sweden
TEL.090-9235-8536 E-mail: hayasim77@gmail.com 図 2. 実 験 ア プ リ の 画 面