発表資料PDF
発表資料PDF
発表資料PDF
- No tags were found...
You also want an ePaper? Increase the reach of your titles
YUMPU automatically turns print PDFs into web optimized ePapers that Google loves.
1<br />
1
ヒューマノイドロボット<br />
HRP-4C 未 夢 が 自 然 な 歌 声 と 表 情 で 歌 唱<br />
お 手 本 歌 唱 を 真 似 る 二 つの 技 術 により 実 現<br />
• VocaListener(ぼかりす)<br />
• 「 歌 い 方 」を 真 似 て 歌 声 合 成 する 技 術<br />
• VocaWatcher(ぼかうお)<br />
• 「 顔 表 情 」を 真 似 てロボットの 顔 動 作 を 生 成 する 技 術<br />
人 間<br />
(お 手 本 )<br />
顔 表 情<br />
ぼかうお<br />
歌 い 方<br />
ぼかりす<br />
ロボット<br />
2
VocaListener(ぼかりす)<br />
[ 中 野 , 後 藤 (2008~)]<br />
歌 うだけで 楽 譜 と 自 然 なパラメータを 自 動 生 成<br />
音 源 ( 声 色 )を 手 軽 に 切 り 替 えて 合 成 できる<br />
歌 唱 者<br />
呑 めと 言 われて<br />
陽 気 に 呑 んだ<br />
日 本 語 / 英 語<br />
[RWC-MDB-G No.91 大 漁 船 ]<br />
分 ぼかりす<br />
析<br />
声 の 高 さ<br />
声 の 大 きさ<br />
時 間<br />
時 間<br />
3<br />
合<br />
成<br />
様 々な 声 色 の<br />
歌 声 合 成 ソフトウェア<br />
VOCALOID<br />
KAITO<br />
初 音 ミク<br />
鏡 音 リン
VocaWatcher(ぼかうお)<br />
歌 うだけでヒューマノイドロボットの<br />
自 然 な 顔 動 作 パラメータを 自 動 生 成<br />
歌 唱 者<br />
分<br />
析<br />
ぼかうお<br />
頭 部 の 位 置<br />
頭 部 の 回 転<br />
生<br />
成<br />
ヒューマノイドロボット<br />
視 線<br />
まばたき<br />
ぼかりす 分 析 結 果<br />
口 の 開 き<br />
HRP-4C 未 夢 (みーむ)<br />
4
VocaWatcher(ぼかうお)<br />
歌 うだけでヒューマノイドロボットの<br />
自 然 な 顔 動 作 パラメータを 自 動 生 成<br />
歌 唱 者<br />
分<br />
析<br />
ぼかうお<br />
頭 部 の 位 置<br />
頭 部 の 回 転<br />
生<br />
成<br />
ヒューマノイドロボット<br />
視 線<br />
まばたき<br />
ぼかりす 分 析 結 果<br />
口 の 開 き<br />
HRP-4C 未 夢 (みーむ)<br />
5
研 究 背 景 :「 歌 うロボット」の 意 義<br />
ヒューマノイドロボットの 有 望 な 応 用 事 例<br />
• 人 々の 関 心 を 惹 き 付 けやすい<br />
• 我 々の 展 示 経 験 (CEATEC2010、 産 総 研 オープンラボなど)<br />
• アイドルロボット 構 想 ( 経 済 産 業 省 「 技 術 戦 略 マップ2010」)<br />
• 歌 声 合 成 とロボットの 高 い 親 和 性<br />
• ロボット 技 術 のエンターテインメント 分 野 への 展 開<br />
人 間 との 自 然 なコミュニケーションの 実 現<br />
• まずは 人 間 を「 真 似 る」 ことで「 自 然 さ」を 追 求<br />
• 未 来 社 会 において 不 可 欠 な 基 礎 技 術<br />
• 声 の 音 響 信 号 処 理 、 顔 の 画 像 処 理 、ロボット 制 御 の 技 術<br />
6
先 行 研 究 :( 二 足 歩 行 )ロボットと 音 楽<br />
Sony QRIO (4 体 )<br />
[Kuroki et al., 2003]<br />
• ビブラート 付 アカペラコーラス<br />
Honda ASIMO<br />
[Murata et al., 2008]<br />
• ビートトラッキングとオンボードマイクを 用 いた 歌 唱<br />
産 総 研 HRP-4C<br />
[Tachibana et al., 2010]<br />
• VOCALOIDと 組 み 合 わせた 表 情 制 御 と 歌 唱<br />
• CEATEC2009で 展 示<br />
人 間 を 真 似 て、 歌 声 分 析 と 組 み 合 わせた 例 はなかった<br />
7
VocaListener(ぼかりす)<br />
[ 中 野 , 後 藤 (2008~)]<br />
歌 うだけで 楽 譜 と 自 然 なパラメータを 自 動 生 成<br />
音 源 ( 声 色 )を 手 軽 に 切 り 替 えて 合 成 できる<br />
歌 唱 者<br />
呑 めと 言 われて<br />
陽 気 に 呑 んだ<br />
日 本 語 / 英 語<br />
[RWC-MDB-G No.91 大 漁 船 ]<br />
分 ぼかりす<br />
析<br />
声 の 高 さ<br />
声 の 大 きさ<br />
時 間<br />
時 間<br />
8<br />
合<br />
成<br />
様 々な 声 色 の<br />
歌 声 合 成 ソフトウェア<br />
VOCALOID<br />
KAITO<br />
初 音 ミク<br />
鏡 音 リン
VocaListener(ぼかりす)<br />
[ 中 野 , 後 藤 (2008~)]<br />
歌 うだけで 楽 譜 と 自 然 なパラメータを 自 動 生 成<br />
音 源 ( 声 色 )を 手 軽 に 切 り 替 えて 合 成 できる<br />
歌 唱 者<br />
呑 めと 言 われて<br />
陽 気 に 呑 んだ<br />
日 本 語 / 英 語<br />
[RWC-MDB-G No.91 大 漁 船 ]<br />
分 ぼかりす<br />
析<br />
声 の 高 さ<br />
声 の 大 きさ<br />
時 間<br />
時 間<br />
9<br />
合<br />
成<br />
様 々な 声 色 の<br />
歌 声 合 成 ソフトウェア<br />
VOCALOID<br />
KAITO<br />
初 音 ミク<br />
鏡 音 リン
VocaListener(ぼかりす) [ 中 野 , 後 藤 (2008~)]<br />
【 入 力 】 人 間 の 歌 声 信 号 と 歌 詞<br />
歌 詞 「 呑 めといわれて 陽 気 に 呑 んだ」<br />
1. 歌 声 用 の 音 響 モデル(HMM)を 用 いて<br />
歌 詞 の 発 声 タイミングを 得 る<br />
(モーラ)<br />
N no me to i wa re te yo u ki ni no N da<br />
2. 歌 声 合 成 パラメータ( 音 高 と 音 量 )を<br />
反 復 更 新 して 出 力 を 目 標 に 近 づける<br />
10
ブレス 検 出 ・ 合 成 を 新 規 開 発<br />
人 間 の 歌 手 は 歌 唱 中 にブレス( 吸 気 )する<br />
• 顔 動 作 を 真 似 ると 口 を 開 けてしまう<br />
• 問 題 点 : 口 が 開 くのみで 音 がないと 不 自 然<br />
⇒ブレス 音 を 真 似 て 歌 声 合 成<br />
ブレス<br />
ブレス<br />
11
ブレス 音 の 合 成 なし/ 合 成 した 場 合<br />
12
HMMによるブレス 検 出<br />
[ 中 野 , 緒 方 , 後 藤 , 平 賀 (2008~)]<br />
ブレス/ 歌 声 / 無 音 の3 種 のHMM<br />
• 「 歌 声 」 区 間 は、 子 音 ・ 母 音 は 区 別 せずに 扱 う<br />
• 3 状 態 16 混 合<br />
• 特 徴 量<br />
• MFCC (12), ⊿MFCC (12), ⊿Power (1)<br />
無 音<br />
• 分 析 条 件<br />
– 16kHzサンプリング、ハミング 窓 ( 窓 幅 25ms、シフト 10ms)<br />
• 学 習 用 歌 声 データ<br />
• 1488 個 のブレス、438 秒<br />
– 16 人 が 歌 った27 曲 (RWC 研 究 用 音 楽 データベース)<br />
とAISTハミングデータベースから 女 性 2 人 分<br />
» 男 性 15 曲 、 女 性 14 曲<br />
» 日 本 語 歌 詞 20 曲 、 英 語 歌 詞 9 曲<br />
13<br />
ブレス<br />
歌 声
ブレス 検 出 結 果<br />
先 行 研 究 の 知 見<br />
[ 中 野 他 , 2008]<br />
に 基 づく 検 出 精 度 の 向 上<br />
• HMMによる 検 出 のみでは、 再 現 率 は 高 いが 呼 気 や 子 音 で 誤 検 出 する<br />
⇒ 歌 唱 フレーズの 直 前 以 外 の 結 果 を 削 除<br />
⇒ 継 続 時 間 長 が50ms~1225ms 以 外 の 結 果 を 削 除<br />
実 験 条 件<br />
• 楽 曲 :RWC-MDB-P No.7 PROLOGUE<br />
• 歌 唱 者 : 日 本 人 女 性 1 名<br />
検 出 結 果<br />
• 従 来 : 再 現 率 100%, 精 度 66.25%<br />
• 改 良 : 再 現 率 100%, 精 度 100%<br />
14<br />
※ブレス 位 置 のみの 結 果 であり<br />
検 出 時 刻 のずれを 無 視 した 場 合
ブレス 検 出 結 果<br />
※ 歌 唱 者 によっては<br />
時 刻 誤 りが 多 かった<br />
※ 同 一 歌 唱 者 の<br />
別 の 曲 でも<br />
良 く 動 作 した<br />
15
ブレス 合 成 手 法<br />
ソース・フィルタ 分 析 に 基 づく 合 成<br />
1. ブレス 音 テンプレートを 合 成<br />
• 歌 声 合 成 ソフトウェアから 手 作 業 で 合 成<br />
2. スペクトル 包 絡 を 推 定<br />
3. ブレス 検 出 時 刻 で 合 成<br />
1. テンプレートの 包 絡<br />
を 時 間 伸 縮<br />
2. 音 量 を 反 映<br />
3. インパルス 応 答 と<br />
ガウス 雑 音 を 畳 み 込 む<br />
16
ブレス 合 成 結 果<br />
お 手 本 歌 唱<br />
[ 曲 :RWC-MDB-P No.7 PROLOGUE] [ 歌 唱 : サリヤ 人 様 ]<br />
ブレス 音 ブレス 音<br />
合 成 歌 唱<br />
[ 歌 声 合 成 ソフトウェア:Vocaloid2 初 音 ミク]<br />
ブレス 音<br />
ブレス 音<br />
ブレス 音<br />
ブレス 音<br />
17
ブレス 合 成 結 果 (Mix)<br />
お 手 本 歌 唱<br />
[ 曲 :Packaged by kz 様 ]<br />
[ 歌 唱 : サリヤ 人 様 ]<br />
ブレス 音<br />
ブレス 音<br />
合 成 歌 唱<br />
[ 歌 声 合 成 ソフトウェア:Vocaloid2 Megpoid]<br />
ブレス 音<br />
ブレス 音<br />
ブレス 音<br />
ブレス 音<br />
18
VocaWatcher(ぼかうお)<br />
歌 うだけでヒューマノイドロボットの<br />
自 然 な 顔 動 作 パラメータを 自 動 生 成<br />
歌 唱 者<br />
分<br />
析<br />
ぼかうお<br />
頭 部 の 位 置<br />
頭 部 の 回 転<br />
生<br />
成<br />
ヒューマノイドロボット<br />
視 線<br />
まばたき<br />
ぼかりす 分 析 結 果<br />
口 の 開 き<br />
HRP-4C 未 夢 (みーむ)<br />
19
VocaWatcher(ぼかうお)<br />
歌 うだけでヒューマノイドロボットの 自 然 な 顔 動<br />
作 パラメータを 自 動 生 成<br />
歌 唱 者<br />
分<br />
析<br />
ぼかうお<br />
頭 部 の 位 置<br />
頭 部 の 回 転<br />
生<br />
成<br />
ヒューマノイドロボット<br />
視 線<br />
まばたき<br />
ぼかりす 分 析 結 果<br />
口 の 開 き<br />
HRP-4C 未 夢 (みーむ)<br />
20
VocaWatcher(ぼかうお)<br />
歌 うだけでヒューマノイドロボットの 自 然 な 顔 動<br />
作 ビデオ パラメータを 映 自 像 動 からの 生 成 画 像 処 理<br />
歌 唱 者<br />
分<br />
析<br />
ぼかうお<br />
頭 部 の 位 置<br />
頭 部 の 回 転<br />
生<br />
成<br />
ヒューマノイドロボット<br />
視 線<br />
まばたき<br />
ぼかりす 分 析 結 果<br />
口 の 開 き<br />
HRP-4C 未 夢 (みーむ)<br />
21
ビデオ 映 像 からの 顔 追 跡<br />
頭 部 の 位 置 と 回 転 を 検 出<br />
• 市 販 ソフトウェアを 使 用<br />
• faceAPI ver.3.2.6<br />
– Seeing Machines 社 , http://www.seeingmachines.com<br />
[RWC-MDB-P-2001 No.7 PROLOGUE]<br />
22
VocaWatcher(ぼかうお)<br />
歌 うだけでヒューマノイドロボットの 自 然 な 顔 動<br />
作 パラメータを 分 析 結 果 自 動 からの 生 成 軌 道 生 成<br />
歌 唱 者<br />
分<br />
析<br />
ぼかうお<br />
頭 部 の 位 置<br />
頭 部 の 回 転<br />
生<br />
成<br />
ヒューマノイドロボット<br />
視 線<br />
まばたき<br />
ぼかりす 分 析 結 果<br />
口 の 開 き<br />
HRP-4C 未 夢 (みーむ)<br />
23
HRP-4Cの 頭 部 アクチュエータ<br />
首<br />
NECK_Y<br />
NECK_P<br />
NECK_R<br />
目 元<br />
EYEBROW_P<br />
EYELID_P<br />
EYE_P<br />
EYE_Y<br />
口 元<br />
MOUTH_P<br />
UPPERLIP_P<br />
LOWERLIP_P<br />
CHEEK_P<br />
24
faceAPI ver.3.2.6 の 特 性<br />
顔 の 姿 勢 (Roll, Pitch, Yaw)は 良 好 に 検 出<br />
フィルタ 処 理 を 行 い、 首 3 軸 の 動 作 角 として 利 用<br />
Roll<br />
Pitch<br />
Yaw<br />
25
VocaWatcher(ぼかうお)<br />
歌 うだけでヒューマノイドロボットの 自 然 な 顔 動<br />
作 ビデオ パラメータを 映 自 像 動 からの 生 成 画 像 処 理<br />
歌 唱 者<br />
分<br />
析<br />
ぼかうお<br />
頭 部 の 位 置<br />
頭 部 の 回 転<br />
生<br />
成<br />
ヒューマノイドロボット<br />
視 線<br />
まばたき<br />
ぼかりす 分 析 結 果<br />
口 の 開 き<br />
HRP-4C 未 夢 (みーむ)<br />
26
faceAPI ver.3.2.6 の 問 題 点<br />
まばたきと 視 線 を 検 出 できない<br />
唇 のトラッキングにしばしば 失 敗 する<br />
faceAPIで 得 られた 情 報 を 元 に、 新 たな 画 像 処 理 を 行 う<br />
右 目 の 領 域 ⇒ まばたきと 視 線 の 検 出<br />
顔 中 心 線 ⇒ 口 開 度 の 検 出<br />
27
faceAPI ver.3.2.6 の 問 題 点<br />
まばたきと 視 線 を 検 出 できない<br />
唇 のトラッキングにしばしば 失 敗 する<br />
faceAPIで 得 られた 情 報 を 元 に、 新 たな 画 像 処 理 を 行 う<br />
右 目 の 領 域 ⇒ まばたきと 視 線 の 検 出<br />
顔 中 心 線 ⇒ 口 開 度 の 検 出<br />
28
まばたきと 視 線 の 検 出<br />
faceAPIで 検 出 された 右 目 の 領 域 を 画 像 処 理<br />
• 円 形 ハフ 変 換 と 色 距 離 に 基 づく 視 線 検 出<br />
• 瞳 の 存 在 確 率 を 計 算 して 決 定<br />
• まぶた 開 度 の 推 定 (まばたき 検 出 )<br />
• 瞳 とまぶたの 輝 度 から、サブピクセル 精 度 で 推 定<br />
29
VocaWatcher(ぼかうお)<br />
歌 うだけでヒューマノイドロボットの 自 然 な 顔 動<br />
作 パラメータを 分 析 結 果 自 動 からの 生 成 軌 道 生 成<br />
歌 唱 者<br />
分<br />
析<br />
ぼかうお<br />
頭 部 の 位 置<br />
頭 部 の 回 転<br />
生<br />
成<br />
ヒューマノイドロボット<br />
視 線<br />
まばたき<br />
ぼかりす 分 析 結 果<br />
口 の 開 き<br />
HRP-4C 未 夢 (みーむ)<br />
30
まばたきと 視 線 動 作 の 制 御<br />
「 目 の 泳 ぐ 様 子 」や「 目 を 細 めて 歌 う 様 子 」 等 が 抽 出 できた<br />
• フィルタ 処 理 後 、 制 御 パラメータとする<br />
右 目 領 域<br />
( 検 出 された 瞳 )<br />
目 の 開 度<br />
(0~1)<br />
31
VocaWatcher(ぼかうお)<br />
歌 うだけでヒューマノイドロボットの 自 然 な 顔 動<br />
作 ビデオ パラメータを 映 自 像 動 からの 生 成 画 像 処 理<br />
歌 唱 者<br />
分<br />
析<br />
ぼかうお<br />
頭 部 の 位 置<br />
頭 部 の 回 転<br />
生<br />
成<br />
ヒューマノイドロボット<br />
視 線<br />
まばたき<br />
ぼかりす 分 析 結 果<br />
口 の 開 き<br />
HRP-4C 未 夢 (みーむ)<br />
32
faceAPI ver.3.2.6 の 問 題 点<br />
まばたきと 視 線 を 検 出 できない<br />
唇 のトラッキングにしばしば 失 敗 する<br />
faceAPIで 得 られた 情 報 を 元 に、 新 たな 画 像 処 理 を 行 う<br />
右 目 の 領 域 ⇒ まばたきと 視 線 の 検 出<br />
顔 中 心 線 ⇒ 口 開 度 の 検 出<br />
33
口 開 度 の 検 出<br />
1. 顔 中 心 線 の 色 分 布 を 各 時 刻 で 抽 出<br />
2. RGBの 色 距 離 を 用 いたパーティクルフィルタ<br />
で 上 下 の 唇 の 中 心 線 を 推 定<br />
34
口 開 度 の 検 出<br />
3. 上 下 の 唇 の 距 離 を[0 1]で 正 規 化<br />
35
VocaWatcher(ぼかうお)<br />
歌 うだけでヒューマノイドロボットの 自 然 な 顔 動<br />
作 パラメータを 分 析 結 果 自 動 からの 生 成 軌 道 生 成<br />
歌 唱 者<br />
分<br />
析<br />
ぼかうお<br />
頭 部 の 位 置<br />
頭 部 の 回 転<br />
生<br />
成<br />
ヒューマノイドロボット<br />
視 線<br />
まばたき<br />
ぼかりす 分 析 結 果<br />
口 の 開 き<br />
HRP-4C 未 夢 (みーむ)<br />
36
口 の 開 き( 唇 形 状 ) 制 御 の 問 題 点<br />
推 定 された 口 開 度 が 一 次 元 データ<br />
一 方 、 唇 形 状 はアクチュエータ4つで 制 御<br />
• 単 に 口 の 開 閉 だけでは 不 適 切<br />
<br />
検 出 された 口 開 度<br />
37
歌 声 合 成 時 の 推 定 結 果 を 活 用<br />
1. VocaListenerで 得 られた 音 素 情 報 に 対 応 した<br />
唇 形 状 (テンプレート)を 生 成<br />
• 5 母 音 (/a/, /i/, /u/, /e/, /o/), 撥 音 /N/, ブレス, 無 音<br />
2. 口 開 度 に 基 づいて 唇 形 状 を 非 線 形 変 調<br />
歌 詞 の 時 系 列<br />
口 開 度<br />
音 素 に 対 応 した<br />
口 の 形 状 生 成<br />
/a/, /i/, /u/, /e/, /o/<br />
/N/, /br/, 無 音<br />
非 線 形 ゲイン<br />
38
口 開 度 と 発 音 情 報 をもとにした 口 動 作 生 成<br />
39
まとめ<br />
40
本 研 究 の 三 つの 新 規 性<br />
• 人 の 歌 唱 をお 手 本 に 自 然 な 歌 声 を<br />
自 動 生 成 する 技 術 VocaListenerを<br />
ロボットで 初 めて 使 用<br />
• 人 の 歌 唱 をお 手 本 にロボットの 顔 動 作 を<br />
自 動 生 成 する 技 術 VocaWatcherを<br />
新 規 開 発<br />
• VocaListenerの 追 加 機 能 として<br />
ブレス 音 の 自 動 検 出 & 合 成 技 術 を 新 規 開 発<br />
41
考 察<br />
「 真 似 る」アプローチによる 人 間 らしい 歌 唱 の 生 成<br />
• 少 し 視 聴 しただけでは 人 間 と 区 別 がつかないぐらいの 印 象<br />
を 受 けた 人 がいた<br />
• 一 方 、 歌 声 合 成 、ロボットの 機 構 の 限 界 もあった<br />
「 不 気 味 の 谷 」 現 象<br />
• 人 間 から 遠 くデフォルメされていると 親 近 感 を 得 や<br />
すくても, 人 間 に 近 づく 過 程 で 違 和 感 を 感 じる 現 象<br />
– 顔 の 動 作 や 声 の 質 、 皮 膚 や 顔 形 状 などに 不 自 然 さが 残 るため<br />
• 自 然 な 表 現 に 関 する 技 術 が 漸 次 的 に 進 歩 すれば、<br />
どこかの 段 階 で「 不 気 味 の 谷 」にさしかかる<br />
– 辿 り 着 き、その 上 で 技 術 の 力 で 乗 り 越 えることが 重 要<br />
42
「 真 似 る」 研 究 アプローチの 意 義<br />
調 整 時 間 の 減 少 によって、 表 現 へ 注 力 できる<br />
• 歌 うだけで、 自 然 な 歌 声 合 成 ・ 顔 動 作 生 成 のためのパラメータ<br />
が 調 整 される<br />
ツールの 汎 用 性 ・ 多 様 性 の 向 上 、 分 野 の 発 展<br />
• 調 整 に 関 する 知 識 を 持 たないユーザが 使 用 可 能<br />
• 楽 譜 やピアノロールでの 編 集 が 難 しいユーザなど<br />
• 音 楽 家 にとって 手 で 弾 いた 演 奏 をリアルタイムに<br />
MIDIで( 楽 譜 ) 入 力 するインタフェースは 直 感 的 で 不 可 欠<br />
人 間 の 知 覚 ・ 生 成 機 構 の 解 明 に 繋 がる<br />
• 高 品 質 な 歌 声 合 成 と 顔 動 作 生 成 技 術 の 実 現<br />
43
未 来<br />
44
我 々の 一 連 の「 真 似 る」 研 究 アプローチ<br />
人 間<br />
VocaListener<br />
歌 声 合 成<br />
ソフトウェア<br />
呑 めと 言 われて<br />
陽 気 に 呑 んだ<br />
人 間<br />
[ 中 野 , 後 藤 2010]<br />
VocaListener2<br />
ロボット<br />
合 成 歌 唱<br />
VocaWatcher<br />
顔 動 作<br />
45
さらなる 発 展 可 能 性<br />
人 間<br />
VocaListener<br />
多 様 な 種 類 の<br />
歌 声 合 成<br />
ソフトウェア<br />
呑 めと 言 われて<br />
陽 気 に 呑 んだ<br />
ヒューマノイドロボットへの 対 応<br />
人 間<br />
(ぼかりすから 反 復 推 定 の 考 え 方 )<br />
[ 中 野 , 後 藤 2010]<br />
VocaListener2<br />
VocaWatcher<br />
ロボット<br />
合 成 歌 唱<br />
顔 動 作<br />
46
さらなる 発 展 可 能 性<br />
人 間<br />
VocaListener<br />
歌 声 合 成<br />
ソフトウェア<br />
呑 めと 言 われて<br />
陽 気 に 呑 んだ<br />
人 間<br />
VocaListener2<br />
VocaWatcher<br />
模 倣 の 先 へ<br />
( 機 械 学 習 などモデル 化 )<br />
[ 中 野 , 後 藤 2010]<br />
ロボット<br />
合 成 歌 唱<br />
顔 動 作<br />
47
お 手 本 を 真 似 て「 歌 うロボット」の 未 来<br />
歌 声 合 成 、ヒューマノイドロボットの 特 長 を 有 効 活 用<br />
• 人 間 の 機 能 を 人 工 的 に 再 現 できる<br />
• 人 間 の 限 界 を 超 えることができる<br />
• 高 い 歌 や 早 い 歌 を 歌 う<br />
• 人 間 らしくない 声 質 で 歌 う<br />
• 同 じ 動 きで 歌 う、 等<br />
• クリエータが 自 分 単 独 ではできない 表 現<br />
• 複 数 人 の 歌 声 ・ 振 付 でコンテンツ 作 成<br />
歌 声 合 成 、 音 楽 ロボットの 普 及<br />
• 楽 音 合 成 (シンセサイザ)が 普 及 した 歴 史<br />
48
お 手 本 を 真 似 て「 歌 うロボット」の 未 来<br />
クリエータの 立 場 から<br />
• 気 兼 ねなく、 柔 軟 な 自 由 な 発 想 を 表 現 できる<br />
• 多 数 のクリエータが 同 じ 声 ・ 同 じロボットで<br />
コンテンツ 制 作 することで、 表 現 が 多 様 になる<br />
リスナーの 立 場 から<br />
• 複 数 の 声 ・ 複 数 のロボット・ 複 数 のクリエータ<br />
から、 好 きな 組 み 合 わせを 楽 しむことができる<br />
49
お 手 本 を 真 似 て「 歌 うロボット」の 未 来<br />
ロボットによる 歌 唱 を<br />
個 人 が 自 分 好 みに 制 御 して 楽 しむ 未 来<br />
• コンピュータグラフィックスの 分 野 では 一 般 的<br />
• 例 )MikuMikuDance<br />
• 実 際 にロボットを 音 楽 に 合 わせて 踊 らせる 人 もいる<br />
⇒(VocaWatcherのような)<br />
顔 の 動 きで 入 力 できるインタフェースが、 手 作 業 で 個 々の<br />
動 作 を 指 定 するインタフェースより 便 利 な 可 能 性 がある<br />
新 しい 感 動 へ<br />
• ロボットが 歌 うからこそ 意 味 のある 歌 詞<br />
50
Change language