最新記事

人工知能

「二人」のオバマが同時にスピーチ！？　音声から話者の口の動きを学習するアルゴリズムが誕生

2017年7月19日（水）18時00分
松岡由希子

Synthesizing Obama-Youtube

＜米ワシントン大学の研究チームは、音声データをもとにその話者とそっくりな口の形を自動生成するアルゴリズムを開発。さらに、この口の形を、別の動画に合成することにも成功した＞

明らかに異なる場所や時間に存在しながら同時に同じ言葉を話す"二人"のオバマ前大統領の様子が、動画共有プラットフォーム『ユーチューブ』で公開された。

音声データをもとに生成した本物そっくりの口の形を動画に合成

もちろん、この動画は本物ではない。右側の動画は、オバマ前大統領のスピーチの音声データをもとに人工的に生成した本物そっくりの口の形を、在職中にホワイトハウスで撮影された動画に合成したものだ。そして、この本物そっくりの口の形には、人工知能における機械学習の手法が用いられている。


米ワシントン大学の研究チームは、2017年7月、音声データをもとにその話者とそっくりな口の形を自動生成するアルゴリズムを開発。さらに、この研究チームが2015年に開発した合成技術と組み合わせることで、このアルゴリズムによって生成された口の形を、別の動画に合成することにも成功した。

一般に、音声から動画に変換するには、特定の音と口の形がどのように関連しているのかを把握することが必要だ。従来は、複数の人々に同じセンテンスを何度も繰り返して話してもらい、その様子を撮影するという手法がとられていたが、時間や手間がかかるのが課題であった。

既存のインタビュー映像などを活用できる

一方、このアルゴリズムでは、インターネットで公開されているインタビュー映像や動画コンテンツなど、既存のデータを活用できるのが利点。人工ニューラルネットワーク（人工神経回路網）に動画データを読み込ませて"学習"させ、それぞれの音声から基本的な口の形に変換する仕組みだ。対象となる動画にこれらの口の形を重ねて合成し、タイミングを調整すれば、本物そっくりのスピーチ動画が完成する。

このアルゴリズムの実用的なニーズの一例として、ビデオ会議や動画チャットなど、音声と動画によるコミュニケーション手段の改善が挙げられる。たとえば、『スカイプ』などのチャットツールから収集した動画データを使って各ユーザーの話しぶりを"学習"させれば、アルゴリズムによって、そのユーザーの音声から合成動画を生成でき、フェイス・トゥ・フェイスに近い状態でコミュニケーションできるわけだ。

次のページフェイク・ニュースへの対策にも
今、あなたにオススメ
ニュース速報

ワールド

プーチン氏、レアアース採掘計画と中朝国境の物流施設
2025.11.04

ビジネス

英ＢＰ、第3四半期の利益が予想を上回る　潤滑油部門
2025.11.04

ビジネス

中国人民銀、公開市場で国債買い入れ再開　昨年12月
2025.11.04

ワールド

米朝首脳会談、来年3月以降行われる可能性　韓国情報
2025.11.04
ニュース速報一覧
今、あなたにオススメ
MAGAZINE
特集：高市早苗研究
特集：高市早苗研究
2025年11月 4日/2025年11月11日号（10/28発売）

課題だらけの日本の政治・経済・外交を初の女性首相はこう変える

メールマガジンのご登録はこちらから。
人気ランキング
  • 1
    【クイズ】本州で唯一「クマが生息していない県」はどこ？
  • 2
    「不気味すぎる...」カップルの写真に映り込んだ「謎の存在」がSNSで話題に、その正体とは？
  • 3
    米沿岸に頻出する「海中UFO」──物理法則で説明がつかない現象を軍も警戒
  • 4
    「あなたが着ている制服を...」 乗客が客室乗務員に…
  • 5
    9歳女児が行方不明...失踪直前、防犯カメラに映った…
  • 6
    「日本のあの観光地」が世界2位...エクスペディア「…
  • 7
    【クイズ】ヒグマの生息数が「世界で最も多い国」は…
  • 8
    虹に「極限まで近づく」とどう見える？...小型機パイ…
  • 9
    【ウクライナ】要衝ポクロウシクの攻防戦が最終局面…
  • 10
    「白人に見えない」と言われ続けた白人女性...外見と…
  • 1
    【クイズ】本州で唯一「クマが生息していない県」はどこ？
  • 2
    【クイズ】クマ被害が相次ぐが...「熊害」の正しい読み方は？
  • 3
    【クイズ】ヒグマの生息数が「世界で最も多い国」はどこ？
  • 4
    【話題の写真】自宅の天井に突如現れた「奇妙な塊」…
  • 5
    【ウクライナ】要衝ポクロウシクの攻防戦が最終局面…
  • 6
    9歳女児が行方不明...失踪直前、防犯カメラに映った…
  • 7
    【クイズ】1位は「蚊」...世界で「2番目に」人間を殺…
  • 8
    女性の後を毎晩つけてくるストーカー...1週間後、雨…
  • 9
    「日本のあの観光地」が世界2位...エクスペディア「…
  • 10
    だまされやすい詐欺メールTOP3を専門家が解説
  • 1
    【クイズ】本州で唯一「クマが生息していない県」はどこ？
  • 2
    英国で「パブ離れ」が深刻化、閉店ペースが加速...苦肉の策は「日本では当たり前」の方式だった
  • 3
    【クイズ】ヒグマの生息数が「世界で最も多い国」はどこ？
  • 4
    かばんの中身を見れば一発でわかる！「認知症になり…
  • 5
    1000人以上の女性と関係...英アンドルー王子、「称号…
  • 6
    増加する「子どもを外注」する親たち...ネオ・ネグレ…
  • 7
    悲しみで8年間「羽をむしり続けた」オウム...新たな…
  • 8
    【クイズ】クマ被害が相次ぐが...「熊害」の正しい読…
  • 9
    【クイズ】日本でツキノワグマの出没件数が「最も多…
  • 10
    お腹の脂肪を減らす「8つのヒント」とは？...食事以…
トランプ2.0記事まとめ
日本再発見 シーズン2
CHALLENGING INNOVATOR
Wonderful Story
MOOK
ニューズウィーク日本版別冊
ニューズウィーク日本版別冊

好評発売中