個人的な小さな幸せを実現するブラウザ上での動画編集・共有手法

388 Views

July 19, 19

スライド概要

個人的な小さな幸せを実現するブラウザ上での動画編集・共有手法

profile-image

明治大学 総合数理学部 先端メディアサイエンス学科 中村聡史研究室

シェア

またはPlayer版

埋め込む »CMSなどでJSが使えない場合

関連スライド

各ページのテキスト
1.

個人的な小さな幸せを実現する ブラウザ上での動画編集・共有手法 中村聡史(明治大学・JST CREST) 石川直樹(東京農工大) 渡邊恵太(明治大学・JST CREST)

2.

個人的な小さな幸せ • 「このお店の皿うどんは美味しい.ただ,ソース をかけたい」そんなちょっとした調味で料理を自 分風の味にし,味の満足度を高める

3.

個人的な小さな幸せ • 「このお店の皿うどんは美味しい.ただ,ソース をかけたい」そんなちょっとした調味で料理を自 分風の味にし,味の満足度を高める

4.

個人的な小さな幸せ • 「この動画は良いものだ.ただ,ここをちょっと 変えたい」そんなちょっとした編集(装飾)で動 画を自分の好みにし,満足度を高める

5.

Demo http://nkmr-lab.org/ http://nkmr-lab.org/app/VideoMixer/

6.

背景 • 動画共有サイトの利用者数の増加 – テレビ < 動画共有サイトというユーザも多い • N次創作: コンテンツ創作のスパイラル – ジャンルを超え,コンテンツが生み出される

7.

背景 • 創作のハードルの高さ – オリジナルから創作するのは大変 – N次創作であっても容易ではない – そもそも動画編集やエンコーディング,コンピュータ の性能などの障壁

8.

背景 • この動画は好きなのだけれど・・・ – 音量を少し調整したい!(音が大きすぎる) – 長いので部分的にスキップしたい! – 音楽が気に入らないので変更したい! – 盛り上げるため拍手などの音を追加したい! – 暗い感じなのでコミカルにしたい!

9.

(例) 音量を変更したい • 「おはようございますっ!」 • 動画中で急に大きな音がなるシーン – 料理動画などで物を落とす – ゲーム実況動画で実況主が叫び声を出す • 小さい声を大きくする(マイクが遠いなど)

10.

(例) スキップしたい • 動画の一部が気に入らないのでスキップしたい – グロテスク,変な声が入っている,無編集のため不 要なシーンがある • 何度も見ているのでOP/EDはスキップしたい – 公式のアニメなどのOP/EDのスキップ • 時間がないのでダイジェストで見たい

11.

個人的な小さな幸せ • 「この動画は良いものだ.ただ,ここをちょっと 変えたい」そんなちょっとした編集(装飾)で動 画を自分の好みにし,満足度を高める 動画の創作 動画の装飾 装飾して楽しみ,共有したい

12.

許されるか? • 他人の動画をダウンロードして,音量を変更し たものをアップロード • 他人の動画をダウンロードして,部分的に切り 取ったものをアップロード • 他人の動画をダウンロードして,音楽を変更し てアップロード • 他人の動画をダウンロードして,部分的に音を 追加してアップロード 場合によっては炎上案件

13.

関連研究 • SeekRope [佐藤 2010] – シークバーを曲げたりつなげたりすることでオンライ ンで動画の再生をコントロール • Massh! [徳井 2008] – 楽曲同士をつなげることでマッシュアップ音楽作成 • らじへぇ [加藤 2012] – ラジオなどに対してリアルタイムに(音声)アノテー ションを付与することが可能なシステム

14.

目的とアプローチ オリジナルの動画自体を編集しないのに 編集および編集結果を視聴可能に! • フィルタ(拡張+編集情報)を介して装飾動画を 視聴可能に • フィルタ上で動画の編集(装飾)を可能に フィルタ フィルタ オリジナル

15.

実装 • ブラウザ(Chrome)の拡張+Webサービス – 動画プレイヤ(動画)を拡張から制御(あやつる) • 音量操作,再生操作(再生位置の変更など) – 動画の再生場所に応じて追加音声/音楽を再生 – Webサービス経由で編集情報を共有 制御

16.

操作(WISS2011 OPを材料に・・・) 操作デモ

17.

引用を明示 • N次創作されている動画には,コンテンツの引 用がないものもある • システムが自動で引用情報を明示することによ り,コンテンツのオリジナルの所在を明らかに

18.

デモ http://www.youtube.com/watch?v=xHsbdq8GtKc

19.

考察: 11人の学生の装飾から • 無音の動画に音声を付与する • 一発撮りで無駄がある部分や広告をスキップ • 一部シーンのみ抜き出してテンポ良い動画を • 動画をコミカルに編集して楽しむ • BGMを別のものにして楽しむ • 動物の動画にアフレコをつける など

20.

考察: 問題 • • • • 数ミリ秒単位での同期は難しい 細かい編集は難しい 読み込むことができない音声も存在 コンテンツホルダーに負荷がかかる – 音声/音楽の直リンクに当たるため考慮が必要?

21.

考察 • 動画の楽しみ方の広がり – 動画をただ消費するだけでなく少しの味付けを • コンテンツ生態系を活性化させる要因に – N次創作を超えるコンテンツ循環の可能性 – 創作者に対するフィードバックにも • 過去の動画を楽しむ – 装飾者が増えることによって過去の動画の発掘も • 装飾集合による創作の可能性?

22.

考察 • 「ある動画」の「あるシーン」に対して,「ある音 声を付与」というソーシャルアノテーション – その場所に付与されているコメントや,音の特徴を 分析することで,自動装飾の可能性も

23.

応用: 簡易的な動画協調編集 • 動画作成&編集における協調作業 動画作成 ここをこんな 感じで編集? ここは音が 大きすぎる エンコード 動画送信 こんな感じの BGMを付けたら? 動画受信 動画視聴 編集指示 指示理解 動画再編集 エンコード 動画送信 動画受信 動画視聴 えーーー 編集指示 指示理解 このBGM イマイチだね ここスキップ したら?

24.

応用: 簡易的な動画協調編集 • 動画作成&編集における協調作業 動画作成 ここをこんな 感じで編集? ここは音が 大きすぎる エンコード 動画送信 こんな感じの BGMを付けたら? 動画受信 動画視聴 編集情報 動画視聴 編集情報 動画視聴 了解.では こんな感じで 編集情報 動画再編集 エンコード 動画送信 満足! ここも スキップしては?

25.

応用: 横展開(適応可能性) • 動画の再生,停止,ジャンプ,音量の制御と, 動画の現在の再生時間さえ取得できればどの 動画共有サイトでも適用可能

26.

まとめ • 個人的な小さな幸せ(動画を自分の好みに装 飾したい)を可能とする手法をブラウザの拡張 として実現 – 動画に対する装飾による様々な可能性を明らかに – N次装飾の可能性も?

27.

未来: 動画のパーソナライズ • ユーザの好みを学習し,編集内容を自動生成 することにより,動画パーソナライズが可能に オリジナルの動画 装飾情報 + + なし ・・・・ ・・・・・ ・ ・・・ 試聴する動画 = = 良いシーン抽出 + ・・・・ ・・・・・ ・ ・・・ = かわいらしく装飾 + ・・・・ ・・・・・ ・ ・・・ 超忙しい人用 = ♪ ♪ ♪ ♪

28.

コンテンツの例 • 2,500 Dominos(寂しい→BGM追加) – http://www.youtube.com/watch?v=IXtDChNB3gc • 【第11回MMD杯本選】チャンバラごっこ! – http://www.youtube.com/watch?v=4ttdyrBYhzA • ボクシング衝撃のワンパンチKO(YouTube連携) – http://www.youtube.com/watch?v=cs6f2PFLNPA • 【吹奏楽】Axis Mundi(音量注意と拍手追加) – http://www.nicovideo.jp/watch/nm8953338 • つながるキャンドル(音の付与) – http://www.youtube.com/watch?v=NIue_UwIGvo • 【初音ミク】千本桜(時間のない人用) – http://www.youtube.com/watch?v=vVIA1ISs6M4

29.

コンテンツの例 • Plaris-Full Ver- [jubeat](remix) – http://www.youtube.com/watch?v=RAAf0gOJoh4 • Assassin's Creed Meets Parkour in Real Life(コミカライズ) – http://www.youtube.com/watch?v=aAhPaiajwDY • 【踊ってみた】Perfume - ねぇ【セラミクロニ】 Nee dance cover(音 無に別のBGM付与) – http://www.youtube.com/watch?v=GtMZfU8mxMY • ロボットダンス(ちょっとだけ) – http://www.youtube.com/watch?v=aYiCzzIDViA • 走れメロス(朗読): 音楽付与 – http://www.youtube.com/watch?v=lBl9afmHags