個人的な小さな幸せを実現するブラウザ上での動画編集・共有手法
526 Views
July 19, 19
スライド概要
個人的な小さな幸せを実現するブラウザ上での動画編集・共有手法
明治大学 総合数理学部 先端メディアサイエンス学科 中村聡史研究室
関連スライド
各ページのテキスト
個人的な小さな幸せを実現する ブラウザ上での動画編集・共有手法 中村聡史（明治大学・JST CREST） 石川直樹（東京農工大） 渡邊恵太（明治大学・JST CREST）
個人的な小さな幸せ • 「このお店の皿うどんは美味しい．ただ，ソース をかけたい」そんなちょっとした調味で料理を自 分風の味にし，味の満足度を高める
個人的な小さな幸せ • 「このお店の皿うどんは美味しい．ただ，ソース をかけたい」そんなちょっとした調味で料理を自 分風の味にし，味の満足度を高める
個人的な小さな幸せ • 「この動画は良いものだ．ただ，ここをちょっと 変えたい」そんなちょっとした編集（装飾）で動 画を自分の好みにし，満足度を高める
Demo http://nkmr-lab.org/ http://nkmr-lab.org/app/VideoMixer/
背景 • 動画共有サイトの利用者数の増加 – テレビ ＜ 動画共有サイトというユーザも多い • N次創作： コンテンツ創作のスパイラル – ジャンルを超え，コンテンツが生み出される
背景 • 創作のハードルの高さ – オリジナルから創作するのは大変 – N次創作であっても容易ではない – そもそも動画編集やエンコーディング，コンピュータ の性能などの障壁
背景 • この動画は好きなのだけれど・・・ – 音量を少し調整したい！（音が大きすぎる） – 長いので部分的にスキップしたい！ – 音楽が気に入らないので変更したい！ – 盛り上げるため拍手などの音を追加したい！ – 暗い感じなのでコミカルにしたい！
（例） 音量を変更したい • 「おはようございますっ！」 • 動画中で急に大きな音がなるシーン – 料理動画などで物を落とす – ゲーム実況動画で実況主が叫び声を出す • 小さい声を大きくする（マイクが遠いなど）
（例） スキップしたい • 動画の一部が気に入らないのでスキップしたい – グロテスク，変な声が入っている，無編集のため不 要なシーンがある • 何度も見ているのでOP/EDはスキップしたい – 公式のアニメなどのOP/EDのスキップ • 時間がないのでダイジェストで見たい
個人的な小さな幸せ • 「この動画は良いものだ．ただ，ここをちょっと 変えたい」そんなちょっとした編集（装飾）で動 画を自分の好みにし，満足度を高める 動画の創作 動画の装飾 装飾して楽しみ，共有したい
許されるか？ • 他人の動画をダウンロードして，音量を変更し たものをアップロード • 他人の動画をダウンロードして，部分的に切り 取ったものをアップロード • 他人の動画をダウンロードして，音楽を変更し てアップロード • 他人の動画をダウンロードして，部分的に音を 追加してアップロード 場合によっては炎上案件
関連研究 • SeekRope [佐藤 2010] – シークバーを曲げたりつなげたりすることでオンライ ンで動画の再生をコントロール • Massh! [徳井 2008] – 楽曲同士をつなげることでマッシュアップ音楽作成 • らじへぇ [加藤 2012] – ラジオなどに対してリアルタイムに（音声）アノテー ションを付与することが可能なシステム
目的とアプローチ オリジナルの動画自体を編集しないのに 編集および編集結果を視聴可能に！ • フィルタ（拡張＋編集情報）を介して装飾動画を 視聴可能に • フィルタ上で動画の編集（装飾）を可能に フィルタ フィルタ オリジナル
実装 • ブラウザ（Chrome）の拡張＋Webサービス – 動画プレイヤ（動画）を拡張から制御（あやつる） • 音量操作，再生操作（再生位置の変更など） – 動画の再生場所に応じて追加音声/音楽を再生 – Webサービス経由で編集情報を共有 制御
操作（WISS2011 OPを材料に・・・） 操作デモ
引用を明示 • N次創作されている動画には，コンテンツの引 用がないものもある • システムが自動で引用情報を明示することによ り，コンテンツのオリジナルの所在を明らかに
デモ http://www.youtube.com/watch?v=xHsbdq8GtKc
考察： 11人の学生の装飾から • 無音の動画に音声を付与する • 一発撮りで無駄がある部分や広告をスキップ • 一部シーンのみ抜き出してテンポ良い動画を • 動画をコミカルに編集して楽しむ • BGMを別のものにして楽しむ • 動物の動画にアフレコをつける など
考察： 問題 • • • • 数ミリ秒単位での同期は難しい 細かい編集は難しい 読み込むことができない音声も存在 コンテンツホルダーに負荷がかかる – 音声／音楽の直リンクに当たるため考慮が必要？
考察 • 動画の楽しみ方の広がり – 動画をただ消費するだけでなく少しの味付けを • コンテンツ生態系を活性化させる要因に – N次創作を超えるコンテンツ循環の可能性 – 創作者に対するフィードバックにも • 過去の動画を楽しむ – 装飾者が増えることによって過去の動画の発掘も • 装飾集合による創作の可能性？
考察 • 「ある動画」の「あるシーン」に対して，「ある音 声を付与」というソーシャルアノテーション – その場所に付与されているコメントや，音の特徴を 分析することで，自動装飾の可能性も
応用： 簡易的な動画協調編集 • 動画作成＆編集における協調作業 動画作成 ここをこんな 感じで編集？ ここは音が 大きすぎる エンコード 動画送信 こんな感じの BGMを付けたら？ 動画受信 動画視聴 編集指示 指示理解 動画再編集 エンコード 動画送信 動画受信 動画視聴 えーーー 編集指示 指示理解 このBGM イマイチだね ここスキップ したら？
応用： 簡易的な動画協調編集 • 動画作成＆編集における協調作業 動画作成 ここをこんな 感じで編集？ ここは音が 大きすぎる エンコード 動画送信 こんな感じの BGMを付けたら？ 動画受信 動画視聴 編集情報 動画視聴 編集情報 動画視聴 了解．では こんな感じで 編集情報 動画再編集 エンコード 動画送信 満足！ ここも スキップしては？
応用： 横展開（適応可能性） • 動画の再生，停止，ジャンプ，音量の制御と， 動画の現在の再生時間さえ取得できればどの 動画共有サイトでも適用可能
まとめ • 個人的な小さな幸せ（動画を自分の好みに装 飾したい）を可能とする手法をブラウザの拡張 として実現 – 動画に対する装飾による様々な可能性を明らかに – N次装飾の可能性も？
未来： 動画のパーソナライズ • ユーザの好みを学習し，編集内容を自動生成 することにより，動画パーソナライズが可能に オリジナルの動画 装飾情報 ＋ ＋ なし ・・・・ ・・・・・ ・ ・・・ 試聴する動画 ＝ ＝ 良いシーン抽出 ＋ ・・・・ ・・・・・ ・ ・・・ ＝ かわいらしく装飾 ＋ ・・・・ ・・・・・ ・ ・・・ 超忙しい人用 ＝ ♪ ♪ ♪ ♪
コンテンツの例 • 2,500 Dominos（寂しい→BGM追加） – http://www.youtube.com/watch?v=IXtDChNB3gc • 【第11回MMD杯本選】チャンバラごっこ！ – http://www.youtube.com/watch?v=4ttdyrBYhzA • ボクシング衝撃のワンパンチKO（YouTube連携） – http://www.youtube.com/watch?v=cs6f2PFLNPA • 【吹奏楽】Axis Mundi（音量注意と拍手追加） – http://www.nicovideo.jp/watch/nm8953338 • つながるキャンドル（音の付与） – http://www.youtube.com/watch?v=NIue_UwIGvo • 【初音ミク】千本桜（時間のない人用） – http://www.youtube.com/watch?v=vVIA1ISs6M4
コンテンツの例 • Plaris-Full Ver- [jubeat]（remix） – http://www.youtube.com/watch?v=RAAf0gOJoh4 • Assassin's Creed Meets Parkour in Real Life（コミカライズ） – http://www.youtube.com/watch?v=aAhPaiajwDY • 【踊ってみた】Perfume - ねぇ【セラミクロニ】 Nee dance cover（音 無に別のBGM付与） – http://www.youtube.com/watch?v=GtMZfU8mxMY • ロボットダンス（ちょっとだけ） – http://www.youtube.com/watch?v=aYiCzzIDViA • 走れメロス（朗読）： 音楽付与 – http://www.youtube.com/watch?v=lBl9afmHags