Please enable JavaScript.
Coggle requires JavaScript to display documents.
視聴覚融合の科学 (岩宮眞一郎) (視聴覚統合 (時間 (聴覚優位 (ダブルフラッシュ錯覚), 同時性の時間窓,…
視聴覚融合の科学
(岩宮眞一郎)
視聴覚統合
空間
腹話術効果
腹話術残効
近傍
頭部中心座標と網膜中心座標の中間
視覚優位
時間
同時性の時間窓
聴覚優位
ダブルフラッシュ錯覚
視覚が60msほど先行すると同時に感じる
運動知覚
視覚→聴覚定位への影響は左右<奥行き・高さ方向
クロスモダリティ
ブーバ・キキ効果
冗長信号効果
反応が速くなる
原理的説明
最尤推定(現代的)
感覚優位性(古典的説)
モダリティ適切性仮説(やや古い)
映像メディア
音と場面の結合様式(Cook)
同一
一致
不一致
関係あり
補完
関係なし
競合
Chionの3等分円
映像世界に存在しない音
non-diegestic
映像世界に存在する音
画面に音源がない
offscreen
画面に音源がある
onscreen
映像世界の音の使い方
図と地
遠近法
連続性
心理的影響
文脈を与える
情緒プライミング効果
力動性
活動性
「笑い」を誘発するSE
「われわれは、音で笑わされている」
ゲームのBGMの効果
好きな音楽→無音より成績向上
どうでもいい音楽→無音の方が良い
音量も関係
絞った音量ならパフォーマンス向上
音と映像の調和
調和感:同期>位相ずれ>非同期
テロップも同期が重要
意味的調和(フォントなど)
あえて調和を崩す
例:黒澤明
「音と映像の対位法
音高と空間の対応
上方向、右方向、拡大の動きは音が高くなるのと対応
左右は文化差もアリ
調和連合モデル
声の視聴覚統合
読唇
高齢者の方が依存度高い
聴力低下の補完
長期的な統合処理の変化
マガーク効果
音「バ」+映像「ガ」→「ダ」
年齢による違い
乳児では軽度
言語による違い
日本語話者は視覚→聴覚への干渉が軽い
言語の音韻構造?
乳児での実験
音声-口形マッチング
選好注視法
知覚狭小化
2.5ヶ月児で既に音韻と口形のミスマッチが検出できる
側頭皮質連合野
聴覚認知
上側頭溝
視聴覚統合
実際の映画
映像音響の歴史
シネマトグラフ
トーキー
日本のトーキー『黎明』
デジタル化
立体音響
収録スタイル
収録機材
ガンマイク
ラベリアマイク
ミックス&マスター
『千と千尋の神隠し』の実例
再生環境
映画館のキャリブレーション
指定より6~7dB低くする館が多い
高齢者からのクレームのため
高齢者はテレビと映画の至適ボリュームがほぼ同じ
テレビ仕様
ダイナミックレンジの使い方が変わってくる
CMのボリュームがデカイから