看 大腦 在 幹什麼 。 他們 發現 處理 聲音 的 聽覺 皮質 完全 活化 起來 ， 好像 他們 真的 有 聽到 聲音 一樣 。 假如 給 受 試 者 看 一 個 人 在 扮鬼臉 ， 那麼 他 的 聽覺 皮質 是 沒有 活化 的 。 這 個 視覺 輸入 必須 是 跟 聲音 有關 ， 聽覺 皮質 才 會 活化 。 所以 即使 聲音 是 關掉 的 ， 無聲 的 ， 視覺 的 輸入 還是 會 影響 聽覺 的 輸入 。 在 另外 一 個 實驗 中 ， 實驗 者 用 一 支 帶有 觸覺 刺激器 的 手電筒 在 受 試 者 的 手 邊 照 一下 ， 有時 實驗 者 把 觸覺 刺激器 打開 ， 使 光 和 觸覺 一起 出現 ， 有時 把 觸覺 刺激器 關掉 ， 只有 光 出現 。 實驗 者 發現 當 觸覺 和 視覺 配對 一起 出現 時 ， 視覺 皮質 的 活化 最 強烈 。 他們 可以 用 觸覺 的 方式 使 視覺 皮質 的 活化 增強 。 這 個 效應 叫做 多重 管道 增強 （ multimodal reinforcement ） 。 多重 感官 也 會 影響到 我們 偵察 刺激 的 出現 。 大部分 的 人 在 閃爍 的 燈光 強度 逐漸 減弱 的 時候 ， 就 會 慢慢 看 不 到 這 道 光 了 。 研究 者 想要 知道 閃光 的 閾值 ， 他們 把 光 和 聲音 放 在一起 ， 當 閃光 熄滅 的 時候 就 出現 一 個 很 短 的 聲音 。 結果 聲音 的 出現 改變 了 光 的 閾值 ， 受 試 者 只要 把 聲音 跟 光 配對 在一起 ， 他們 可以 看見 比 以前 更 微弱 的 閃光 。 這些 實驗 展示 了 大腦 強有力 的 綜合 本能 。 既然 大腦 是 在 多重 感官 刺激 的 環境 中 發展出來 的 ， 你 可能 會 假設 它 的 學習 能力 一定 也 隨著 環境 的 感官 刺激 增加 ， 學習 得 越 好 。 當然 你 也 可以 進一步 做出 對立 的 假設 ： 學習 在 單一 感官 刺激 的 環境 中 比較 差 。 這 正 是 你 會 發現 的 ， 而 它 可以 應用到 教育 和 企業 上 。 學習 的 環節 認知 心理學家 梅爾 （ Richard Mayer ） 做 了 很多 有關 多媒體 跟 學習 關係 的 研究 ， 他 的 臉 上 掛 著 千萬 瓦特 的 笑容 ， 頭型 很 像 一 顆 蛋 （ 不過 是 一 顆 很 聰明 的 蛋 ） 。 他 的 實驗 是 把 受 試 者 分成 三 組 ， 第一 組 用 聽 的 接受 訊息 ， 第二 組 用 看 的 接受 同樣 的 訊息 ， 第三 組 同時 用 聽 和 看去 接受 同樣 的 訊息 。 在 多重 感官 環境 中 學習 的 效果 比 單 聽 或 單看組 的 好 ， 他們 回憶 得 比較 多 ， 也 比較 正確 ， 而且 在 二十 年 以後 ， 他們 的 表現 還是 比 單一 感官組 的 好 。 在 另 一 個 研究 中 ， 多重 感官組 在 問題 解決 的 測驗 上 比 單一組 的 想到 多出 百分之五十 的 創意性 解決 問題 方式 。 甚至 有 一 個 實驗 顯示 ， 效果 增加 到 百分之七十五 。 這 個 多重 感官 輸入 的 好處 也 發生 在 身體 反應 上 ： 我們 的 肌肉 反應 得 比較 快 ， 我們 偵察 刺激 的 閾值 變 得 比較 低 ， 我們 的 眼睛 對 刺激 的 反應 比較 快 。 這 效果 不僅 發生 在 聲音 和 聽覺 的 結合 ， 當 觸覺 跟 視覺 訊息 結合 在一起 時 ， 辨識 的 學習 快 了 百分之三十 （ 這 是 跟 只有 觸覺 的 相 比較 ） 。 這些 增進 效果 比 你 把 各 個 單一 感官 的 數據 加起來 還 多 。 這 叫做 超級 加成 整合 （ supra-additive integration ） 。 換句話說 ， 多重 感官 呈現 方式 的 正向 貢獻 ， 比 各 個 部分 加起來 的 總合 還 多 。 簡單 的 說 ， 多重 感官 的 呈現 方式 是 未來 的 上課 方式 。 對 這 個 一致性 的 發現 ， 學者 提出 很多 的 解釋 理論 ， 大部分 都 用到 工作 記憶 。 你 還 記得 第5 章 中 我們 談到 的 工作 記憶 （ 以前 叫做 短期 記憶 ） ， 它 是 一 個 複雜 的 工作 平台 ， 使 學習 者 可以 把 訊息 寄放 在 那兒 一下子 。 你 可能 也 還 記得 它 對 學習 的 重要性 。 所有 多重 感官 學習 的 解釋 都 牽涉到 它 的 核心 機制 ： 在 學習 時 ， 給予 越 多 的 訊息 會 使 學習 的 效果 越 好 。 這 有點 違反 直覺 ， 好像 說 ， 如果 你 揹 兩 個 背包 爬山 ， 會 比 揹 一 個 背包 更 快 到達 終點 。 其實 這 是 把 訊息 精緻化 處理 後 的 效果 。 學術性 的 說法 就 是 ： 對 訊息 做 額外 的 認知 處理 能 幫助 學習 者 把 新 材料 整合到 舊 資訊 中 。 當然 多重 感官 的 經驗 就 是 精緻化 的 處理 ， 梅爾 認為 這 就 是 為什麼 多重 感官 呈現 方式 效果 更 好 的 原因 。 還 有 另 一 個 感覺 綜合症 的 例子 也 支持 了 這 項 理論 。 你 還 記得 薛瑞雪夫斯基 嗎 ？ 他 有 驚人 的 心智 能力 ， 他 可以 聽 過 一 個 七十 個 字 的 字單 一 次 ， 就 把 這 個 字單 倒 著 背出來 ， 完全 無誤 。 然後 在 十五 年 以後 ， 再 背 一 次 ， 也 是 完全 正確 。 薛瑞雪夫斯基 有 多重 類別 的 能力 ， 他 感覺到 有些 顏色 是 溫熱 的 或是 冷冰冰 的 ， 他 同時 還 認為 數字 1 是 個 非常 驕傲 體格 健壯 的 男人 ， 數字 6 是 個 腳 腫起來 的 男人 ， 有 些 影像 甚至 可以 說 是 接近 幻覺 的 地步 。 他 說 ： 「 有 一 次 我 去 買 冰淇淋 ， 我 走向 小販 ， 問 她 有 哪些 冰淇淋 ， 她 說 ： 『 水果 冰淇淋 。 』 但是 她 回答 的 聲調 很 奇怪 ， 像 一 堆 黑 煤炭 從 她 嘴 裡 跑出來 ， 在 她 那 樣子 回答 我 以後 ， 我 沒有 辦法 再 向 她 買 冰淇淋 。 」 薛瑞雪夫斯基 很 顯然 在 他 自己 的 宇宙 之內 ， 但是 他 讓 我們 看到 一 個 普遍性 的 原則 。 感覺 綜合症 的 人 對 「 這 額外 的 訊息 對 你 有 什麼 好處 ？ 」 這 個 問題 的 反應 幾乎 都 一樣 ， 他們 會 馬上 說 ： 「 它 可以 幫助 記憶 。 」 所以 研究 者 一直 懷疑 感覺 綜合症 跟 超強 的 心智 能力 之間 是 不 是 有 什麼 關係 。 有 。 感覺 綜合症 的 人 通常 有 不尋常 的 記憶力 ， 有的 時候 是 像 照相機 一樣 的 記憶 。 大部分 的 感覺 綜合 症 者 都 報告 說 有 很 奇怪 的 非常 快樂 的 經驗 ， 這 可能 跟 多巴胺 有 關係 ， 多巴胺 可以 幫助 記憶 的 形成 。 ■ 我們 一般人 適用 的 規則 在 過去 幾十 年 ， 梅爾 分離出 多媒體 呈現 方式 的 規則 。 連結 我們