2023 TCPSR 跨實驗室預先註冊專案交流會(二) ~ 提示雙重維度視覺特徵的文字提示如何轉化為視覺化表徵？

Abstract

能依照人類指示生成圖像的人工智慧正在不斷推陣出新，但是生成的圖像是不是真的符合提示者的心中所想？這個問題來自認知心理學探討非常久的視覺化表徵(Visualization)課題。 Bocanegra et al. (2022)以一套簡單的實驗設計，發現結合兩種不同視覺維度的文字提示(例如 red square)，以序列呈現的方式，辨識符合視覺化表徵的圖像速度，快於只有提示一種視覺維度的文字提示(例如red)。一系列只在序列呈現青況發現雙特徵優勢(dual feature benefit)的實驗結果，支持理解英文字詞轉換為視覺化表徵的過程是序列式的假設。本實驗室改用中文進行初步測試，卻發現雙特徵優勢在非序列呈現的條件才會出現。因此，我們推測理解者的語言會決定將文字轉換成視覺化表徵的認知歷程。我們的研究問題有(1) 英語為主的英中雙語者與中文為主的中英雙語者進行英文版視覺化任務，測得雙特徵優勢效應的條件是否與Bocanegra et al. (2022)的研究一致? (2) 英語為主的英中雙語者與中文為主的中英雙語者進行中文版視覺化任務，測得雙特徵優勢效應的條件是否與Bocanegra et al. (2022)的研究一致? 此次將分享我們剛準備完成的預先註冊研究計畫。 (示意圖來源：https://www.fotor.com/)