2020年10月10日 星期六

追蹤調查預試

 預試(pretest)的主要目的是測試問卷。在問卷初步設計完成後,為了在正式調查前,確認問題是否能達到預期成效、訪問操作是否確實可行,都會進行預試。

為確保測試效果,預試一般會採用於正式相同的調查方式縮小規模。因此也算是一次小型的調查案。例如若正式調查將採用面訪進行,預試通常也會採用面訪。同時,也將採用與正式訪問相同特徵(如類似的年齡層、性別、都市化程度等)的樣本進行訪問。但為了避免預試干擾正式訪問的結果,預試樣本必須與正式樣本區隔,不得重複。

由於預試的目的是測試問卷,並非真正進行研究,因此訪問規模並沒有限制。 主要視預算、人力及問卷特性而定。此處所指的問卷特性,將與樣本的選擇相配合,預試必須確保所有題目都被測試到,因此,抽樣或樣本選擇時,應儘可能包含所有的情形。若問卷中有針對較特別對象或情況設計的題目,應儘可能針對這些情形挑選樣本。如果無法在抽樣時選定特殊樣本,則應適度擴大樣本數,以提高訪問到各種類型受訪者的機會。雖然預試仍然會進行抽樣,但抽樣的隨機性並不是最重要的,各種情況的涵蓋性才是重點。

在訪員的選人方面,預試應儘可能挑選資深訪員進行訪問。資深訪員對於訪問中發生的非預期情形有較好的的應變能力。也可以透過他們的經驗,發現調查執行的操作問題,即時反饋。預試結束後,將召集所有的訪員召開訪員會議。 透過訪員會議,由訪員反饋訪問中的各項問題與建議,做為後續問卷修訂的參考。訪員會議時,應與訪員確認各項執行細節是否順暢,包含題目是否容易詢問、受訪者是否了解題意、各項文件及紀錄方式是否符合所需等。此外,預試的訪問結果也將是後續問卷修訂的重要依據。利用次數分配、因素分析等方式,確認問題的有效性。

對於追蹤調查而言,由於許多題目是長期詢問以觀察變化的。這些題目已經詢問過很多次,因此沒有進行測試的必要。在預試時,可以刪減這些不需測試的題目,以節省經費。若需要測試的題目較為單純,也可以考慮採用認知訪談的方式進行。尋找少量的受試者,由題目設計者自行進行訪談,評估題目的效用。

為節省調查經費,追蹤調查的預試一般而言仍以新抽樣方式進行,不會進行追蹤。但若需測試的題目與前後期問卷相關,仍可能針對預試建立追蹤樣本。