控制實(shí)驗(yàn)法
第三節(jié) 控制實(shí)驗(yàn)法
控制實(shí)驗(yàn)研究法起源于自然科學(xué),后引入到社會(huì)科學(xué)研究領(lǐng)域,20世紀(jì)初在心理學(xué)研究中得到成功應(yīng)用。目前,控制實(shí)驗(yàn)法廣泛運(yùn)用于心理學(xué)、社會(huì)學(xué)、傳播學(xué)、教育學(xué)等學(xué)科,與抽樣調(diào)查和內(nèi)容分析法一并組成社會(huì)科學(xué)研究的重要方法。本節(jié)主要介紹控制實(shí)驗(yàn)法的基本定義、構(gòu)成要素、實(shí)驗(yàn)設(shè)計(jì)以及其中的控制和效度等問題。
一、方法簡(jiǎn)介
1.定義
控制實(shí)驗(yàn)法又可稱為實(shí)驗(yàn)法。在楊治良的《實(shí)驗(yàn)心理學(xué)》一書中,他對(duì)實(shí)驗(yàn)法做了如下解釋:“實(shí)驗(yàn)法不等于自然觀察法(naturalistic observation)。在使用自然觀察法時(shí),研究者只能被動(dòng)地仔細(xì)觀察和記錄研究對(duì)象在自然狀態(tài)下所發(fā)生的情況,而不能有任何干預(yù)。雖然長(zhǎng)期的、系統(tǒng)的觀察也可以發(fā)現(xiàn)事物之間的規(guī)律,例如天文學(xué)中的規(guī)律大部分是這樣發(fā)現(xiàn)的。但這種觀察只能等待所要觀察的事物出現(xiàn)時(shí)才能進(jìn)行,受到了自然條件的限制。而實(shí)驗(yàn)(experiment)則是人為地去干預(yù),控制所研究的對(duì)象。實(shí)驗(yàn)者可以創(chuàng)造條件,引發(fā)所需要的事件來觀察其變化;為了驗(yàn)證,可以創(chuàng)造同樣的條件進(jìn)行重復(fù)觀察。與自然觀察法相比較,實(shí)驗(yàn)法是探尋事物之間的規(guī)律的一種更加有效的辦法。”[30]
社會(huì)學(xué)意義上的實(shí)驗(yàn)法亦相類似。社會(huì)學(xué)百科全書中對(duì)實(shí)驗(yàn)的定義為:“由研究者對(duì)一個(gè)變量的操縱和對(duì)結(jié)果的有控制的觀察和測(cè)量所構(gòu)成的任何研究?!憋L(fēng)笑天在《社會(huì)學(xué)研究方法》中則進(jìn)一步將實(shí)驗(yàn)定義為:“一種經(jīng)過精心的設(shè)計(jì),并在高度控制的條件下,通過操縱某些變量,來研究變量之間因果關(guān)系的方法?!?sup>[31]
傳播學(xué)意義上的控制實(shí)驗(yàn)法主要從以上兩個(gè)學(xué)科借鑒而來。美國(guó)學(xué)者約翰·C.雷納德在《傳播研究方法導(dǎo)論》中認(rèn)為,實(shí)驗(yàn)“指在控制其他所有影響因素的情形下,研究者探究其操控變量的效應(yīng),實(shí)驗(yàn)的目的是為了建立因果關(guān)系”[32]。國(guó)內(nèi)一些學(xué)者認(rèn)為,“實(shí)驗(yàn)研究是根據(jù)一定的研究假設(shè),系統(tǒng)地操縱一個(gè)或多個(gè)變量,并觀察這種操縱對(duì)其他變量的影響,從而發(fā)現(xiàn)因果關(guān)系的一種方法”[33]。
在綜合以上相關(guān)概念的基礎(chǔ)上,本書將控制實(shí)驗(yàn)法定義為:根據(jù)一定的研究假設(shè),在精心妥善地控制和操縱自變量的情境下,探討其對(duì)因變量的影響,從而建立并提出兩者的因果關(guān)系的一種研究方法。
由此可見,控制實(shí)驗(yàn)法的目的就是,在精心設(shè)計(jì)的情境中,觀察并發(fā)現(xiàn)兩個(gè)變量之間是否具有因果關(guān)系。表8-5將控制實(shí)驗(yàn)法與其他研究方法做了簡(jiǎn)單比較。
表8-5 各主要研究法綜合比較
2.基本要素
1)主試和被試
主試,即實(shí)驗(yàn)人員,設(shè)計(jì)并控制實(shí)驗(yàn)過程,從中收集資料,建立理論關(guān)系。
被試,即實(shí)驗(yàn)對(duì)象,在主試設(shè)計(jì)的實(shí)驗(yàn)中對(duì)主試發(fā)出的刺激作出反應(yīng)。
2)變量
變量是指性質(zhì)或數(shù)量上可以變化的事物的屬性,其兩個(gè)基本特點(diǎn)是變化性和可觀測(cè)性??刂茖?shí)驗(yàn)中的變量主要涉及自變量、因變量和額外變量。
(1)自變量,也被稱為實(shí)驗(yàn)刺激、刺激變量或原因變量,是由主試確定并控制的、假定可以引起其他變量變化的變量。通常情況下,實(shí)驗(yàn)中的自變量都是二分變量,只有兩個(gè)取值:有和無,即給予實(shí)驗(yàn)刺激或不給予實(shí)驗(yàn)刺激。
(2)因變量,也被稱為反應(yīng)變量或結(jié)果變量,是由被試反應(yīng),由主試觀察并測(cè)量、假定會(huì)隨自變量的變化而變化的變量,是自變量造成的結(jié)果。因變量的測(cè)量要有信度和效度。
(3)額外變量,指實(shí)驗(yàn)中可能對(duì)因變量產(chǎn)生影響但主試不打算研究的變量。由于其必須被加以控制,也被稱為控制變量。
3)前測(cè)和后測(cè)
在一項(xiàng)實(shí)驗(yàn)設(shè)計(jì)中,通常需要對(duì)因變量進(jìn)行前后兩次相同的測(cè)量,即前測(cè)和后測(cè)。
前測(cè)是指施加實(shí)驗(yàn)刺激之前對(duì)因變量的測(cè)量;后測(cè)是指施加實(shí)驗(yàn)刺激之后對(duì)因變量的測(cè)量。實(shí)驗(yàn)人員通過對(duì)比前測(cè)和后測(cè)的結(jié)果,來分析評(píng)估實(shí)驗(yàn)刺激即自變量對(duì)因變量所產(chǎn)生的影響。
4)內(nèi)部效度和外部效度
內(nèi)部效度:實(shí)驗(yàn)結(jié)果反映出的自變量和因變量之間的因果關(guān)系。
外部效度:實(shí)驗(yàn)結(jié)果可以應(yīng)用到其他相似情境中的程度。
5)控制
控制是指實(shí)驗(yàn)人員用來剔除干擾變量的影響或使其影響維持恒定的方法。在實(shí)驗(yàn)法中,一定要確保除了前測(cè)后新引入的變量外,其他所有要素都在控制中??梢哉f,沒有控制,就沒有實(shí)驗(yàn)。
3.基本原理
簡(jiǎn)單來說,控制實(shí)驗(yàn)法的基本原理就是假設(shè)變量A和變量B之間存在因果關(guān)系,進(jìn)而通過操縱變量A來分析并證明它是造成變量B變化的原因。在實(shí)驗(yàn)研究中,實(shí)驗(yàn)人員首先必須作出自變量A會(huì)導(dǎo)致因變量B變化的假設(shè),再進(jìn)行實(shí)驗(yàn)設(shè)計(jì);實(shí)驗(yàn)開始時(shí),在沒有受到A影響之前,先觀察B的情況,對(duì)它進(jìn)行測(cè)量(前測(cè)),然后,引入自變量即實(shí)驗(yàn)刺激A,再引入B,并對(duì)引入A后B的變化情況進(jìn)行測(cè)量(后測(cè));最后比較前后兩次測(cè)量的結(jié)果。如果前后兩次的情況發(fā)生變化,則可初步認(rèn)為A是導(dǎo)致B變化的原因,即A和B之間的因果關(guān)系成立。這就是控制實(shí)驗(yàn)法的基本原理。
控制實(shí)驗(yàn)法的基本特點(diǎn)有:
①實(shí)驗(yàn)研究是在人為設(shè)定的情境中進(jìn)行的;
②實(shí)驗(yàn)人員嚴(yán)格操縱和控制自變量,并觀察和分析其對(duì)因變量的影響;
③實(shí)驗(yàn)?zāi)繕?biāo)是建立和揭示變量之間的因果關(guān)系。
4.優(yōu)缺點(diǎn)
(1)優(yōu)點(diǎn):可以確立因果關(guān)系;具有很強(qiáng)的可重復(fù)性,實(shí)驗(yàn)結(jié)果可復(fù)制;研究過程科學(xué)嚴(yán)謹(jǐn),控制力較強(qiáng),內(nèi)部效度高。
(2)缺點(diǎn):人為操控,故“現(xiàn)實(shí)性”較弱;實(shí)驗(yàn)情境比較單一,不能保證外部效度;實(shí)驗(yàn)人員的主觀因素可能會(huì)對(duì)實(shí)驗(yàn)結(jié)果產(chǎn)生一定影響。
5.分類
按照不同的標(biāo)準(zhǔn),可將控制實(shí)驗(yàn)法作多種不同分類。
按照自變量的數(shù)量,可分為單因素實(shí)驗(yàn)、雙因素實(shí)驗(yàn)和多因素實(shí)驗(yàn)。
按照實(shí)驗(yàn)的組織方式不同,可分為對(duì)照組實(shí)驗(yàn)和單一組實(shí)驗(yàn)。這些將在實(shí)驗(yàn)設(shè)計(jì)中詳細(xì)說明。
按照實(shí)驗(yàn)環(huán)境的不同,可分為實(shí)驗(yàn)室實(shí)驗(yàn)和實(shí)地實(shí)驗(yàn)。實(shí)驗(yàn)室實(shí)驗(yàn)是指實(shí)驗(yàn)人員在人為控制的實(shí)驗(yàn)室環(huán)境中操控自變量、測(cè)量因變量的一種研究方法。這種方法最重要的特征就是研究者能夠控制自變量和因變量,通過這種控制可以消除許多外來因素的影響,使得實(shí)驗(yàn)室實(shí)驗(yàn)具有較高的內(nèi)部效度,但外部效度有待進(jìn)一步考量。例如衡量瀏覽過網(wǎng)站某些特定信息后,網(wǎng)民對(duì)待一個(gè)事件的看法是否有變化。實(shí)地實(shí)驗(yàn)是指在自然的現(xiàn)實(shí)的環(huán)境下,實(shí)驗(yàn)人員對(duì)實(shí)地環(huán)境進(jìn)行某種處理,盡可能控制一個(gè)或多個(gè)自變量,并對(duì)因變量予以清晰定義,以觀察并測(cè)量其變化的一種研究方法。與單純的實(shí)地觀察法相比,實(shí)地實(shí)驗(yàn)不僅可以對(duì)自變量施行控制,而且也保持了研究環(huán)境的真實(shí)性。
按照實(shí)驗(yàn)人員和實(shí)驗(yàn)對(duì)象是否知情,可分為單盲實(shí)驗(yàn)和雙盲實(shí)驗(yàn),等等。單盲實(shí)驗(yàn)是指為了得到更加真實(shí)準(zhǔn)確的實(shí)驗(yàn)結(jié)果,只有實(shí)驗(yàn)人員即主試知情,實(shí)驗(yàn)對(duì)象即被試不知情的一種研究方法。雙盲實(shí)驗(yàn)是指為了避免主試和被試雙方的主觀期望效應(yīng),在進(jìn)行實(shí)驗(yàn)時(shí)讓被試和主試對(duì)實(shí)驗(yàn)都不知情的研究方法。其實(shí)驗(yàn)結(jié)果分析也由另一沒有參加實(shí)驗(yàn)操作的主試來進(jìn)行。
二、實(shí)驗(yàn)步驟與設(shè)計(jì)
1.實(shí)驗(yàn)步驟
控制實(shí)驗(yàn)研究的方法與其他傳播學(xué)研究方法一樣,遵循從確定選題和假設(shè)直到得出研究結(jié)果的基本過程。但控制實(shí)驗(yàn)法又具有自己的獨(dú)特性。紐曼曾詳細(xì)列舉了實(shí)驗(yàn)研究的12個(gè)具體步驟[34]:
①從一個(gè)有關(guān)因果關(guān)系的簡(jiǎn)單明白的假設(shè)開始;
②根據(jù)實(shí)際條件決定一種合適的實(shí)驗(yàn)設(shè)計(jì)用來檢驗(yàn)假設(shè);
③決定如何引入實(shí)驗(yàn)刺激或如何創(chuàng)造一種引入自變量的背景;
④制定一種有效的和可信的因變量的測(cè)量;
⑤建立實(shí)驗(yàn)背景,并對(duì)實(shí)驗(yàn)刺激和因變量測(cè)量進(jìn)行預(yù)實(shí)驗(yàn);
⑥選取合適的實(shí)驗(yàn)對(duì)象或個(gè)案;
⑦隨機(jī)指派實(shí)驗(yàn)對(duì)象到不同的組,并對(duì)他們進(jìn)行詳細(xì)指導(dǎo);
⑧對(duì)所有組中的個(gè)案進(jìn)行因變量的前測(cè);
⑨對(duì)實(shí)驗(yàn)組進(jìn)行實(shí)驗(yàn)刺激;
⑩對(duì)所有組中的個(gè)案進(jìn)行因變量的后測(cè);
告訴實(shí)驗(yàn)對(duì)象有關(guān)實(shí)驗(yàn)的真實(shí)目的和原因,詢問他們的實(shí)際感受,尤其是當(dāng)實(shí)驗(yàn)對(duì)象在某些方面被欺騙時(shí),這種說明就更為重要;
考察所收集的資料,進(jìn)行不同組之間的比較,并運(yùn)用統(tǒng)計(jì)方法決定假設(shè)是否被證實(shí)。
雖然并不是每一項(xiàng)實(shí)驗(yàn)都完全包含以上所有步驟,同時(shí)這些步驟的前后順序也不一定完全嚴(yán)格地固定不變,但它仍然較好地勾勒出了大多數(shù)實(shí)驗(yàn)研究的實(shí)際過程。
概括而論,進(jìn)行一項(xiàng)實(shí)驗(yàn)研究的步驟大致可分為以下幾個(gè)大的步驟。
(1)確定自變量和因變量,對(duì)它們進(jìn)行操作定義。
提出研究假設(shè),在自變量和因變量之間建立因果關(guān)系。例如在“記憶廣度”實(shí)驗(yàn)中,研究目的為揭示識(shí)記方法對(duì)記憶廣度的影響,由此確定的自變量為識(shí)記方法(組塊識(shí)記、逐個(gè)識(shí)記),因變量為記憶廣度(被試在一次呈現(xiàn)條件下能準(zhǔn)確回憶的刺激數(shù)量)。
(2)確定實(shí)驗(yàn)設(shè)計(jì)類型和研究程序。
被試間設(shè)計(jì):每個(gè)被試只接受一種自變量水平的處理,完全隨機(jī)化(隨機(jī)選擇和隨機(jī)分配)。例如,兩組學(xué)生接受兩種學(xué)習(xí)方法的訓(xùn)練,對(duì)比兩組的結(jié)果是否存在顯著不同。
被試內(nèi)設(shè)計(jì):每個(gè)被試接受所有自變量水平的實(shí)驗(yàn)處理。例如,讓被試先接受系列提問教學(xué)法,再接受自學(xué)輔導(dǎo)教學(xué)法,看教學(xué)方法對(duì)學(xué)習(xí)成績(jī)的影響。
配對(duì)組設(shè)計(jì):通過前測(cè)將被試隨機(jī)分成實(shí)驗(yàn)組與控制組,對(duì)實(shí)驗(yàn)組進(jìn)行實(shí)驗(yàn)處理,控制組不進(jìn)行實(shí)驗(yàn)處理,兩組都進(jìn)行后測(cè)。這個(gè)設(shè)計(jì)兼有被試間設(shè)計(jì)和被試內(nèi)設(shè)計(jì)的特點(diǎn)。例如,通過智力測(cè)驗(yàn),將智力水平相同的被試隨機(jī)分成兩組,對(duì)實(shí)驗(yàn)組進(jìn)行實(shí)驗(yàn)刺激,控制組不接受刺激,然后比較兩組后測(cè)結(jié)果,看兩組是否存在顯著的差異。
混合設(shè)計(jì):兩個(gè)以上自變量處理,其中每個(gè)自變量的處理方式是不同的。例如,一個(gè)自變量采取被試自身設(shè)計(jì)(重復(fù)測(cè)量),另一個(gè)自變量采取被試間設(shè)計(jì)。再如,考察文章生字密度與主題熟悉性對(duì)閱讀理解的影響,將生字密度分為高、中、低三個(gè)水平作為被試內(nèi)變量,將主題熟悉程度分為熟悉和不熟悉兩個(gè)水平,另一組學(xué)生閱讀生字密度不同、主題不熟悉的文章,看他們的閱讀成績(jī)是否存在差異,此為混合設(shè)計(jì)。
(3)預(yù)實(shí)驗(yàn)和正式實(shí)驗(yàn)。
預(yù)實(shí)驗(yàn)可以及時(shí)發(fā)現(xiàn)問題,及時(shí)對(duì)實(shí)驗(yàn)程序進(jìn)行修正和確定;實(shí)驗(yàn)過程中要注意隨機(jī)取樣和隨機(jī)分配的技巧,對(duì)自變量要有明確的操作定義,以便因變量的測(cè)量,同時(shí)注意控制無關(guān)變量。
(4)分析數(shù)據(jù),寫出實(shí)驗(yàn)報(bào)告。
2.實(shí)驗(yàn)設(shè)計(jì)
實(shí)驗(yàn)設(shè)計(jì)是實(shí)施實(shí)驗(yàn)的證據(jù),它決定了一項(xiàng)實(shí)驗(yàn)的具體內(nèi)容。無論哪種類型的實(shí)驗(yàn),其設(shè)計(jì)一般都依實(shí)驗(yàn)的組織方式而定。
1)坎貝爾與斯坦利的記號(hào)系統(tǒng)
實(shí)驗(yàn)設(shè)計(jì)往往使用一套符號(hào)、方法及標(biāo)準(zhǔn)。研究者為了標(biāo)清在實(shí)驗(yàn)中做了什么,逐步發(fā)展起來一套符號(hào)系統(tǒng)。其中,最為著名的是坎貝爾和斯坦利提出的符號(hào)系統(tǒng)。[35]這套系統(tǒng)中主要有3個(gè)字母符號(hào):O表示實(shí)驗(yàn)中的因變量;X表示實(shí)驗(yàn)人員對(duì)因變量的一次觀察;R表示隨機(jī)分配樣本(R1為實(shí)驗(yàn)組,R2為控制組),用以控制系統(tǒng)偏差。
2)單組前后測(cè)設(shè)計(jì)
要素:實(shí)驗(yàn)組、自變量、因變量,以及隨機(jī)指派。
實(shí)驗(yàn)設(shè)計(jì)如下所示:
被試組 前測(cè) 實(shí)驗(yàn)刺激 后測(cè)
R O1 X O2
步驟:選擇被試,在給予其實(shí)驗(yàn)刺激前進(jìn)行測(cè)量,然后給予實(shí)驗(yàn)刺激,之后再對(duì)被試進(jìn)行測(cè)量,最后比較前測(cè)和后測(cè)的結(jié)果,從而得出結(jié)論。通常采用兩個(gè)相關(guān)樣本平均數(shù)差異的顯著性檢驗(yàn),以檢驗(yàn)前后兩次測(cè)驗(yàn)平均數(shù)的差異顯著性。
舉例:檢驗(yàn)一個(gè)網(wǎng)絡(luò)論壇某事件的討論對(duì)論壇網(wǎng)民態(tài)度的影響。首先確定實(shí)驗(yàn)時(shí)間段,在發(fā)表討論帖之前對(duì)被試進(jìn)行態(tài)度測(cè)量,在實(shí)驗(yàn)時(shí)間段結(jié)束后再進(jìn)行測(cè)量,進(jìn)而得出結(jié)論。
優(yōu)點(diǎn):相同的被試接受前測(cè)和后測(cè),“差異的選擇”和“被試的流失”可被有效控制。
缺點(diǎn):實(shí)驗(yàn)結(jié)果可能受到“歷史”、“被試差異”、“工具”等因素的干擾,內(nèi)在效度很低,故少用為宜。
3)雙組前后測(cè)設(shè)計(jì)
雙組前后測(cè)設(shè)計(jì),也稱靜態(tài)組比較設(shè)計(jì)。
要素:實(shí)驗(yàn)組、控制組、前測(cè)、后測(cè)、自變量(實(shí)驗(yàn)刺激)、因變量,以及隨機(jī)指派。
實(shí)驗(yàn)設(shè)計(jì)如下所示:
被試組 前測(cè) 實(shí)驗(yàn)刺激 后測(cè)
R1 O1 X O2
R2 O1 O2
步驟:①隨機(jī)指派被試到實(shí)驗(yàn)組R1和控制組R2;②對(duì)兩組被試同時(shí)同情境進(jìn)行前測(cè);③對(duì)實(shí)驗(yàn)組給予實(shí)驗(yàn)刺激,對(duì)控制組不給予;④對(duì)兩組被試再次進(jìn)行測(cè)量,即后測(cè);⑤將前后兩次的測(cè)量結(jié)果進(jìn)行對(duì)比分析,找出差別,得出實(shí)驗(yàn)刺激(即自變量)的影響。
實(shí)驗(yàn)刺激的影響=實(shí)驗(yàn)組的差分(O2-O1)-控制組的差分(O2-O1)
相比單組前后測(cè)設(shè)計(jì),加入控制組,就容易觀察并說明在實(shí)驗(yàn)組的全部影響中,究竟有多少真正的原因,又有多少是其他外部因素影響。由于沒有給予實(shí)驗(yàn)刺激,所以控制組差分代表的就是這種外在因素的影響。這樣,用實(shí)驗(yàn)組差分減去控制組差分,實(shí)際上就是從總的影響中減去外部因素的影響,剩下的便是實(shí)驗(yàn)刺激(自變量)的影響了。
若實(shí)驗(yàn)組差分(的絕對(duì)值)比控制組差分(的絕對(duì)值)大,則說明自變量對(duì)因變量有影響;若實(shí)驗(yàn)組差分(的絕對(duì)值)與控制組差分(的絕對(duì)值)相等,則自變量影響為零,即對(duì)因變量不起任何作用;若實(shí)驗(yàn)組差分(的絕對(duì)值)比控制組差分(的絕對(duì)值)小,則說明自變量對(duì)因變量的影響是負(fù)向的。
舉例:假設(shè)要驗(yàn)證這樣一個(gè)假設(shè)——觀看新聞將使大學(xué)生減少對(duì)公務(wù)員考試的盲目熱衷。首先,從選定的學(xué)校中隨機(jī)抽選出若干名大學(xué)生,按姓氏筆畫將他們排序,然后采用隨機(jī)化的方法,將其中序號(hào)為單數(shù)的一半被試分到實(shí)驗(yàn)組,序號(hào)為偶數(shù)的另一半被試分到控制組。其次,在保證無特殊重大事件可能會(huì)影響到這兩組學(xué)生的兩周中進(jìn)行實(shí)驗(yàn)。先用“對(duì)考公務(wù)員態(tài)度量表”對(duì)兩組學(xué)生同時(shí)進(jìn)行一次測(cè)量,即前測(cè);分別得到實(shí)驗(yàn)組和控制組的前測(cè)態(tài)度得分;一周后,對(duì)實(shí)驗(yàn)組的學(xué)生播放選定的有關(guān)公務(wù)員考試的相關(guān)新聞以及評(píng)論,但控制組的學(xué)生不看這些新聞。再一周后,對(duì)兩組被試進(jìn)行第二次相同的態(tài)度測(cè)量,即后測(cè)態(tài)度得分。最后將前后測(cè)的測(cè)量結(jié)果進(jìn)行比較,相減得到態(tài)度改變程度分?jǐn)?shù)。
4)所羅門三組設(shè)計(jì)
雙組前后測(cè)設(shè)計(jì)可以幫助我們排除包含在實(shí)驗(yàn)組總差分中的前測(cè)的影響。然而,除了前測(cè)的影響,前測(cè)和實(shí)驗(yàn)刺激,即自變量之間還會(huì)產(chǎn)生一種“交互作用效應(yīng)”(interaction effect),即兩者的交互作用所產(chǎn)生的另一種外部施加的影響。例如,大學(xué)生們回答前測(cè)的態(tài)度量表中的問題時(shí),看到一些與公務(wù)員考試相關(guān)的新聞后,他們很有可能會(huì)將兩者聯(lián)系起來,意識(shí)到實(shí)驗(yàn)的目的可能與公務(wù)員考試的態(tài)度有關(guān),因而在進(jìn)行后測(cè)時(shí),他們可能作出某種違心的回答。因此,我們必須排除這種干擾,以得出實(shí)驗(yàn)刺激的真正效果。
所羅門三組實(shí)驗(yàn)就是針對(duì)這一問題而設(shè)計(jì)出來的。它在雙組前后測(cè)實(shí)驗(yàn)設(shè)計(jì)的基礎(chǔ)上,又增加了一個(gè)控制組R3。新增的R3組沒有前測(cè),只有實(shí)驗(yàn)刺激和后測(cè)。實(shí)驗(yàn)設(shè)計(jì)如下:
被試組 前測(cè) 實(shí)驗(yàn)刺激 后測(cè)
R1 O1 X O2
R2 O1 O2
R3 X O2
由于新增的R3組有實(shí)驗(yàn)刺激,而無前測(cè),所以這個(gè)組中因變量的任何變化都只能歸因于實(shí)驗(yàn)刺激,所以,有了R3組,我們就能計(jì)算出前測(cè)與實(shí)驗(yàn)刺激交互作用所造成的影響。
5)所羅門四組設(shè)計(jì)
雖然所羅門三組設(shè)計(jì)已經(jīng)考慮了多種因素的影響,但仍然存在缺陷。因?yàn)椋饲皽y(cè)和自變量的交互作用以外,還存在著實(shí)驗(yàn)外部因素的影響。三組設(shè)計(jì)中的兩個(gè)控制組測(cè)量結(jié)果中,都可能包括我們還不知道的外部因素的影響。為了進(jìn)一步從實(shí)驗(yàn)組的總差分中排除這種可能存在的外部因素的影響,所羅門設(shè)計(jì)了更為復(fù)雜的四組實(shí)驗(yàn)設(shè)計(jì)。
這種實(shí)驗(yàn)設(shè)計(jì)是在三組實(shí)驗(yàn)設(shè)計(jì)的基礎(chǔ)上,再增加一個(gè)R4組,對(duì)此控制組既不給予前測(cè),也不給予實(shí)驗(yàn)刺激,只有一個(gè)后測(cè)。實(shí)驗(yàn)設(shè)計(jì)如下:
被試組 前測(cè) 實(shí)驗(yàn)刺激 后測(cè)
R1 O1 X O2
R2 O1 O2
R3 X O2
R4 O2
由于R4組既無前測(cè)也無實(shí)驗(yàn)刺激,所以在該組中所發(fā)生的任何變化都是實(shí)驗(yàn)外部因素影響的結(jié)果。
所羅門四組設(shè)計(jì)的優(yōu)點(diǎn)在于:實(shí)驗(yàn)人員可以檢測(cè)前測(cè)的可能效果,同時(shí)也比較容易排除前測(cè)可能帶來的外部因素影響。這個(gè)較理想設(shè)計(jì)的缺點(diǎn)在于:缺少足夠的保持不變的實(shí)驗(yàn)場(chǎng)所和實(shí)驗(yàn)設(shè)備,時(shí)間和經(jīng)費(fèi)消耗大,尋找相同被試?yán)щy,等等。
三、研究效度
控制實(shí)驗(yàn)的效度是指實(shí)驗(yàn)所能揭示事物的本質(zhì)規(guī)律的有效程度??刂茖?shí)驗(yàn)研究就是為了揭示事物或現(xiàn)象之間的因果關(guān)系,但由于各方面一些因素的限制,不同實(shí)驗(yàn)所揭示的這種因果關(guān)系的可靠性程度是不一樣的,也就是說,實(shí)驗(yàn)的效度不同。
1966年坎貝爾和斯坦利提出了研究的內(nèi)部效度(internal validity)和外部效度(external validity)的概念。這一對(duì)概念提出后得到廣泛的認(rèn)可。一個(gè)好的控制實(shí)驗(yàn)最好能同時(shí)具備較高的內(nèi)部效度和外部效度。但實(shí)際上研究者往往更關(guān)注內(nèi)部效度,因?yàn)槿绻芯坎痪哂袃?nèi)部效度,其研究假設(shè)建立的因果關(guān)系不能成立,也就更談不上研究結(jié)果的可推廣性或普適性了。
1.內(nèi)部效度
所謂內(nèi)部效度是指實(shí)驗(yàn)中自變量的有效度能被準(zhǔn)確估計(jì)的程度,或者說自變量和因變量之間因果關(guān)系的明確程度。如果對(duì)實(shí)驗(yàn)中的額外變量控制不充分,那么這些額外因素的效應(yīng)可能與自變量發(fā)生混淆,得出因果關(guān)系的結(jié)論不是完全有把握。此時(shí)就說這個(gè)實(shí)驗(yàn)缺乏內(nèi)在效度。
一般來說,下面的這些因素常會(huì)與自變量發(fā)生混淆,降低實(shí)驗(yàn)內(nèi)部效度。
1)歷史
在實(shí)驗(yàn)過程中,與實(shí)驗(yàn)變量同時(shí)發(fā)生,并對(duì)實(shí)驗(yàn)結(jié)果產(chǎn)生影響的特定事件。
2)成熟
實(shí)驗(yàn)過程中,隨著時(shí)間的變化延續(xù),被試生理和心理逐漸成熟。
3)選擇
實(shí)驗(yàn)過程中,由于沒有采取隨機(jī)化的方法來選擇和分配被試,因而造成實(shí)驗(yàn)處理前后組的不對(duì)等。
4)測(cè)驗(yàn)
在前測(cè)及后測(cè)的測(cè)量中,由于被試做過前測(cè)有了經(jīng)驗(yàn),故后測(cè)的成績(jī)較前測(cè)好。
5)被試流失
實(shí)驗(yàn)過程中,由于種種原因使實(shí)驗(yàn)組或控制組中有較多被試流失,這樣會(huì)使組間不等的情況出現(xiàn),從而使結(jié)果的可信度降低。
6)統(tǒng)計(jì)回歸
實(shí)驗(yàn)處理前選擇了在某一特征方面具有極端分?jǐn)?shù)的被試,實(shí)驗(yàn)處理后的測(cè)驗(yàn)分?jǐn)?shù)有回歸到平均數(shù)的趨向。
7)儀器的使用
不同的觀察時(shí)點(diǎn),可能因?yàn)閷?shí)驗(yàn)測(cè)量工具或儀器變形或?qū)嶒?yàn)人員身心發(fā)生改變,而造成不同的結(jié)果。
8)霍桑效應(yīng)、安慰劑效應(yīng)和期望效應(yīng)等
在現(xiàn)實(shí)生活里做實(shí)驗(yàn),對(duì)照組成員經(jīng)常要被剝奪某種被認(rèn)為有價(jià)值的東西。在這種情況下,對(duì)照組成員會(huì)覺得受到了差異對(duì)待而變得自暴自棄,或者表現(xiàn)得超乎尋常地活躍?;蛘邔?shí)驗(yàn)人員覺得對(duì)照組被剝奪了某種有價(jià)值的東西而在實(shí)驗(yàn)過程中對(duì)控制組成員“關(guān)愛有加”,提供某種補(bǔ)償。
上面提到的因素都威脅了實(shí)驗(yàn)研究的內(nèi)在效度。有鑒于此,實(shí)驗(yàn)者發(fā)展了一些技術(shù)以處理這些問題。例如前面討論的幾種實(shí)驗(yàn)設(shè)計(jì)如果在配合選擇與分派被試者等方面選擇了適合方式,即可以不同程度地規(guī)避某些內(nèi)在無效度問題;如果能夠做到完全雙盲和隨機(jī)化,采用所羅門四組設(shè)計(jì)幾乎可以控制上述所有內(nèi)在無效度問題。
2.外部效度
所謂外部效度是指實(shí)驗(yàn)研究的結(jié)果能被推廣到實(shí)驗(yàn)條件以外類似情境的程度。任何一項(xiàng)實(shí)驗(yàn)研究的研究者都想將其結(jié)果推廣,希望能用自己的研究結(jié)果對(duì)同類現(xiàn)象作出解釋,預(yù)測(cè)和控制。這就需要提高實(shí)驗(yàn)研究的外在效度。
要達(dá)到比較好的外部效度,應(yīng)該注意控制以下幾個(gè)因素。
(1)增加被試的代表性。
選取被試時(shí)一定注意隨機(jī)化和代表性的問題,抽樣要隨機(jī),要增加取樣的層次,這樣會(huì)使被試樣本的代表性增大。
(2)克服實(shí)驗(yàn)的過分人工情境化。
一般的實(shí)驗(yàn)室實(shí)驗(yàn)都是在嚴(yán)密控制條件下進(jìn)行的,這樣的結(jié)果用來解釋日常生活中的問題,可能不太切合實(shí)際。
(3)考慮變量操作性定義的片面性。
四、案例分析
1.案例1
假設(shè):觀看電影將使大學(xué)生減少對(duì)老年人的偏見。
首先,我們從學(xué)校中隨機(jī)抽選出若干名大學(xué)生,按姓氏筆畫將他們排序,然后采用隨機(jī)化的方法,將其中序號(hào)為單數(shù)的一半學(xué)生分到實(shí)驗(yàn)組,序號(hào)為偶數(shù)的另一半學(xué)生分到控制組。接著,我們?cè)诒WC無特殊事件會(huì)影響到這兩組學(xué)生的兩周中實(shí)施這一實(shí)驗(yàn)。我們先用一組涉及對(duì)老年人態(tài)度的量表對(duì)兩組學(xué)生同時(shí)進(jìn)行一次態(tài)度測(cè)驗(yàn)。分別得到實(shí)驗(yàn)組和控制組的前測(cè)態(tài)度得分(記為BE和BC)。一周后,我們對(duì)實(shí)驗(yàn)組的學(xué)生放映一場(chǎng)反映老年人生活、困難、需求,以及老年人對(duì)社會(huì)和家庭的貢獻(xiàn)等方面內(nèi)容的電影,但控制組的學(xué)生不看這場(chǎng)電影。又過了一周,我們?cè)俅螌?duì)這兩組學(xué)生進(jìn)行第二次量表測(cè)驗(yàn)。分別得到實(shí)驗(yàn)組和控制組的后測(cè)態(tài)度得分(記為AE和AC)。偏見量表上的得分越高表明對(duì)老年人的偏見越大,且兩次測(cè)量得到下列結(jié)果(盡管兩個(gè)組前測(cè)的實(shí)際得分可能會(huì)由于隨機(jī)誤差而略有差別,這里為方便起見,假定兩者相同,都為84分):
BE=84分,AE=60分;
BC=84分,AC=82分。
則AE-BE=(60-84)分=-24分,AC-BC=(82-84)分=-2分;
那么,
觀看電影所產(chǎn)生的影響=(AE-BE)-(AC-BC)
?。剑郏?4-(-2)]分=-22分
即觀看電影將明顯減少大學(xué)生對(duì)老年人的偏見。
2.案例2
假設(shè):教師稱贊行為將增強(qiáng)學(xué)生創(chuàng)造力。
操作性定義應(yīng)清楚而明確地界定“稱贊”、“批評(píng)”及“創(chuàng)造力”三個(gè)變量。
研究者將學(xué)生以隨機(jī)分派方式分為接受“稱贊”的實(shí)驗(yàn)處理組及接受“批評(píng)”的控制處理組。經(jīng)實(shí)驗(yàn)后,以測(cè)量創(chuàng)造思考力之測(cè)驗(yàn)分別測(cè)量?jī)山M學(xué)生的創(chuàng)造力,然后應(yīng)用變異數(shù)分析來比較兩組學(xué)生創(chuàng)造力分?jǐn)?shù)的差異顯著性。
本例中,研究者所操作的變量為“稱贊”和“批評(píng)”,此變量稱為實(shí)驗(yàn)變量,通常又稱為自變量;因這個(gè)變量的影響而發(fā)生改變的變量(創(chuàng)造力)則稱為因變量。
3.案例3
假設(shè):說教性言論將使網(wǎng)民對(duì)某一特定事件的態(tài)度更加模糊、多元。
設(shè)計(jì):首先,我們從特定的有代表性的某一網(wǎng)絡(luò)論壇中隨機(jī)抽選出若干名較活躍網(wǎng)民,按姓氏筆畫將他們排序,然后采用隨機(jī)化的方法,按序號(hào)平均分配為四個(gè)組。接著,在保證單一網(wǎng)絡(luò)事件言論影響且無其他特殊事件影響的情境下,對(duì)前兩小組同時(shí)分別進(jìn)行一次對(duì)于事件的態(tài)度測(cè)驗(yàn),分別得到第一組實(shí)驗(yàn)組和第二組控制組1的前測(cè)態(tài)度得分(記為BE和BC)。一周后,再對(duì)實(shí)驗(yàn)組和第三組控制組2的被試加入說教性一邊倒性質(zhì)言論,并注意連續(xù)灌輸,但第二組控制組1和第四組控制組3不接觸這些言論。再過一周,我們?cè)俅瓮瑫r(shí)對(duì)四組被試進(jìn)行第二次量表測(cè)量。分別得到實(shí)驗(yàn)組、控制組1、控制組2和控制組3的后測(cè)態(tài)度得分(記為AE、AC、AB和AA)。
本章思考題
1.抽樣調(diào)查的具體步驟主要有哪些?
2.采用抽樣調(diào)查法,調(diào)查人們對(duì)2010年央視春節(jié)晚會(huì)植入廣告事件的看法。
3.內(nèi)容分析的主要目的、步驟和意義是什么?
4.請(qǐng)就研究問題“《人民日?qǐng)?bào)》和《南方周末》對(duì)2011年全國(guó)兩會(huì)關(guān)注內(nèi)容的側(cè)重點(diǎn)有所不同嗎?”進(jìn)行研究設(shè)計(jì)。
5.與抽樣調(diào)查、內(nèi)容分析法相比,控制實(shí)驗(yàn)法具有什么優(yōu)勢(shì)?
6.請(qǐng)對(duì)“課程互動(dòng)能夠提高學(xué)習(xí)效率”進(jìn)行一次控制實(shí)驗(yàn)設(shè)計(jì)。
【注釋】
[1]吳增基、吳鵬森、蘇振芳:《現(xiàn)代社會(huì)調(diào)查方法》,上海人民出版社,2003年版,第102頁。
[2]秦偉、吳軍等:《社會(huì)科學(xué)研究方法》,四川人民出版社,2000年版,第107頁。
[3]風(fēng)笑天:《社會(huì)學(xué)研究方法》,中國(guó)人民大學(xué)出版社,2005年版,第136頁。
[4]李紅艷:《傳播學(xué)研究方法》,中國(guó)傳媒大學(xué)出版社,2008年版,第130頁。
[5]余紅:《網(wǎng)絡(luò)時(shí)政論壇輿論領(lǐng)袖篩選模型初探》,載《新聞與傳播研究》,2008年第2期。
[6]風(fēng)笑天:《現(xiàn)代社會(huì)調(diào)查方法》,華中科技大學(xué)出版社,2005年版,第265~266頁。
[7]風(fēng)笑天:《社會(huì)學(xué)研究方法》,中國(guó)人民大學(xué)出版社,2005年版,第177頁。
[8]仇立平:《社會(huì)研究方法》,重慶大學(xué)出版社,2008年版,第205頁。
[9]肯尼思·D.貝利:《現(xiàn)代社會(huì)研究方法》,上海人民出版社,1986年版,第227頁。
[10]仇立平:《社會(huì)研究方法》,重慶大學(xué)出版社,2008年版,第206頁。
[11](德)阿特斯蘭德:《經(jīng)驗(yàn)性社會(huì)研究方法》,中央文獻(xiàn)出版社,第187頁。
[12]Kerlinger,F(xiàn)red N.:Foundations of Behavioral Research,3rd ed.,New York:Holt,Rineart &Win-ston,1986.
[13]陳波等:《社會(huì)科學(xué)方法論》,中國(guó)人民大學(xué)出版社,1989年版,第190頁。
[14]風(fēng)笑天:《社會(huì)學(xué)研究方法》,中國(guó)人民大學(xué)出版社,2001年版,第225頁。
[15]Ole R.Holsti:Content Analysis for the Social Sciences and Humanities,MA:Addison-Wesley,1969,p.95.
[16]卜衛(wèi):《試論內(nèi)容分析法》,載《國(guó)際新聞界》,1997年第4期。
[17]卜衛(wèi):《試論內(nèi)容分析法》,載《國(guó)際新聞界》,1997年第4期。
[18]轉(zhuǎn)引自李本乾:《描述傳播內(nèi)容特征 檢驗(yàn)傳播研究假設(shè)——內(nèi)容分析法簡(jiǎn)介》,載《當(dāng)代傳播》,2000年第1期,第41頁。
[19]轉(zhuǎn)引自李本乾:《描述傳播內(nèi)容特征 檢驗(yàn)傳播研究假設(shè)——內(nèi)容分析法簡(jiǎn)介》,載《當(dāng)代傳播》,2000年第1期,第41頁。
[20]風(fēng)笑天:《社會(huì)學(xué)研究方法》,中國(guó)人民大學(xué)出版社,2005年版,第231頁。
[21]胡正榮:《傳播學(xué)總論》,北京廣播學(xué)院出版社,1997年版,第225頁。
[22]Berg,Bruce L:Qualitative Research Methods for the Social Sciences.3rd ed.Boston:Allyn and Ba-con,1998.
[23]柯惠新、祝建華等:《傳播統(tǒng)計(jì)學(xué)》,北京廣播學(xué)院出版社,2003年版,第43頁。
[24]肯尼思·D.貝利:《現(xiàn)代社會(huì)研究方法》,上海人民出版社,1986年版,第428頁。
[25]艾爾·芭比:《社會(huì)研究方法》,華夏出版社,2005年版,第311頁。
[26]胡正榮:《傳播學(xué)總論》,北京廣播學(xué)院出版社,1997年版,第225頁。
[27]肯尼思·D.貝利:《現(xiàn)代社會(huì)研究方法》,上海人民出版社,1986年版,第424頁。
[28]David L.Sills.International Encyclopedia of the Social Science,3vol.,New York:Macmillan,1968,p.45.
[29]夏倩芳、張明新:《新聞框架與固定成見:1979—2005年中國(guó)大陸主流報(bào)紙新聞中的黨員形象與精英形象》,載《新聞與傳播研究》,2007年第14卷第2期。
[30]楊治良:《實(shí)驗(yàn)心理學(xué)》,浙江教育出版社,1997年版。
[31]風(fēng)笑天:《社會(huì)學(xué)研究方法》,中國(guó)人民大學(xué)出版社,2005年版,第188頁。
[32]約翰·C.雷納德:《傳播研究方法導(dǎo)論》(第三版),中國(guó)人民大學(xué)出版社,2008年版,第256頁。
[33]李紅艷:《傳播學(xué)研究方法》,中國(guó)傳媒大學(xué)出版社,2008年版,第147頁。
[34]W.L.Neuman:Social Research Methods:qualitative and quantitative approaches,Allyn and Bacon,1994,p.176.
[35]艾爾·芭比:《社會(huì)研究方法》,華夏出版社,2005年版。
免責(zé)聲明:以上內(nèi)容源自網(wǎng)絡(luò),版權(quán)歸原作者所有,如有侵犯您的原創(chuàng)版權(quán)請(qǐng)告知,我們將盡快刪除相關(guān)內(nèi)容。