16日,GET2017教育科技大會(huì)教育公益論壇上,陜西師范大學(xué)教育經(jīng)濟(jì)研究所的所長(zhǎng)史耀疆分享了在教育項(xiàng)目進(jìn)行科學(xué)評(píng)估的方法。
史耀疆表示,目前很多人不愿對(duì)項(xiàng)目進(jìn)行評(píng)估,但是評(píng)估可以有效避免項(xiàng)目中的不良影響帶來(lái)的損失。
以下為嘉賓演講實(shí)錄(芥末堆略有刪減):
剛剛,盧秘書(shū)長(zhǎng)講了從0歲到20歲的公益項(xiàng)目,這是未來(lái)中國(guó)真正阻斷貧困的根本方法(這是阻斷貧困根本性的一些方法),我想介紹一下在盧秘書(shū)長(zhǎng)的基礎(chǔ)上,評(píng)估這些項(xiàng)目到底有沒(méi)有效果以及有多大的效果。
如何做科學(xué)影響評(píng)估
中國(guó)上世紀(jì)八十年代末、九十年代初,一個(gè)非政府組織在九十年代初,在西南地區(qū)給這些女孩提供獎(jiǎng)學(xué)金以提高入學(xué)率。
通過(guò)這個(gè)項(xiàng)目,當(dāng)?shù)氐男W(xué)階段的女孩入學(xué)率從40%提升至92%,效果很好。其實(shí)我們并不知道他們的初始入學(xué)率,也不知道92%意味著什么,它只是一個(gè)決策的結(jié)果,不是對(duì)項(xiàng)目的影響,沒(méi)有對(duì)照組的情況。并且,在九十年代初,整個(gè)國(guó)民外出務(wù)工的機(jī)會(huì)大大增加,非農(nóng)就業(yè)的工資也增長(zhǎng),這到底是外出務(wù)工非農(nóng)就業(yè)帶來(lái)的變化,還是項(xiàng)目本身帶來(lái)的變化,難以說(shuō)清。
了解項(xiàng)目干預(yù)前、干預(yù)后的狀況,這所學(xué)校找到了一個(gè)對(duì)照組(就是在同一個(gè)縣里面找了一些學(xué)校,看對(duì)照組孩子的變化),他們說(shuō)對(duì)照組的孩子是84%的入學(xué)率,但這也不能說(shuō)明我們的干預(yù)對(duì)項(xiàng)目的影響。因?yàn)槠渲猩婕暗搅诉x擇問(wèn)題,因?yàn)槲覀冞x擇的不是隨機(jī)抽樣的結(jié)果,有可能選擇實(shí)施成本低的樣本。
最后,這所學(xué)校又對(duì)比其對(duì)照組中孩子的初始入學(xué)情況、獎(jiǎng)學(xué)金的女孩入學(xué)率,結(jié)果數(shù)值是負(fù)6。是否影響是負(fù)的(這個(gè)項(xiàng)目并沒(méi)有帶來(lái)很好的變化),這個(gè)結(jié)果也不正確。因?yàn)檫@兩個(gè)干預(yù)組和對(duì)照組之間既不隨機(jī)也不匹配。
通過(guò)這個(gè)案例,我想說(shuō)明,在做干預(yù)、公益項(xiàng)目時(shí),我們應(yīng)該知道項(xiàng)目有沒(méi)有效果、有多大的效果,影響多大。如果事先并不知道這個(gè)項(xiàng)目的影響,可能一次會(huì)損失數(shù)十億、數(shù)百億的資金。
所以,項(xiàng)目的評(píng)估非常需要。為什么要做科學(xué)的應(yīng)該評(píng)估?
第一,它是投資決策的依據(jù)。比如幼兒教育的階段、中職教育的階段到底應(yīng)該怎么做,這就是一個(gè)投資決策參考的依據(jù)。
第二,是完善項(xiàng)目、重新設(shè)計(jì)項(xiàng)目的依據(jù)。
我們?cè)谥袊?guó)(特別是在教育領(lǐng)域里面)做了很多的公益項(xiàng)目,但是真正對(duì)這些項(xiàng)目進(jìn)行過(guò)嚴(yán)謹(jǐn)評(píng)估的并不多。我知道中國(guó)發(fā)展基金會(huì)在之前我們做了一些探索。但是在教育的這個(gè)領(lǐng)域里面,很多人覺(jué)得要做好事兒,但有沒(méi)有效果、有多大的效果,卻并不知道。
為什么很多人不做影響評(píng)估?
原因一:時(shí)間周期長(zhǎng)。因?yàn)槲覀円R(shí)別一個(gè)項(xiàng)目的影響,這個(gè)可能不是一天、兩天,甚至兩年、三年才能知道這個(gè)項(xiàng)目的影響到底是什么。大部分人認(rèn)為時(shí)間太長(zhǎng)。
原因二:做影響評(píng)估需要有對(duì)照組,并且觀察自然的社會(huì)變化是什么,成本較高。
原因三:很多人說(shuō)這點(diǎn)不符合倫理,但是應(yīng)該考慮,到底是僅做公益還是要做發(fā)展。如果僅僅是做公益,幫助幾個(gè)人,這沒(méi)問(wèn)題。但是要做發(fā)展,便涉及到大倫理和小倫理的問(wèn)題。
通過(guò)配眼鏡公益項(xiàng)目,增加農(nóng)村兒童學(xué)習(xí)時(shí)間
舉例說(shuō),我們做過(guò)為農(nóng)村的孩子配眼鏡的公益項(xiàng)目。我們做了252個(gè)小學(xué)的調(diào)查,問(wèn)這些校長(zhǎng)、老師孩子有沒(méi)有近視,他們說(shuō)沒(méi)有。學(xué)校(寧夏農(nóng)村的這一個(gè)學(xué)校里面)中也沒(méi)有一個(gè)孩子戴眼鏡,所以我們團(tuán)隊(duì)有疑問(wèn),合作醫(yī)療的影響到底是什么,新型合作醫(yī)療的實(shí)施是否提高了人們的健康產(chǎn)出,我們發(fā)現(xiàn)沒(méi)有證據(jù)能夠證明。
但是我們的檢測(cè)結(jié)果是,這個(gè)學(xué)校4年級(jí)、5年級(jí)、6年級(jí)的平均的近視率是27%(沒(méi)有一個(gè)孩子戴眼鏡),但是家長(zhǎng)不知道、老師也不知道,他們大概覺(jué)得這不是一個(gè)問(wèn)題。
我們?cè)俅螌?duì)2萬(wàn)個(gè)學(xué)生做全樣本以后,發(fā)現(xiàn)大概差不多25%的孩子(是在小學(xué)四年級(jí)到六年級(jí)階段)近視。在初中階段和高中階段達(dá)到80%。解決這個(gè)問(wèn)題很簡(jiǎn)單,就是配一副眼鏡,但問(wèn)題是農(nóng)村的孩子沒(méi)有戴眼鏡。
接下來(lái)我們進(jìn)行了一項(xiàng)隨機(jī)干預(yù)的實(shí)驗(yàn),一個(gè)組給發(fā)眼鏡,一個(gè)組做培訓(xùn),將252個(gè)學(xué)校分成三個(gè)組,一組免費(fèi)送眼鏡,一個(gè)組做老師、家長(zhǎng)的線下培訓(xùn),另外一個(gè)組是對(duì)照組(什么都不做),看看這個(gè)對(duì)孩子的影響到底是什么。
結(jié)果顯示,戴了眼鏡9個(gè)月以后,孩子們的成績(jī)平均提高了0.4個(gè)標(biāo)準(zhǔn)差,相當(dāng)于學(xué)習(xí)時(shí)間多9個(gè)月。
現(xiàn)在我們發(fā)起一個(gè)項(xiàng)目叫做“看清未來(lái)”,建立視光中心,將視光中心醫(yī)院的護(hù)士送至中山大學(xué)眼科中心進(jìn)行培訓(xùn)后關(guān)于驗(yàn)光、配鏡的證書(shū),然后他們會(huì)回到當(dāng)?shù)亟⒁暪庵行摹?/p>
所以,我們目前的做法是,農(nóng)村四、五、六年級(jí)孩子的第一副眼鏡免費(fèi),之后需要付費(fèi)。
最后,關(guān)于做影響評(píng)估,首先要進(jìn)行基線調(diào)查,同時(shí)你要有干預(yù)、對(duì)照,再做評(píng)估調(diào)查(這是一個(gè)最基本的),由于自然社會(huì)經(jīng)濟(jì)的變化,也會(huì)帶來(lái)影響,要減掉這部分影響,這才是項(xiàng)目真正的影響。
謝謝大家。
2、芥末堆不接受通過(guò)公關(guān)費(fèi)、車(chē)馬費(fèi)等任何形式發(fā)布失實(shí)文章,只呈現(xiàn)有價(jià)值的內(nèi)容給讀者;
3、如果你也從事教育,并希望被芥末堆報(bào)道,請(qǐng)您 填寫(xiě)信息告訴我們。