考評中采用了類似的方法,即通過熟悉科技項(xiàng)目(課題)各方人士填表的方式,取得考評分值,綜合評價(jià)科技項(xiàng)目的績效。
具體做法是:根據(jù)考評指標(biāo)體系,分別設(shè)計(jì)用于課題考評和用于項(xiàng)目考評的兩套表格。課題考評表有四類,分別由課題負(fù)責(zé)人、項(xiàng)目負(fù)責(zé)人、考評專家和考評組織方填寫;項(xiàng)目考評表也有四類,分別由項(xiàng)目負(fù)責(zé)人、主管該項(xiàng)目的政府部門處室、考評專家和考評組織方填寫。
項(xiàng)目(課題)任務(wù)書、驗(yàn)收報(bào)告、審計(jì)報(bào)告等資料,是填寫考評表有關(guān)內(nèi)容的依據(jù),考評組織方填寫的結(jié)論和數(shù)據(jù),則取自驗(yàn)收報(bào)告和審計(jì)報(bào)告。綜合評價(jià)前確定各表中同一指標(biāo)分值的權(quán)重,在進(jìn)行綜合評價(jià)時(shí),對于不同表中同一指標(biāo)分值的處理,根據(jù)指標(biāo)性質(zhì)取其加權(quán)平均數(shù)?!?/span>
3.評價(jià)標(biāo)準(zhǔn)的建立
科技項(xiàng)目績效評價(jià)標(biāo)準(zhǔn)是以一定量的有效樣本為基礎(chǔ),測算出標(biāo)準(zhǔn)樣本數(shù)據(jù),用以衡量和評價(jià)科技項(xiàng)目的績效水平。由于國內(nèi)對科技項(xiàng)目績效考評尚處于起步階段,不可能采用或通過修訂已有的計(jì)劃標(biāo)準(zhǔn)、歷史標(biāo)準(zhǔn)或經(jīng)驗(yàn)標(biāo)準(zhǔn)來建立評價(jià)標(biāo)準(zhǔn),只有進(jìn)行實(shí)測,建立初步的標(biāo)準(zhǔn)之后,再逐步修訂完善。在建立科技項(xiàng)目的績效考評中,有必要按項(xiàng)目類型,建立適應(yīng)各類項(xiàng)目的考評標(biāo)準(zhǔn)體系。
建立科技項(xiàng)目績效考評的評價(jià)標(biāo)準(zhǔn)的程序?yàn)椋海?)選定一定數(shù)量的項(xiàng)目樣本;(2)確定評價(jià)指標(biāo)體系中各指標(biāo)權(quán)重、確定項(xiàng)目與課題相對重要性權(quán)重、確定同一項(xiàng)目各課題的相對重要性權(quán)重;(3)組織試填考評表,綜合計(jì)算項(xiàng)目考評分值;(4)分析綜合考評結(jié)果與實(shí)際情況是否相符、若相符,則確定標(biāo)準(zhǔn);(5)當(dāng)考評結(jié)果與實(shí)際情況不盡相符時(shí),修改考評表設(shè)定有關(guān)分值項(xiàng)、重新試填考評表,重新計(jì)算,再分析結(jié)果,直至考評結(jié)果與實(shí)際情況相符為止,從而確定考評標(biāo)準(zhǔn)。
4.評價(jià)指標(biāo)的確定
我們設(shè)計(jì)的績效考評指標(biāo)體質(zhì)包含多個(gè)評價(jià)指標(biāo),它們對評價(jià)結(jié)果影響程度的大小被稱為評價(jià)指標(biāo)的權(quán)重,可以采取排序法、層(級)次分析法、專家直觀判斷法來確定各評價(jià)指標(biāo)的權(quán)重。三種方法可以單獨(dú)運(yùn)用,也可以綜合運(yùn)用。
指標(biāo)排序法,是按照設(shè)計(jì)的評價(jià)指標(biāo)體系的級次,分級制定評價(jià)指標(biāo)排序表,由專家根據(jù)主觀判斷對指標(biāo)影響程度大小進(jìn)行由大到小的排序,再根據(jù)設(shè)計(jì)的指標(biāo)排序分值,分級進(jìn)行統(tǒng)計(jì)和歸一化處理,最終計(jì)算出各級次指標(biāo)的權(quán)重。
層(級)次分析法,先確定衡量指標(biāo)重要程度差別的定量標(biāo)度,再按設(shè)計(jì)的評價(jià)指標(biāo)體系的級次,分級確定進(jìn)行指標(biāo)重要性兩兩對比判斷的矩陣,請專家在矩陣中填寫指標(biāo)對比判斷后的標(biāo)度值,經(jīng)過歸一化處理和統(tǒng)計(jì)計(jì)算,最終得出指標(biāo)的權(quán)重。
專家直觀判斷法,是請專家根據(jù)自己的經(jīng)驗(yàn)和知識(shí),對績效考評指標(biāo)體系的各級次指標(biāo),按其重要性程度直接給出權(quán)重分值,再采用數(shù)學(xué)平均法處理專家分值,對分值進(jìn)行歸一化處理,即得指標(biāo)的權(quán)重。