(一)準備階段
1.組織準備
組織有關人員做好研究成果評價的準備工作是研究成果評價的重要環節。但組織準備一般包括自評、自評組織、專家評價組織。自評是指研究者個人對自己的工作進行回顧檢查;自評組織是由評價對象自身組織起來的組織,對自身的條件、工作狀態和成果進行檢查。兩者的特點是對自身的評價,不涉及對自身以外的對象進行評價。其目的有兩個:一是通過自評提供改進工作的有效信息;二是向專家小組提供評價基礎和信息。專家評價組織,這是為某一項研究成果的評價工作而設置的臨時評價組織,一般由教育行政部門或科研機構聘請若幹有經驗的學者、教授、中小學優秀教育實踐者等組成。專家評價小組的任務,主要是對自評報告所提供的評價依據進行檢查、核實,然後作出結論,提出加強和改進工作的意見。專家應有相當高的評價能力和社會聲望,足以擔任起評價工作任務。一般由7~11人組成。
2.方案準備
包括對評價的指標體係、測量方法和統計方法等方麵的準備。方案準備的一般過程是:①分解目標。即針對評價對象,根據評價目的要求,將評價目標分層次地分解為許多組成因素和部分。②設計指標體係結構。對已經分解目標和選取項目的指標結構體係,還要進行分析、比較、平衡。同時初步考慮各級指標的權重。③確定各項指標的內涵和外延。即對各項指標用文字、公式或標準表達出來。④明確測量方法。按照指標項的內涵和外延,用文字將測量方法、量化技術、星表量標分別確定下來。⑤構造權集。將權集的構造形式和權集的具體構造確定下來。⑥反饋修改。經討論的指標體係可試點實測,根據情況進行修改。
3.文件準備
包括指標體係、測量表格、評審表格、檢查提綱等。實施評價前向專家小組成員、評價對象發出通知,並製定評價工作進度表等。