1醫學科技計劃績效評估框架的構建原則與主要模型

1．1醫學科技計劃績效評估框架的構建原則

1．1．1系統性原則系統性原則要求績效評估框架與評估對象的戰略目標、績效評估的目的一致。首先，與被評估對象的戰略目標的一致性。績效評估的目的就是引導、幫助被評估對象實現其戰略目標以及檢驗其戰略目標實現的程度。因此，構建評估框架應根據醫學科技計劃的戰略目標來設定和選擇績效評估議題。其次，與績效評估目的的一致性。目的不同，績效評估的側重點也應有所區別。

1．1．2可行性原則可行性原則對醫學科技計劃績效評估框架的構建做出兩個方面規定。一是評估框架要有針對性，一方面必須反映醫學科技計劃績效的共同屬性，另一方面又要突出政府關注的績效重點。二是評估框架要合理。根據需要與可能設定議題或指標，使評估框架建立在切實可行的基礎上，必須立足于主、客觀條件，既要考慮到評估議題或指標本身的可評估性，又要考慮到評估過程中證據的可收集性。

1．1．3整體性原則首先，整體性原則要求評估框架的設計要體現全過程管理的思想，能夠全面、系統地反映醫學科技計劃績效的數量和質量要求。其次，績效評估框架要有針對性，反映科技計劃整個實施過程中的關鍵環節。再次，評估框架要體現管理要求，即體現關鍵環節做的很好或很差的標準。最后各個評估議題或指標要相互獨立，不能重疊。

1．2科技計劃評估的主要模型

目前在科技計劃評估領域最常用的模型是“邏輯模型(Logicmodel)”，而在醫學研究領域最常使用的成效評估模型是“回報模型(paybackmodel)”，因此，本文主要對這兩個模型做簡要的介紹。

1．2．1邏輯模型邏輯模型最早起源于私立部門的全面質量管理評價，之后被廣泛應用于公共部門、政府部門和非營利組織，在績效評估研究領域，常被國際組織作為一種計劃/項目設計、執行和考核評估的工具來使用。邏輯模型勾勒出計劃整個實施過程中各環節的因果關系，從中找出影響計劃績效的關鍵環節，既可以幫助評估科技計劃績效，也適用于對科技計劃績效進行分析并實施改進。作為一種概念化論證項目的方法，邏輯模型通過一張簡單的框圖來分析一個復雜的計劃/項目的內涵和關系，注重把項目產生的短期結果、中期影響和長期戰略之間的關系概念化，核心是事物層次間的因果邏輯關系。即“如果”提供了某種條件，“那么”就會產生某種結果，這些條件包括事物內在的因素和事物所需要的外部條件。典型的邏輯模型。通過可以看出，該邏輯模型通過描述系統從輸入、輸出、成果及影響等要素，給出了一個綜合地、系統地研究和分析問題的思維框架。模型由以下六個維度構成:目標、投入、活動及對象、結果、假設、環境。邏輯模型總是在特定的情境下發生，對于一個科技計劃來說，就是依據“情境”所制定的戰略目標。投入包括所需的人力、物力、財力、時間和技術等資源;產出包括投入所帶來的活動以及活動過程中所涉及的對象。結果是指計劃/項目直接的效果和作用，是產出所帶來的影響，包括短期、中期和長期影響;假設則是聯系情境、投入、產出和結果彼此之間的因果關系，反映組織行為間的邏輯關系。通過邏輯模型，有利于了解特定行為的發展過程及各環節之間的因果關系;有利于找出關鍵問題，找到進行績效評估的切入點，確定評估內容;還有利于組織和個人進行評估以及反饋，完善行為。其基本思路是從邏輯模型的分析框架出發，從系統的輸入、輸出、成效等邏輯環節構建績效評估的維度。具體的方法是從計劃/項目的長期戰略出發，通過“長期目標－中短期目標－產出－投入”四個層次逐層分解戰略愿景，找出績效產生過程中的關鍵要素，并把各層面的關鍵要素轉變為具體評估內容。

1．2．2回報模型回報模型，是MartinBuxton領導的英國BrunelUniversity(倫敦)健康經濟學研究組提出的，是當前系統評估健康相關科研活動投入回報時使用最廣泛的一套綜合方法。在回報模型中，“影響”(impact)是一個寬泛的概念，它將直接產出、短期成效和長期影響等各個時間窗的效果都納入到“影響”的范疇中，主要采用性質分類的方式來對不同類型的影響進行區分。將健康相關的研究所可能產生的影響分為知識產生、科研能力的建設、對相關政策和產品開發的支撐、健康及健康相關部門的收益、更廣泛的經濟和社會收益五大方面，并在每個方面提出若干指標。通過上面的回報模型邏輯圖和回報模型指標劃分可以看出，該模型主要集中在對結果端的評估，認為結果是否達到公共財政支出的要求、是否能夠滿足公眾以及政府的需要，這對科技計劃實施來說是最為重要的。模型不僅按照性質分類的方式將結果分成了五個方面，而且也考慮了各個利益相關方的需求，同時也能體現出不同時間窗下的效果，更重要的是符合健康領域相關科研活動的作用過程。

2醫學科技計劃績效評估框架構建

2．1醫學科技計劃績效評估框架構建的基本邏輯

本研究結合醫學科技計劃總結成效和管理經驗、完善管理措施、提供決策參考的的績效評估需求，選擇“邏輯模型”和“回報模型”相結合的方式進行績效評估的框架設計。采用了“邏輯模型”的邏輯主線，同時在成效部分結合了“回報模型”的成效分類方式，將邏輯模型和成效范疇結合，使評估邏輯模型更加適用于醫學科技計劃的績效評估。改進后的邏輯模型通過描述系統從輸入、輸出、成果及影響等要素，給出了一種綜合地、系統地研究和分析問題的思維框架。模型由以下四個維度構成:目標、投入、管理/活動、成效。其中目標，主要是根據上級政策規劃、社會發展需求和科學發展需求等方面進行設計;投入包括所需的人力、物力、財力、時間和技術等資源;管理/活動主要包括兩個層次的內容，第一個層次是指科技計劃的主管方采取的組織方式和管理措施，第二個層次是指科技計劃的執行方的實施活動;成效是指計劃/項目直接的效果和作用，包括知識的積累、能力的建設、政策支撐與產品開發、健康及健康部門的收益、更廣泛的經濟和社會影響等方面。通過該邏輯模型，即可以對成效展開五個方面的評價，又可以把結果端和起始端串聯起來，將目標－投入－管理/活動－結果邏輯線路上的所有要素囊括在內，有助于了解各環節之間的因果關系，明晰什么因素導致什么結果，找出績效產生過程中的關鍵要素，并把各層面的關鍵要素轉變為具體的評估內容。基于改進后的“邏輯模型”，結合一般醫學科技計劃投入與管理的特點，可得出如圖4所示的醫學科技計劃績效形成機理。從績效形成機理圖可以看出，醫學科技工作面臨著公眾健康、衛生事業發展及醫學科技發展的需求。根據政府醫學科技工作戰略目標制定醫學科技計劃的戰略目標，并決定財政資源規模，同時制定科研組織、資源整合方式和科技計劃學術牽頭人。在給予一定的投入后，醫學科技計劃開始組織管理活動，包括確定優先資助的項目、及項目主持、承擔單位、牽頭人遴選、評審、實施過程監督管理，這些都是醫學科技計劃關鍵的管理環節。經過復雜的科技投入和管理活動，醫學科技計劃管理直接產出就是組織了一批項目進行研發、組建科技攻關體系、遴選一批牽頭專家和搭建科技條件平臺，同時形成一系列學術成果，這些成果通過推廣、轉化轉移對知識增長、能力提升、政策支撐和產品開發、醫療服務和健康水平提升、社會經濟發展產生了重要影響。

2．2醫學科技計劃績效評估框架構建的評估準則

給出的邏輯模型中，展示了一般醫學科技計劃投入、管理和成效的前因后果。其中已經標識出了醫學科技計劃投入和管理中的幾個關鍵環節，這些環節恰恰對應著投入與管理流程中可能的“斷點”。如果醫學科技計劃在這些環節上做得很好或很差，那么直接關系到其績效是否突出，而其做的好壞的標準也就對應著績效評估的準則。基于一般科技評估框架，結合醫學科技計劃的管理要求，本研究認為評估準則包括以下內容。

2．3醫學科技計劃績效評估框架

在明確醫學科技計劃的績效形成機理和開展評估的準則之后，績效評估的框架得以構建。醫學科技計劃的績效評估框架和議題，其中過程評估包括三個大的維度:目標的制定、計劃的投入、計劃的執行;成效評估包括五個大的維度:知識產出、科研能力建設、政策支撐和產品開發、健康及健康部門的收益、更廣泛的經濟和社會收益。這些維度對應于醫學科技計劃績效形成機理中的各個環節，前后之間具有一定的邏輯關系。在每個維度下，分別開展相應的評估議題。績效評估框架的維度與關鍵。

2．3．1過程評估第一，對目標的制定的評估主要關注相關性準則。首先，政府醫學科技計劃的戰略目標的設置應當滿足國家或地方醫學科技發展的總體規劃以及社會發展的現實需求，即“定位準”。其次，還要有能夠落實的機制和措施保證其戰略目標的分解、實施，即“可操作”。第二，對計劃投入的評估主要關注適當性準則。首先，政府醫學科技計劃的資源投入應該做到公正合理，將有限的資金分配給最需要的領域。其次，其投入的經費和人員的格局應該不偏離其預期結果，形成良性發展的資助體系。第三，對計劃執行的評估主要關注效率性和效果性準則。首先，醫學科技計劃項目啟動之初，應當確保有一套完善的實施方案和政策制度。其次，在政府醫學科技計劃從啟動到結題的全過程中，應具有合適的管理方式和管理過程，保證管理的效率和效果。

2．3．2成效評估對政府醫學科技計劃成效的評估，主要關注效果性準則。首先政府醫學科技計劃的成效應當與其投入相匹配，符合預期定位。其次，政府醫學科技計劃的成效應該體現其戰略目標，其事實結果應符合提升自主創新能力，產出創新成果和創新能力建設，以及促進社會發展和市民健康等方面的需求。前面在分析政府醫學科技計劃績效形成機理時，已經對一般政府醫學科技計劃的戰略目標進行了研究，主要體現在五個方面:第一，知識產生，主要包括期刊論文、學術會議報告、專著、研究報告等方面的評估;第二，科研能力建設，主要包括科研能力的提升、人才隊伍建設、專業培訓、團隊、平臺、數據信息等;第三，政策支撐和產品開發，主要評估研究成果是否為衛生政策的制定和實施起到堅實的支撐作用，以及開發新藥物、新的診療技術。第四，健康及健康部門的收益，主要包括公眾健康水平的提升、醫院醫療服務成本的降低、醫療服務的質量提高、健康教育與健康促進等方面的效果。第五，更廣泛的經濟和社會收益:主要包括科研成果的商業化、勞動力增加帶來的經濟和社會效益等。

3結語

醫學科技計劃的產出和成效與公眾健康狀況和生活質量具有極強的關聯性，要接受政府和公眾對其問責。本文運用“邏輯模型”和“回報模型”相結合的方式設計績效評估綜合框架體系，突出評估關鍵環節和舉證的評估策略，對于我國醫學科技工作的評估工作有著深遠的影響。值得說明的是，本文設計的醫學科技計劃框架是一個綜合評估框架，涉及不同的醫學科技計劃研究類型、不同的疾病領域、而且還包括預防、診斷、治療和康復等不同疾病治療階段。因此，如果采取指標評估方法，不同研究類型、不同疾病領域和不同研究階段研究成效衡量指標不同，指標設計繁多而復雜，難于統一和量化。所以按照國內外科技計劃評估的趨勢，本研究采取了淡化評估指標，突出評估關鍵問題和舉證的評估策略。而且，本文提出的政府醫學科技計劃績效評估體系，是基于整個國家醫學科技工作的戰略提出的，因此，在針對具體地方或領域醫學科技計劃進行績效評估時，應該根據具體的評估目的和具體計劃的戰略目標，有側重的在本研究構建的績效評估體系中選擇重點評估議題。

作者：白波 王艷芳 單位：北京城市系統工程研究中心