為了評價國家和區域的創新能力,越來越多的國家和國際組織開始編制創新綜合評價指標。然而,這些創新綜合評價指標的有效性和準確性很少有人關注。張明倩著的《多指標綜合評價質量的評估方法與實踐》認為綜合評價質量評估既是貫穿從概念基礎到投入數據的質量再到構建技術穩健性的綜合評價指標構建過程的動態評估,也是包括對綜合評價結果的檢驗和綜合評價指標重建的可行性進行考察的事后評估。《多指標綜合評價質量的評估方法與實踐/金融發展與開放研究叢書》嘗試搭建一個涉及概念框架、構建技術、方法和實證檢驗在內的多指標綜合評價質量評估框架,并對其進行應用與檢驗。
《多指標綜合評價質量的評估方法與實踐/金融發展與開放研究叢書》通過對國內外多指標綜合評價方法與理論研究的梳理和評析,探尋影響多指標綜合評價質量的核心環節,借鑒數據質量評估和測量評價理論的研究成果,對多指標綜合評價構造的各個階段按照質量評估框架進行整合,建立以多指標綜合評價的理論框架、基礎數據、指標結構、構建技術和評價結果為“節點”的質量評估框架。具體包括:多指標綜合評價與其評價主題的概念一致性評估,評估綜合評價體系能否完整地覆蓋被評價主題;多指標綜合評價結構和綜合評價指標構建技術的穩健性評估,評估各個構建節點導致的綜合評價結果的不確定性;多指標綜合評價結果的有效性評估,即針對綜合評價結果的:“解釋能力”進行的質量評估。
多指標綜合評價,作為一種統計方法被廣泛地應用于各個領域,例如區域發展或城市發展的綜合指數。然而,針對多指標綜合評價的質疑也不絕于耳。“誰來評價排序者”的呼聲越來越多地引起研究者的關注和思考,多指標綜合評價自身的質量評估成為一個亟須解決的命題。目前,以多指標綜合評價的質量評估為研究對象的文獻主要是定性研究的成果,缺少針對多指標綜合評價質量進行定量評估的系統性研究。為了使多指標綜合評價質量的評估不再囿于僅對其理論框架和有效性進行定性討論,并最終使多指標綜合評價擺脫可信度和可行性的質疑,推進決策過程的透明化,提高科學決策的質量,本書對多指標綜合評價質量的評估問題進行了專門研究的探索。
本書通過對國內外多指標綜合評價方法與理論研究的梳理和評析,探尋影響多指標綜合評價質量的核心環節,借鑒數據質量評估和測量評價理論的研究成果,對多指標綜合評價構造的各個階段按照質量評估框架進行整合,建立以多指標綜合評價的理論框架、基礎數據、指標結構、構建技術和評價結果為“節點”的質量評估框架。具體包括:多指標綜合評價與其評價主題的概念一致性評估,評估綜合評價體系能否完整地覆蓋被評價主題;多指標綜合評價結構和綜合評價指標構建技術的穩健性評估,評估各個構建節點導致的綜合評價結果的不確定性;多指標綜合評價結果的有效性評估,即針對綜合評價結果的“解釋能力”進行的質量評估。
本書對多指標綜合評價的質量評估既是貫穿從概念基礎到投入數據的質量再到構建技術穩健性的綜合評價指標構建過程的動態評估,也是包括對綜合評價結果有效性進行檢驗和對綜合評價指標重建可行性進行考察的事后評估。本書對于創新綜合評價案例的評估實踐表明,綜合評價指標各個構建階段的方法選擇都需要利用統計分析技術進行定量評估。綜合評價指標的構造者需要質量評估的結果來支持他們的構建決策,了解采取不同的構建技術對綜合評價結果的影響。否則,指標的選擇、指標的轉換及其賦權與合并都將成為主觀性的選擇,導致綜合評價結果的使用者面對大量低質量、無效的綜合評價結果而無所適從。因此,作者進一步指出應該將綜合評價指標的質量評估內化為綜合評價指標構建的步驟之一,成為綜合評價過程的必然環節,如果綜合評價指標的構造者和使用者都能遵循這樣一個環節,綜合評價指標的質量將更加的公開。盡管一個成熟的質量評估標準尚不存在,但本書至少向這一標準邁出了堅實的一步。
張明倩教授在統計學、多元統計分析、統計模型實證分析等領域頗有研究基礎,中國產業競爭力分析研究、創新指數,以及產業集聚統計模型分析的成果曾經多次獲得教育部全國高校社會科學優秀成果獎、全國統計科研優秀成果獎。研究問題明確,分析推斷細致嚴謹,特點鮮明。我相信這本專著研究,將對我國綜合評價的應用研究產生重要的推動作用,從而保障決策及政策制定的科學性,增強統計在綜合評價及分析中產生更大的直接經濟效果或社會效果,服務社會,造福人民。
趙彥云
2017年5月23日于人民大學明德樓
收起全部↑
張明倩,上海外國語大學國際金融貿易學院教授,統計學博士。主要研究領域為宏觀經濟統計分析、科技創新統計、產業競爭力研究。已發表學術論文30余篇,已出版《創新綜合評價指標的質量評估》、《中國產業集聚現象的統計模型及應用研究》等多部專著。參與并主持多項國家及省部級研究課題。曾榮獲全國統計科學研究成果獎、北京市哲學社會科學成果獎和河北省哲學社會科學成果獎等省部級獎項。
叢書總序
序
第一章 緒論
第一節 研究意義
第二節 研究內容
第三節 評估對象及研究目標
第二章 綜合評價構建框架質量的定性評估
第一節 概述
第二節 入選綜合評價指標構建原則的評估
第三節 人選綜合評價體系概念框架的比較評估
結論
第三章 綜合評價基礎指標及其構成結構的質量評估
第一節 概述
第二節 質量評估方法
第三節 綜合評價指標的重構及描述性評估
第四節 綜合評價內部結構的評估
結論
第四章 綜合評價構建技術的質量評估
第一節 概述
第二節 評估對象
第三節 質量評估方法
第四節 綜合評價構建技術質量評估結果
結論
第五章 綜合評價結果有效性的質量評估
第一節 概述
第二節 評估方法
第三節 綜合評價結果有效性的交叉驗證
第四節 綜合評價結果有效性的外部驗證
結論
第六章 結論
第一節 概述
第二節 研究發現的總結
第三節 構造綜合評價指標的一般規則
展望
參考文獻