为了评价国家和区域的创新能力,越来越多的国家和国际组织开始编制创新综合评价指标。然而,这些创新综合评价指标的有效性和准确性很少有人关注。张明倩著的《多指标综合评价质量的评估方法与实践》认为综合评价质量评估既是贯穿从概念基础到投入数据的质量再到构建技术稳健性的综合评价指标构建过程的动态评估,也是包括对综合评价结果的检验和综合评价指标重建的可行性进行考察的事后评估。《多指标综合评价质量的评估方法与实践/金融发展与开放研究丛书》尝试搭建一个涉及概念框架、构建技术、方法和实证检验在内的多指标综合评价质量评估框架,并对其进行应用与检验。
《多指标综合评价质量的评估方法与实践/金融发展与开放研究丛书》通过对国内外多指标综合评价方法与理论研究的梳理和评析,探寻影响多指标综合评价质量的核心环节,借鉴数据质量评估和测量评价理论的研究成果,对多指标综合评价构造的各个阶段按照质量评估框架进行整合,建立以多指标综合评价的理论框架、基础数据、指标结构、构建技术和评价结果为“节点”的质量评估框架。具体包括:多指标综合评价与其评价主题的概念一致性评估,评估综合评价体系能否完整地覆盖被评价主题;多指标综合评价结构和综合评价指标构建技术的稳健性评估,评估各个构建节点导致的综合评价结果的不确定性;多指标综合评价结果的有效性评估,即针对综合评价结果的:“解释能力”进行的质量评估。
多指标综合评价,作为一种统计方法被广泛地应用于各个领域,例如区域发展或城市发展的综合指数。然而,针对多指标综合评价的质疑也不绝于耳。“谁来评价排序者”的呼声越来越多地引起研究者的关注和思考,多指标综合评价自身的质量评估成为一个亟须解决的命题。目前,以多指标综合评价的质量评估为研究对象的文献主要是定性研究的成果,缺少针对多指标综合评价质量进行定量评估的系统性研究。为了使多指标综合评价质量的评估不再囿于仅对其理论框架和有效性进行定性讨论,并最终使多指标综合评价摆脱可信度和可行性的质疑,推进决策过程的透明化,提高科学决策的质量,本书对多指标综合评价质量的评估问题进行了专门研究的探索。
本书通过对国内外多指标综合评价方法与理论研究的梳理和评析,探寻影响多指标综合评价质量的核心环节,借鉴数据质量评估和测量评价理论的研究成果,对多指标综合评价构造的各个阶段按照质量评估框架进行整合,建立以多指标综合评价的理论框架、基础数据、指标结构、构建技术和评价结果为“节点”的质量评估框架。具体包括:多指标综合评价与其评价主题的概念一致性评估,评估综合评价体系能否完整地覆盖被评价主题;多指标综合评价结构和综合评价指标构建技术的稳健性评估,评估各个构建节点导致的综合评价结果的不确定性;多指标综合评价结果的有效性评估,即针对综合评价结果的“解释能力”进行的质量评估。
本书对多指标综合评价的质量评估既是贯穿从概念基础到投入数据的质量再到构建技术稳健性的综合评价指标构建过程的动态评估,也是包括对综合评价结果有效性进行检验和对综合评价指标重建可行性进行考察的事后评估。本书对于创新综合评价案例的评估实践表明,综合评价指标各个构建阶段的方法选择都需要利用统计分析技术进行定量评估。综合评价指标的构造者需要质量评估的结果来支持他们的构建决策,了解采取不同的构建技术对综合评价结果的影响。否则,指标的选择、指标的转换及其赋权与合并都将成为主观性的选择,导致综合评价结果的使用者面对大量低质量、无效的综合评价结果而无所适从。因此,作者进一步指出应该将综合评价指标的质量评估内化为综合评价指标构建的步骤之一,成为综合评价过程的必然环节,如果综合评价指标的构造者和使用者都能遵循这样一个环节,综合评价指标的质量将更加的公开。尽管一个成熟的质量评估标准尚不存在,但本书至少向这一标准迈出了坚实的一步。
张明倩教授在统计学、多元统计分析、统计模型实证分析等领域颇有研究基础,中国产业竞争力分析研究、创新指数,以及产业集聚统计模型分析的成果曾经多次获得教育部全国高校社会科学优秀成果奖、全国统计科研优秀成果奖。研究问题明确,分析推断细致严谨,特点鲜明。我相信这本专著研究,将对我国综合评价的应用研究产生重要的推动作用,从而保障决策及政策制定的科学性,增强统计在综合评价及分析中产生更大的直接经济效果或社会效果,服务社会,造福人民。
赵彦云
2017年5月23日于人民大学明德楼
收起全部↑
张明倩,上海外国语大学国际金融贸易学院教授,统计学博士。主要研究领域为宏观经济统计分析、科技创新统计、产业竞争力研究。已发表学术论文30余篇,已出版《创新综合评价指标的质量评估》、《中国产业集聚现象的统计模型及应用研究》等多部专著。参与并主持多项国家及省部级研究课题。曾荣获全国统计科学研究成果奖、北京市哲学社会科学成果奖和河北省哲学社会科学成果奖等省部级奖项。
丛书总序
序
第一章 绪论
第一节 研究意义
第二节 研究内容
第三节 评估对象及研究目标
第二章 综合评价构建框架质量的定性评估
第一节 概述
第二节 入选综合评价指标构建原则的评估
第三节 人选综合评价体系概念框架的比较评估
结论
第三章 综合评价基础指标及其构成结构的质量评估
第一节 概述
第二节 质量评估方法
第三节 综合评价指标的重构及描述性评估
第四节 综合评价内部结构的评估
结论
第四章 综合评价构建技术的质量评估
第一节 概述
第二节 评估对象
第三节 质量评估方法
第四节 综合评价构建技术质量评估结果
结论
第五章 综合评价结果有效性的质量评估
第一节 概述
第二节 评估方法
第三节 综合评价结果有效性的交叉验证
第四节 综合评价结果有效性的外部验证
结论
第六章 结论
第一节 概述
第二节 研究发现的总结
第三节 构造综合评价指标的一般规则
展望
参考文献