对于如何衡量智库调研质量问题,常文磊则认为,智库调研是一个动态过程,可以从调研的过程入手进行思考。“一是调研的目标。包括:目标制定是否合理;调研的价值设定是否科学;调研对象的选择是否恰当;调研目的的表述是否符合规范、遵循伦理道德。二是调研的操作技术。主要包括:问卷与访谈提纲的设计、编写是否合理;调研的目标群体选择是否准确、科学;调研的实施过程是否科学,程序是否规范;调研过程是否合乎伦理规范,是否严格保护了组织的秘密与个人的隐私;调研的问卷发放数量、回收率、访谈的成功比例是否适当;调研原始材料的编码、加工是否合乎规范,等等。叁是调研成果及其转化运用情况。主要包括:调研的目标达成度如何;调研报告的归纳、提炼、升华情况如何;调研对智库自身体制机制、文化、组织等方面建设的改进发挥的作用如何,例如是否物化为某些规章制度或者研究工作规范、条例;有关部门对智库调研成果的反馈、运用等情况;调研结论被相关部门的采纳情况;调研结论转化为政策、法律等情况。”
除了调研过程之外,姚洋认为,还可以从调研方式上考察调研质量。他指出,可以从功能角度将智库调研分为印证式、解读式与全面分析式叁种,叁者在智库评价系统中所占权重应该是不一样的。印证式调研,即为验证一个推论,专门去实地看一看,形成丰富的感性印象,以验证初始判断是否准确或在多大程度上接近事实。这种调研方式较为简单,所占权重不应太高。解读式调研,即运用案例分析的方法“解剖麻雀”,见微知着,追本溯源,归纳微观现象所反映出的宏观问题。这种调研所占权重应当高一些。全面分析式的调研,即利用信息技术手段,对大量调研数据进行全面的、科学的分析处理,对某一方面的战略性问题作系统的、透彻的研究。这种调研对智库软件和硬件的要求都很高,故应占最大权重。在采访即将结束时,姚洋告诉记者:“调研质量是评判智库优劣的试金石,但如何对调研质量进行合理的衡量,要在已有共识的基础上,进一步进行深入、细致的研究。”