统计调查表测试工作规程.docx

《统计调查表测试工作规程.docx》由会员分享，可在线阅读，更多相关《统计调查表测试工作规程.docx（12页珍藏版）》请在优知文库上搜索。

1、统计调查表测试工作规程（试行）为了规范、高效地开展统计调查表测试工作，使统计调查表设计更加科学合理，更加切合基层实际，便于调查对象理解填报，切实减轻调查对象负担，保障源头数据质量，特制定本规程。一、适用范围本规程适用于国家统计调查项目统计调查表（含问卷，下同），的测试。各地方、各部门可参照本规程开展地方统计调查项目、部门统计调查项目统计调查表测试工作“二、工作目的和要求统计调查表测试是通过组织一定数量的基层统计人员、调查员或调查对象对统计调查表进行试填，并综合运用多种方法分析试填效果、评估调查表的可行性，为改进和优化调查表设计提供依据开展统计调查表测试工作应依法依规、科学规范、实事求是。新建或

2、重大修订的普查、常规调查、专项调杳在正式实施前原则上要进行统计调查表测试。对已实施的统计调查项目，需根据实际情况开展测试工作。开展测衣工作严格按照测试工作方案组织实施。测试报告应作为审核论证统计调查项目的重要依据。测试报告必须完整记录测试全过程，准确说明试填人员的反馈信息及相关数据，客观反映专家的意见和建议。二、职责分工统计设计管理部门负责根据项目单位申请统一组织实施测试工作,并将测试结果反馈项目单位督促其修改落实。项目单位协助统计设计管理部门共同开展测试工作。按规定提出测试项目申请，安排本单位人员和试填人员参加测试工作，根据测试报告改进和优化调查表设计四、测试对象和内容测试对象是指统计调查项

3、目中的调查表或调查表内部分内容，包括网络调查、电话调查、面访调查等方式开展的纸介质和电子调查表。测试内容主要包括指标或问题设置、统计分类标准应用、调查表整体设计，以及电子调查表的软件功能等。具体应符合以下要求：（一）指标名称准确清晰、易于理解，指标解释、填报说明简洁明了、方便查阅；（二）问题的表述准确清晰、易于理解，开放式问题意图指向单一，封闭式问题选项设置完整、互斥、易于选择，尽可能降低问题的敏感度，敏感问题的选项尽量采用区间设计；（三）指标计算方法简单易行，计量单位选用规范合理，基础资料易于获得、方便核查；（四）统计分类标准必须符合国家标准和统计上执行的部门标准；（五）调查表版面设计合理、

4、方便填报，指标或问题的数量和填报用时适中，编排顺序逻辑合理、符合实际；（六）电子调查的软件性能稳定、功能完善、界面友好、操作方便。五、测试人员（一）测试人员包括工作人员、专家和试填人员。工作人员主要负责测试工作的组织安排、数据处理、设备维护和技术支持。专家主要负责调查表模拟填报过程的观察、记录和分析,提出评价修改意见,撰写测试报告.试填人员按要求模拟填报调查表并回应专家提间。（二）测试人员的具体要求：1工作人员原则上由统计设计管理部门、项目单位和数据管理部门相关业务技术人员组成；2 .专家一般从政府统计系统、科研机构、高等院校和基层单位聘请；3 .试填人员应根据拟采用的测试方法和调查表的类别，

5、确定相应的基层统计人员、调查员或调查对象。六、测试方法统计调查表测试方法分为定性和定量两种。定性测试方法主要包括预测试、专家审查、行为观察、视线追踪、认知性访谈、事后评价等;定量测试方法主要包括行为编码、分类实验、试点评估等.（一）定性测试方法.1 .预测试法。在调查表设计过程中，设计者自己试填或请同事试填，获取调查表改进信息。2 .专家审查法。由专家对调查表进行评估，查找调查表设计缺陷，提出修改建议。3 .行为观察法。通过观察试填人员在调查表模拟填报过程中的表情和行为，分析调查表设计可能存在的问题。4 .视线追踪法。利用网络摄像机和眼动仪等测试专用设备，观察并记录试填人员的眼球运动轨迹，通过

6、注视点热度图、兴趣区域分布等相关数据分析评估调查表5 .认知性访谈法。与试填人员进行面对面交流，了解其模拟填报的认知过程，查明模拟填报过程中出现问题的具体原因。6 .事后评价法。通过一对一访谈或小组讨论，结合填写评价表的方式，由专家与试填人员分别对调查表进行评价。（二）定量测试方法.1行为编码法。对试填人员在调杳表模拟填报过程中的行为进行系统性分类和编码，获得针对每个指标或问题的各种反应的频次，用以评估调查表设计质量。2 .分类实验法。对同样调查内容设计不同版本的调查表和调查指标，或采用不同的数据采集方式，分别组织测试，收集有关数据质量、回答率、差错率和调查成本等方面的信息，进行比较分析，为调

7、查表版本或数据采集方式的选择提供依据。3 .试点评估法。依据大型试点调查无回答率、差错率、异常值及其分布等情况，评估调查表设计质量。七、工作流程统计调查表测试工作流程主要包括申请、制定方案、测试和总结等4个环节，23个节点。（一）申请环节。本环节包括内部测试、提出申请、审核批复3个节点。1内部测试。对于需要测试的项目，项目单位应先采用预测试法，对调查表进行测试。2 .提出申请。项目单位向统计设计管理部门提交测试项目申请。申请时间要求：（1）普查表式测试一般应在正式布置前1年提出申请；（2）常规调查表式测试一般应结合制度修订时间安排，在正式布置前3个月提出申请；专项调查表式测试一般应在正式布置前

8、2个月提出申请。申请材料主要包括：（1）测试项目申请表；（2）进行测试的统计调查制度；（3）其他相关材料，如内部测试情况说明等。3 .审核批复。对项目单位提交的申请及相关材料进行审核，提出是否测试的批复意见。.（二）制定方案环节。本环节包括确定测试财象、选择组织方式、选取测试方法、制定工作用表、确定测试时间、安排测试人员、准备测成环境、经费预算等8个节点。1 .确定测试对象。新建或重大修订统计调查项目中新增调查表和变更指标；已实施统计调查项目中基层统计机构或调查对象意见较为集中的调查表和指标。2 .选择组织方式。测试的组织方式主要包括实验室测试、实地调查和集中座谈三种方式。其中实验室测试和实地

9、调查须进行调查表现场模拟填报。3 .选取测试方法。根据测试项目要求和组织方式选择适当的测试方法。(1)实验室测试可选取行为观察、视线追踪、认知性访谈、事后评价、行为编码等方法；实地调查可选取行为观察、认知性访谈、事后评价等方法；集中座谈可选取专家审查、事后评价等方法。4 .制定工作用表。测试工作用表包括：填报情况记录表，用于观察记录试填人员模拟填报过程；试填人员评价表，用于收集试填人员对调查表的意见建议；专家评价表，用于收集专家对调查表的意见建议。5 .确定测试时间。根据测试项目申请情况，合理安排工作时间，包括准备、测试和总结时间。普查的测试工作时间一般应为2至4个月；(2)常规调查的测试工作

10、时间一般应为4至8周；专项调查的测试工作时间一般应为2至4周.6 .安排测试人员。根据测试调查表内容明确测试人员选取要求及人数。工作人员不得少于3人，并应经过相关培训；(2)专家人数根据组织实施方式确定。实验室测试，至少邀请2名专家;实地调查，每个(组)试填人员至少配备1名专家;集中座谈，至少邀请2名专家；试填人员人数根据调查表数量确定，应保证每张调查表有15/至20人参加测则试。7 .准备测试环境。根据测试方式、方法确定测试地点，搭建测试工作环境，明确需使用的具体设备及技术支持。8 .经费预算。预估测试工作费用，包括测试人员报酬、测试专用设备耗材等费用。(三)测试环节。本环节包括通知人员、测

11、试介绍、观察记录填报过程、认知性访谈、试填人员评价、专家评价等6个节点。1 .通知人员。在测试实施前，应向试填人员发出正式通知，告知以下内容：测试目的；(2)测试内容；测试时间和地点；需准备的资料；采用集中座谈方式，应提前发放调查表，请试填人员试填或专家审查。2 .测试介绍。在正式测试开始前，应介绍测试相关情况，采集影音资料应事先告知并征得试填人员同意。介绍内容主要包括：(1)测试工作目的、方法和流程安排；(2)实验室测试和实地调查，应说明模拟填报与正式调查的区别；实验室测试，应说明测试专用设备的使用方法及注意事项。3 .观察记录填报过程。实验室测试和实地调查，须观察和记录试填人员的模拟填报过

12、程。模拟填报包括试填人员自主填报和通过，访问完成填报两种方式。模拟填报过程中，不得干预试填人员。观察和记录的主要内容包括：调查表模拟填报起止时间；(2)试填人员模拟填报过程中的面部表情、手势、言语评论、长时间停顿、求助等；通过访问完成填报过程中的问答情况；使用视线追踪法，应观察记录视线追踪的相关数据，包括试填人员的注视位置、眼动轨迹等；实验室测试，应利用测试专用设备完整记录测试过程。4 .认知性访谈。结合观察记录，进一步了解试填人员模拟填报的认知过程。认知性访谈主要包括一对一访谈和小组讨论两种形式。一对一访谈一般不超过45分钟，应在相对独立的场所进行。小组讨论应根据模拟填报情况，事先确定讨论的

13、主题，并选取一位专家作为主持人。讨论过程中应安排专人作好记录。每次讨论一般有6至10名试填人员参与，不超过1个半小时.采用试填人员自主填报方式应侧重了解：填报过程中出现异常行为的原因；(2)填报过程中出现错填漏填的原因；对调查表的整体评价和意见建议；(4)测试专用设备所记录问题的产生原因。采用通过访问完成填报方式应侧重了解：访问过程中出现异常行为的原因；调查员不按规定提问的原因：对调查表的整体评价和意见建议。5试填人员评价。通过小组讨论和填写评价表的方式了解试填人员对调查表的反馈信息。实验室测试或实地调查，可与认知性访谈环节合并开展试填人员评价集中座谈，请试填人员结合事先试填报调查表的情况，针

14、对测试内容寸调查表进行评价6.专家评价.通过小组讨论和填写评价表的方式了解专家对调查表的反馈信息.实验室测试或实地调查，应在试填人员评价后开展专家评价.评价应重点探讨观察记录、认知性访谈、试填人员评价等节点中反映的问题。集中座谈，应结合调查表审查情况，围绕测试内容对调查表进行评价(四)总结环节。本环节包括汇总测试信息、分析评估、提出改进建议、形成专题报告、反馈项目单位、跟踪结果运用等6个节点。1 .汇总测试信息。测试结束后，应归集汇总测试各类信息，主要包据(1)试填人员数和基本情况；(2)调查表模拟填报用时；模拟填报观察记录情况；视线追踪相关数据；认知性访谈反馈信息；试填人员评价结果；专家评价

15、结果。2 .分析评估。依据测试基本情况和评价结果，讨论分析测试过程中发现的问题，综合评估调查表。3 .提出改进建议。针对发现的问题，提出改进和优化调查表设计的具体建议。4 .形成专题报告。综合测试情况，撰写专门的统计调查表测试报告。测试报告应围绕以下几个方面撰写：(1)组织实施情况；(2)测试汇总结果；问题及原因分析；改进意见建议。5 .反馈项目单位。测试报告完成后，须反馈项目单位，为优化调查表设计提供参考。对于需多轮测试的项目，在每轮测试结束后，应先将改进建议反馈项目单位，待全部测试结束后，再反馈测版报告。6 .跟踪结果运用。及时跟踪测试报告的运用情况，掌握改进建议的落实情况。八、工作保障（一）统计调查表测试工作是一项重要的常规性工作，统计设计管理部门应配备专职人员，相关职能部门和项目单位根据需要安排专业技术人员参与测试工作。（二）为保证测试工作的正常进行，相关部门应提供或安排测试实验室、会议室等专门的测试场所，配备视线追踪设备、影音采集设备等测试专用设备。（三）开展测试工作要有相应的经费保证，财务部门应根据测试工作计划安排常规经费预算,妥善解决测试人员的差旅费、交通费、误工补贴