一类问题可通过设计数据采集工具的工作人员进行控制，第二类问题则只作为观察到的行为进行记录。
Cannell 等人的研究（1989）发现，各预测试访谈员在确认与问卷调查题相关的问题或者提供修改建议方面的意见并不一致。在没有对调查题和程序的质量实施控制措施的情况下，各访谈员的意见差别可高达 50%。当访谈员人数较多时，有两种方法非常有用，即对受访者行为进行分类和使用探讨性调查题。第一种方法用表格列出整个访谈过程中每个调查题出现上述各问题的频率。预计各调查题在一小部分访谈中会出现某种问题。但是如果某个调查师在很多访谈中都出现相同的问题，则说明该调查题需要进行修改。
第二种方法（使用探讨性调查题）可用于明确第一种方法所发现问题的性质。访谈中可加入特殊的探讨性问题，或者在访谈结束时提出，请受访者详细解释某个回答，说明他们如何理解相关调查题及其答案，或者说明他们所遇到的困难。探讨题分为三类：
● 一般性探讨题，请受访者就特定题目或者整个访谈提供更多信息；
● 回顾信息的探讨题，询问受访者是否记得回答提问所需的信息；
● 理解探讨题，请受访者谈谈他们如何理解特定的调查题或者短语。
（七）专家评审的目的。
由于没有任何工具是完美的，所以请外部专家对我们所使用
— 31 —
的方法进行评论通常非常有用。我们就使用结构化访谈的任务征求外部专家意见，以帮助我们确定：
● 所提的问题及提问的方式是否适合回答评估所提出的总体问题；
● 预定受访群体是否有回答这些问题所需的知识； ● 所开发的数据采集工具是否与当前的技术发展水平相当。 在很多情况下，评审专家由被审计机构的官员担任。在这一阶段征求相关机构意见可避免在花时间和资金完成数据采集后出现问题。此外，其他设计、方法和技术援助组人员、PEMD 工作人员或者具有相关领域知识或者评估经验的人员也可进行专家评审，尤其是向我们提供受访群体或者样本名单的相关协会专家。
进行专家评审的人员不能作为受访者。他们不回答问题，只提供评论。
（八）工具的重新设计。
评估员和衡量专家考虑预测试和专家评审结果，对数据采集工具进行适当的修改。如果改动较小，数据采集工具可以不必再进行预测试而直接投入使用；如果改动较大，则需要再进行一系列的预测试。
如果进行预测试的时间可以拉长，那么可以多测试几个数据采集工具版本，每个版本所用的受访者可以少一些。可以直接进行明显需要进行的修改，修改后的版本可以用于下一次预测试。这使我们在每轮预测试时可以使用一个相对较完善的版本。
— 32 —
六、培训访谈员
在多数情况下，美国审计署的结构化访谈由自己的评估员进行，但有时我们也会使用其他机构或者承包商的员工。无论哪种情况，访谈员都必须进行与评估目的和访谈程序相关的培训。
（一）培训方法。
美国审计署利用各种途径培训其访谈员，帮助他们在整个数据采集过程中保持良好的技能，这些培训途径包括：召开动员会议，发放访谈手册，进行角色模拟、实地练习、现场视察及电话联系。除了以下讨论的各项外，访谈员培训还应重视第八部分所说的访谈技巧，尤其应注意结构化访谈技巧、探讨技巧及巩固方法。下面也会谈到这些问题。
（二）动员会议。
无论项目规模如何，美国审计署通常都会召开项目动员会，向各地区及其他部门的员工明确评估目的，进行分工，并回答与会人员的提问。当一个项目的数据采集阶段包括结构化访谈时，该会议通常会延长，以便向访谈员详细说明数据采集工具的用法。最好所有潜在的访谈员都能参加该会议。
如果一个地区只派对一名代表参加动员会，那么该代表应为参与该研究并进行访谈的人员。访谈手册（在下一部分进行讨论）中并不能包括培训的所有方面；所以除了衡量专家外，参加实践课程的还应包括将实地进行访谈的人员和可能对该地区其他人员进行访谈培训的人员。
— 33 —
培训首先由评估员主管和衡量专家回顾研究目的，分析如何将访谈数据纳入总目标。然后通过访谈手册详细介绍数据采集程序。培训师对访谈表的题目进行逐个讨论，包括数据需求，受访者不能理解时可使用的其他措词，如何记录受访者的回答及可能出现的其他情况。受训者可以提问，讨论细节，找出数据采集工具中的排字错误，并根据自己的经验提出修改建议。即使到了召开动员会的阶段，我们仍可对数据采集工具进行修改，以免相关问题被带入实际访谈过程。
培训师努力解决的潜在问题通常包括确认访谈员：
● 知道对各题目来说什么样的回答是有效的。如果访谈员不知道这一点，那么他们可能会接受无效的回答。设计结构化访谈的目的是通过答案选项向访谈员说明哪些回答是有效的，哪些回答是无效的。要掌握这一点，访谈员必须理解数据采集工具。
● 正确地提问。需提出的问题已打印在纸上；访谈员的任务是严格按数据采集工具上提供的文本进行表述，确保题目含义和表述方式的统一，以排除偏向性。即使数据采集工具进行了预测试，某些受访者仍可能难以理解某些措词。访谈员必须充分了解各题目，当访谈员只能通过改变措词向受访者进行解释时，访谈员所使用的措词不应偏离题目的原义。
● 不要跳过他们认为已通过其他问题得到回答的问题。除非使用说明要求跳过某个题目或者受访者拒绝回答，否则应让受访者回答所有问题（拒绝回答可视为一种回答）。即使受访者在某个问
— 34 —
题提出之前已经对该问题做出了回答，访谈员仍应按正常程序提出该问题，或者陈述该问题并请受访者确认其前面的回答。
● 在提问时不要引入偏向性。 （三）访谈手册。
如果访谈题目数量不多，也不是很难或者很复杂，且进行访谈的工作人员参与了数据采集工具的开发过程，那么我们将只通过动员会向访谈员详细说明如何处理各题目。
但是，如果访谈活动规模较大，那么审计署项目组成员可准备一份详细介绍数据采集工具中各题目的访谈手册。（该手册类似于人口调查局向人口调查员发放的手册）。一般情况下，审计署的手册不仅包括访谈题目，还包括抽样程序、联系受访者及编码程序等其他事项。下面我们将进行详细讨论。
（四）抽样程序。
对于需要使用统计抽样程序选择受访者的情况，该手册将向访谈员说明如何确定抽样范围及选择样本。该手册在必要时可包括一个随机数字表，并说明简单的随机抽样和更复杂的两阶段程序。
（五）联系受访者的程序。
手册提供了联系潜在受访者的规则，规定了在受访者拒绝或者找不到受访者时如何进行处理，提供了通过电话安排访谈的例子，还规定访谈员必须通过日志记录所有访谈联系情况，以确保抽样合理。日志使我们稍后能对抽样范围进行调整，并分析不作回答可能产生的影响。对于计算机辅助电话访谈，很多联系和记录程序
— 35 —