个部分。受访者可能只是在对问题的某个部分作出回答,但访谈员却可能将其理解为对整个问题的回答。你应在多个句子中分解这些概念,为受访者提供适当的思考框架。如“在参加 XYZ 计划时你对用于帮助你找工作的时间是否感到满意?”可改为“请回想一下你在参加 XYZ 计划时的培训体验,你对用于帮助你找工作的时间是否感到满意?”
同样,一个句子中还可能包含意思不明的混淆用语。问题应简明扼要。以下是一些减少句子混淆性的技巧:
● 尽量不使用从句引导词“that”(仅适用于英文)。 ● 使用简单明了的语言。如,“上述”可用“前面所说的”代替。
● 尽量避免使用被动语态。用代词(我、我们或者他们)和行为动词代替。如不要说“取得**是必要的”,而要说“我们需要***”。
2.双重问题。
双重问题是容易引起混淆的典型例子。如:你是否在参加计划时接受了技能培训并在完成培训后找到了一份工作?该问题试图确定技能培训和找到工作之间是否存在联系。但是当受访者回答“是”时,他们既有可能是对两个部分同时表示肯定,也有可能只是肯定其中一部分,即“接受过技能培训”或“找到了工作”。其他一些受访者可能觉得这个问题很乱,可能不会做出回答。你实际上提出了两个问题,但只给了一个回答问题的机会。受访者和访谈
— 21 —
员都可能认为只需要给一个回答。你应分别提出两个问题。
3.双重否定。
在编写问题时应避免使用双重否定,因为双重否问题很难回答。如,“请问下列哪些组织目标是你并不认为不能在两年内实现的?”应改为“你认为下列哪些目标是能够在两年内实现的?”
4.极端用语。
尽量避免使用“所有”、“完全没有”、“一切”、“从不”等代表极端含义的词语。包含此类用语的句子很少能表示真正的事实,使用极端用语将导致受访者避开程度选项中处于两端的选项。也有适合使用“所有”或者“完全没有”的情况,但比较少见。在是非题中,使用极端用语可能产生误导。如,如果有一个雇员没有医疗保险,那么当访谈员问“你们的所有雇员是否都有医疗保险?”时,受访者不可能回答“是”。其实更好的提问方法是“你们的雇员中有医疗保险的约占多大比例?”
5.定义术语。
应尽可能对问题中使用的关键词语和概念进行定义。如在谈到“雇员”时,可对雇员一词进行明确定义,说明所说的雇员是兼职还是全职?是永久性还是临时性?是白领还是蓝领?
6.问题中的偏向性。
如果一个问题容易使受访者给出不能反映其真实看法的回答,那么我们说这个问题具有偏向性。受访者可能会意识到这种偏向性,但也可能全然不知。在以下情况下将产生问题:
— 22 —
● 受访者没有意识到问题的偏向性,按问题的导向给出回答;
● 受访者意识到问题的偏向性,故意按与其意见相反的方向做出回答;
● 受访者意识到问题的偏向性,并以此为由拒绝做出回答。 偏向性出现在题干(或者陈述)部分,也可出现在回答选项部分。当问题中包含隐藏的答案时,或者答案选项不公平时,或者使用含义丰富的词语时,或者程度问题不平衡时,也可能出现偏向性。接下来我们将对这些问题进行讨论。
7.隐含答案的偏向性。
问题的措词可指出社会公认的答案。如“大部分审计署雇员都参加了美国储蓄债券计划,请问你参加了吗?”担心自己被视为脱离社会主流的受访者即使没有参加该计划也可能回答“是”。
该问题应改为“请问你是否参加了美国储蓄债券计划?” 问题的措词可能迫使有些人偏向于一种回答,使另一些人偏向于另一种回答。但两种受访者都可能完全没有意识到措词中的偏向性。此类偏向性通常出现在给问题添加了限定或者识别信息的情况。如“对于我们的首席经济学家Pat Brown 制定的计划和我们雇用的顾问Chris Green 制定的计划,你觉得哪个计划更好?”不了解这两个计划的受访者可能基于计划的制定者是组织内部人员还是外部人员做出判断,尽管这可能跟计划的质量没有什么必然联系。更好的提问方法是:“对于Pat Brown 和 Chris Green的计划,
— 23 —
你觉得哪个更好?”
8.不均衡选项产生的偏向性。
在确定答案选项时,各选项必须均衡。如果过度强调某个选项,那么受访者容易选择该选项。
9.特定词语产生的偏向性。
某些词语在各种上下文中都包含了丰富的情感内涵,因为它们会唤起强烈的情绪和感情,如“美国”、“自由”、“平等”、“正义”等一般会唤起正面情绪,而“共产主义分子”、“社会主义分子”、“官僚”、“核浩劫”则容易唤起负面情绪(从美国人的角度看)。由于此类词语的情感内涵很难控制,所以最好避免使用这些词语。
10.失衡产生的偏向性。
使用程度问题时,应避免题干和答案选项中出现偏向性。旨在衡量人们对某事满意度的问题应从两个方向上提供平衡的衡量选项。
(五)电话访谈工具需考虑的问题。
总的来说,上述原则也适用于电话访谈问题和答案选项的设计。但是,电话访谈还需考虑其他因素,尤其要考虑到面对面访谈中存在的某些提示在电话访谈中并不存在。在电话访谈中,访谈员无法观察受访者的反应(包括迷惑、不确定或者敌意的表情),并在访谈时进行相应的调整。
问题应尽量简短一些,将多项选择题分解为二元选择题,面对面进行一定的预测试,这样可以克服部分问题。
— 24 —
电话访谈的另一个不利之处是电话交流不易传递个人感情,访谈员在进行电话访谈时容易表现得过于热情。访谈员必须抑制这种倾向,始终意识到自己在阐述问题。在 QPL 系统中,有些词语大写、加下划线或者使用粗体,以帮助访谈员保持适当的语调并突出重点。
总而言之,设计一次结构化访谈并不容易,需要考虑很多因素和选项:需问的具体问题、问题的格式、语言顺序、版式等。
五、预测试和专家评审
预测试和专家评审可能是设计结构化访谈过程中最不受欢迎的一个环节。为了在规定时间内完成任务,员工们可能会问,“为什么不去掉预测试这个环节?”或者“我们需要外部人员对访谈表提意见吗?”
但是该环节可能是设计访谈过程中最重要的环节,这是一个不断利用评估员和技术专家输入导出最终产品的反复过程。正如Cannell 等人(1989)所说,当评估员对某个问题没什么经验或者受访者很难理解某个问题时,我们可能需要做大量的工作才能设计出可获得所需结果的问题。研究表明,问题的表述方式对结果的影响率高达 50%。预测试和专家评审程序向评估员提供反馈信息,帮助他们确定所做的努力是否会产生预期的效果。
在进行预测试和专家评审后,数据采集工具将根据需要进行重新设计(这是一个在每次或者每组预测试后都会进行的反复过程)。
— 25 —