2018年-世界发展银行全球_Impact_of_Phone_Reminders_on_Survey_Response_Rates___Evidence_from_a_Web-Based_Survey_in_an_International_Organization_12页_782kb

总结：电话提醒对网络调查响应率的影响

核心内容

本研究探讨了电话提醒在国际组织网络调查中对响应率的影响。研究以世界银行（World Bank）的专业员工为对象，通过随机对照实验评估了电话提醒的效果。结果显示，电话提醒显著提高了调查的响应率，具有较高的实际应用价值。

主要观点

• 电话提醒的有效性：电话提醒显著提高了调查响应率。在实验中，电话提醒组的响应率为54.03%，而对照组为34.17%，整体意向治疗（ITT）效应为19.86个百分点。
• 治疗-接受者效应（TOT）：由于治疗组中只有31%的受访者实际接受了电话提醒，因此治疗-接受者效应（TOT）更为显著，达到64个百分点。
• 提高响应率的潜力：如果能够提高电话提醒的接受率，响应率可以进一步提升，从而使得世界银行可以更多地采用抽样调查，减少调查负担。
• 调查背景与挑战：世界银行的调查响应率近年来呈下降趋势，且由于其全球分布、员工频繁出差以及频繁进行调查，存在调查疲劳的风险。

关键信息

调查设计与实施

• 调查对象：世界银行专业员工，共3,698人。
• 调查时间：2016年9月7日至2016年10月18日。
• 调查方式：网络调查，辅以电话提醒。
• 实验分组：248人被随机分配到治疗组，其余3,450人为对照组。
• 电话提醒策略：在调查进行期间，随机拨打部分样本，解释提醒目的、确认是否已填写调查，并在未填写的情况下提供重新发送链接的机会。

统计结果

• 控制组响应率：34.17%（1,179人）。
• 治疗组响应率：54.03%（134人）。
• ITT效应：19.86个百分点（p值=0.00001）。
• TOT效应：64个百分点，计算公式为 $ TOT = ITT \times \frac{N_{treatment}}{N_{compliers}} $。

提高治疗接受率的方法

• 增加电话提醒次数：提高电话提醒的频率可以提升接受率。
• 优化提醒时间：了解员工的出差情况，合理安排电话提醒时间。
• 放弃匿名性：如果提前知道员工是否已完成调查，可以更精准地进行电话提醒，从而提高接受率。

成本效益分析

• 电话提醒的成本为每人约$7.27，是成本效益较高的方式。
• 在实验中，55名被接触的受访者最终完成了调查，显示出电话提醒的高转化率。

外部有效性考量

• 调查主题与世界银行的公司目标相关，可能提高了员工的兴趣。
• 调查时间安排考虑了员工的可用性。
• 员工普遍对世界银行有较高的认同感和参与意愿，这些因素可能限制了结果在其他组织中的普遍适用性。

结论

电话提醒是一种有效的手段，可以显著提高网络调查的响应率。尽管存在低治疗接受率的问题，但通过优化提醒策略，可以进一步提升响应率。这一发现为世界银行及其他国际组织提供了重要的实证依据，支持其在调查设计中采用电话提醒策略，以应对调查疲劳和低响应率的挑战。