筛选系统发布后,贝西克收到了大量的问卷反馈。但他很快发现,第一版问卷存在诸多问题——题目设计不够精细,评分标准不够明确,导致大量不符合条件的人也通过了初筛。他决定,对问卷进行全面升级,推出预筛选问卷2.0版本。
一、1.0版本的问题诊断
贝西克花了整整两天时间,分析第一版问卷的反馈数据。
他在系统日志中写道:“第一版问卷发布后,共收到三百四十七份有效回复。经过初步筛选,只有十二人得分超过八十分,通过率仅为百分之三点五。但即使这十二人,在与她们进行文字交流后,我也发现了一些问题:
第一,社会赞许性偏差。很多人在填写问卷时,会选择‘正确答案’,而不是‘真实答案’。比如,在‘你对量化交易的理解程度’这道题上,百分之九十的人都选择了‘有一定了解’,但实际交流后发现,大部分人只是听说过这个名词。
第二,自我认知偏差。很多人对自己的认知,与实际情况存在较大偏差。比如,在‘你的情绪稳定性’这道题上,百分之八十的人都选择了‘比较稳定’,但在实际交流中,一些人会因为一点小事就情绪波动很大。
第三,答题动机不纯。一些人填写问卷,并不是因为想了解他,而是因为好奇、凑热闹,甚至是别有用心。比如,有一位填写者,在问卷的开放性题目中写道:‘我就是想看看,大名鼎鼎的贝西克到底会找什么样的女朋友。’”
基于这些问题,贝西克决定对问卷进行全面升级。
二、2.0版本的设计原则
贝西克为2.0版本设定了几个核心设计原则:
第一,去社会赞许性。 设计一些“陷阱题”,让填写者难以判断哪个是“正确答案”,从而迫使她们做出真实的选择。
第二,多维度交叉验证。 对同一个特质,从不同的角度进行提问,通过交叉验证来判断填写者回答的一致性。
第三,行为化测量。 减少抽象的主观评价题,增加具体的行为情境题。通过填写者对具体情境的反应,来判断她们的真实特质。
第四,反作弊机制。 增加一些检测填写者是否认真答题的机制,比如随机插入一些明显不合逻辑的选项,如果填写者选择了这些选项,说明她们没有认真答题。
三、2.0版本的具体设计
基于这些原则,贝西克重新设计了问卷。
第一部分:基本信息(10题)
本章未完,请点击"下一页"继续阅读! 第1页 / 共4页
