案例研究可以作为一种比较研究的策略,用来比较采用某种方法或者操作形式所产生的结果和采用其他方法所产生的结果。为了避免偏差并确保内部有效性,必须为评估案例研究的结果建立一个稳定的基准。为此,Kitchenham等人提出了三种安排案例的方法[97]:
一种解决办法是把使用新方法所产生的结果与公司基线做比较。公司应从其常规项目中收集数据,并计算出诸如平均生产率和缺陷率等特征数据。这样才可能将案例研究的结果和公司的基线数据进行比较。
可以选择姊妹项目作为基线。被研究的项目采用新方法,而其姊妹项目使用已有方法。两个项目应具有相同的特征,也就是说,两个项目必须是可比较的。
如果某个方法要在个别产品组件上应用,那么它也应该可以被随机地运用到某些相关组件上。这一点与实验非常相似,但由于这个项目并不是从总体中随机抽取的,所以它并不是实验。