如何做正确的比较

有一个case，某个产品的销量下降了，大家在思考怎么把销量提上去，于是有人提出降低产品的售价。

产品售价降低了一个月后，销量相比降低之前的确有了明显的增长，那么是不是就能证明这个降低售价的举措真的有效呢？

这是一个非常迷惑的问题，直观上看如果前后的比较表明销量增长了，那么理应说明降低售价的策略是起作用的。

但是，考虑下医学生物学上做实验，其实采用的都是比较对照组的方法来比较。比如给一群小白鼠打针的同时，还有一组没有打过针的小白鼠作为对照组。这样这个比较是在同一个时间段内的比较，而不是前后不同时间段的比较。

从逻辑上讲，如果在前一段时间和后一段时间只有你改变的那个变量是变化的，那么比较不同的时间段是有意义的。但在现实世界中时间本身就会引起很多变量的变化。比如说销量低的月正好是产品的淡季而销量高的月正好是产品的旺季，或者销量提升只是因为生产这个产品的替代品的公司倒闭了。

我认为，在现实世界中根本无法证明在前一段时间和后一段时间只有你改变的那个变量是变化的。

还有，你观察到的结果只是降低售价后销量增长了，但是也有可能不降低售价，或者什么都不做，销量也会增长。但是因为你已经采取了降低售价的策略，所以多重宇宙已经分裂了，如果即使什么都不做，销量也会上升，那么这个可能的结果在你现在已经采取了降低售价的策略的情况下，在你所在的当前这个宇宙，已经无法观测到了。

所以，还是要采用对照组的做法才能同时观测2种不同的结果。对应到程序开发上，A/B test才是王道。