复盘翻出来的结论凭什么说它站得住
复盘翻出来的结论之所以听起来都有道理,是因为它们大多符合事后看事情的方式。事情已经发生了,往回梳理总能找到一条因果线索,这条线索读起来通顺,通顺到让人以为它就是当时真正起作用的那条,实际上它可能只是最容易讲出口的那一条。
一条结论要站得住,最低的一个条件是它事先说得出口。如果这个判断是在结果出来之后才形成的,那它顶多是对已发生事情的一种解释,不能拿来预测下一次,因为它没有承担任何风险,说对了没有代价,说错了也没有代价。
第二个条件是它能被否掉。一条无论发生什么都能自圆其说的结论,其实什么也没说。真正站得住的结论一定带着一个可能被推翻的样子,你能提前说出在什么情况下它就不成立,说出这一条,它才算有了可以被检验的资格。
第三个条件是它在时间上先于结果。判断在动作之前定下来,结果出来之后再看这个判断对不对,这样得到的对照才有意义。反过来先看结果再去找理由,等于每次都能找到理由,找到最后手上攒了一堆理由却没有一条能用的。
第四个条件是这个结论背后的依据能被别人复述。如果你自己都说不清它是从哪几个数推出来的,那它就还不是一条结论,只是一种印象。印象在熟悉的环境里常常管用,一旦情况变化或者要交出去,它就立刻失去作用。
还有一个容易被跳过的条件:结论要对得上它自己声称的范围。很多结论听起来是通用规律,实际只在某一个类目、某一个价位段成立,超出范围使用就会失灵。把范围说清楚,这条结论的可信度反而会上升,而不是下降。
从复盘的实际过程看,能站住的结论往往长得比较朴素。它们通常不涉及宏大的因果,只说明在什么条件下做什么样的调整会得到什么样的方向变化,这种朴素的说法容易被忽略,却恰恰是唯一能被反复检验的那种。
反过来,最容易被当成结论的往往是那些带有强烈因果感的句子,比如因为做了某件事所以结果变好了。这类句子缺了一个关键部分,就是如果没有做这件事,结果会是什么样,缺了这个对照,句子里的因果就是加上的,不是读出来的。
复盘时人们常把动作和结果在同一段时间里的同时出现当成因果。实际上同一段时间里同时发生的事很多,其中任何一件都有可能是主因,也可能都是次要的,仅凭同时出现就下因果结论,得到的判断几乎不可能在下一轮再对上一次。
一条结论的强度还取决于它的来源是几轮。只在一轮里出现过的规律,无论看着多漂亮,都只能算一个候选;在两轮里都出现过的,可信度高一些;在三轮里反复出现的,才有资格被当成做法的一部分固定下来。
有些结论在数据上完全成立,却在业务上毫无意义,比如某项指标和结果的相关性很高但两者之间没有任何可操作的关联。这类结论虽然站得住,却用不上,判断的时候除了问它成不成立,还要问一句这条结论能不能转成动作。
一条结论的可靠程度也取决于它当初是怎么得出来的。从干净对照里得出来的结论和从混杂环境里勉强读出来的结论,强度完全不同,前者可以拿去用,后者最好只当方向,这一点在复盘记录里应该被明确区分开。
知虾公开页面的竞品监控一栏能按站点把对手的价格变动摆出来看,同一段时间里外部是不是也在动、动得多大,对着这一栏比一遍就能大致判断,数据按日更新到前一交易日,这个动作能帮结论排掉一部分明显的外部干扰。
还需要注意结论的表述方式。带着具体数字的结论看起来最精确,但它的可用范围也最窄;带着方向性描述的结论看起来模糊,反而更容易在下一轮继续成立。用哪种表述,取决于你打算把它当定论还是当方向来用。
最后一个条件其实最实在:这条结论在下一次动作之前能不能先被写下来。写下来才有办法在结果出来之后核对,核对了才知道它到底算不算数。不写下来的结论,第二轮回头再看时,往往已经被记忆悄悄改过一遍了。
把这些条件放在一起看,会发现能站住的结论比想象中少。这不是坏消息,因为排掉那些站不住的,手上剩下的那几条才真的能在下一次动作之前给你一点底气,而不是让你在下一次事后还能找到理由。

五个关口里,真正能把做法和时点分开的只有拿掉某一项之后的那一次比对
一次对上了,不能就算这套复盘管用
一次对上了,最容易产生的错觉是这套复盘终于找到了。人在连续几次不大顺之后,碰到一次顺的,会本能地把这次当成方法生效的证据,而忘了在这一轮里同时存在很多别的可能,即使是外部环境刚好转暖也足以造成同样的结果。
一次对上至少有四种解释。第一种是做法确实起作用了,第二种是外部环境刚好有利,第三种是自己这段时期的执行比平时认真,第四种纯粹是波动落到了好的那一侧。四种解释里,只有第一种说明这套复盘值得继续用。
要分清这四种解释,单靠一次结果不可能做到,因为它们在这一轮里产生的是同一个现象。能被区分的前提是至少有两轮不同处境下的对照,一轮在外部有利时,一轮在外部平稳时,两轮的结果放在一起才有一点分辨力。
很多人以为只要把这一轮的数据拆得足够细,就能从里面读出归因。事实是在同一轮里拆得越细,能讲出来的故事越多,反而越容易挑出那个最符合预期的解释,这个过程不叫归因,叫为已有的结论找材料。
还有一种情况是结果对上但过程不对。动作做得跟设想的不一样,结果却和预期差不多,这时候如果只看结果,会以为做法被验证了,其实只是这一轮的运气补上了执行上的漏洞,下一轮把漏洞暴露出来时,同一个做法就会突然失效。
判断一次对上有没有分量,可以看它对不对得上一个事先的预期。如果事前说了做这项动作量会往上走一档,事后确实走了一档,这一次对上就有分量;如果事前什么也没说,事后才总结出应该往上走,这一次对上就没有分量。
也要看这一轮的量级有没有超出正常波动的范围。很多时候单量本身每天都在起伏,一天上下两三成都不稀奇,如果这次的变化还在这个范围之内,那么它什么都说明不了,只能说明这一天恰好落在了波动曲线偏上的位置。
一次对上之后最容易犯的错是把做法固定下来。固定下来之后再遇到不灵的时候,人不会回去怀疑做法,而会去解释这一次为什么特殊,于是同一个做法在一次次的特殊解释里被保护起来,永远得不到检验,也永远不知道它到底有没有用。
反过来,一次对不上也不该立刻推翻做法。外部环境变差、执行走样、样本太小都可能让一次对不上,和做法本身无关。一次对不上只能算一个提示,提示这一条结论需要更小心地看,而不是直接判它无效。
想让一次对上变得有说服力,可以在这一轮之前就把预期写下来,写清楚这项动作预期会带来什么方向的变化、大概多大。有了这个前提,结果出来之后的对比才是一次真正的检验,而不是一次事后叙述。
还有一种更严格的做法是主动制造一次可控的对照,比如在条件接近的两个地方一个做动作一个不做,看两边的差。这类对照成本不低,所以只值得用在那些影响面特别大的判断上,不是每一条结论都配得上这个待遇。
一次对上之所以让人信服,还有一个心理上的原因:人天生偏爱那些能讲通的故事,而且一旦讲了通,就不愿意再花力气去检查它。这个偏好是复盘中最大的隐性成本,它会让人把每一次对上都当成一次验证,一次次攒下其实没有被验证过的结论。
如果一定要用一次结果说话,至少要把这一轮的外部处境同时记下来。外部处在什么位置、同行整体在往哪个方向走、这段时间有没有平台层面的大变化,这三条记下来之后,再看这一轮的结果,能排除掉一部分明显的外部原因。
一次对上真正能提供的只有一件事:这个做法值得再试一次。把它当成一个继续观察的理由是合理的,把它当成一个可以固定下来的结论就过头了,两者之间差的不是态度,而是后面要不要继续花成本去核对。
从这个角度看,一次对上更像是一扇门而不是一个终点。它让你有理由往下走,但门后面的路还要靠后面几轮来铺,如果后面几轮都对上,这一次的价值才真正被兑现;如果后面几轮对不上,这一次也只是一次好运气。
所以一次对上不能算这套复盘管用,最多只能算它还没有被排除。这个位置听起来不够痛快,却是唯一诚实的位置,接受它,后面的每一轮才有意义,不接受它,复盘就会变成一场反复的自我确认。

越靠上的结论能被归到做法上的部分越多,越靠下的越只能算当时的处境
要几个来回才能把偶然剔出去
几个来回才算数,这个问题没有一个固定的数,但有一个可以把握的标准:要看到那部分对不上的项数在收窄。头一轮对上的可能只占少数,往后几轮对上的一项项增加,剩下的对不上的越来越少,这个收窄的过程才是判断的依据。
之所以不能只看对上的项数增加,是因为随着轮次增加,你能记住的信息也在增加,事后解释的能力会变强,看起来对上的项数自然变多。要防止这种虚高的增长,就要同时统计那些事先没有预料到、事后也解释不了的项,看这部分有没有变少。
最少的两轮才有分辨力,因为两轮之间的差别才构成对照。一轮好一轮差,如果能找到这两轮的处境差别,并且这个差别能解释结果的不同,那么这一对就提供了一个可用的假设,这个假设再去第三轮里检验,就构成了一个完整的循环。
三轮通常能看出一个稳定的方向。第一轮给出猜测,第二轮给出对照,第三轮看这个说法在新处境下还成不成立,走到第三步,一条说法要么被固定下来,要么被降级,很少还会继续悬着,因为三轮的处境差不多已经把常见的可能都覆盖过一遍了。
轮数之外的另一个维度是处境覆盖得够不够。三轮都是同样的外部环境,那三轮的价值接近于一轮,因为它们没有提供新的信息。反过来,两轮分别处在完全不同的处境下,它们能提供的信息量可能已经接近三轮同处境的价值。
还有一层和样本量有关。同一个做法在一批货上试和在几十批货上试,需要的轮数不一样。前者可能一轮就能看出方向,因为每一批货本身的波动不至于把方向淹没;后者往往需要多轮,因为批量大了之后每一轮内部就自带很多噪声。
时间跨度也是一个变量。有的做法效果当天就能看出来,那么三轮可以在很短的时间里跑完;有的做法要一个完整的季节才能看出结果,那三轮就是三年。所以几轮才算数这件事,必须先确定一轮有多长,否则数轮数是空的。
一个实用的判断方法是设定一个停下来的条件。比如连续三轮对上且对不上的项没有增加,就把这条结论固定下来;如果中途出现了一轮明显对不上,就退回第二轮重新看。先把条件定下来,比事后凭感觉判断要不要继续要可靠得多。
多少轮之后该停,也要考虑到结论本身的用途。如果这条结论只用来指导一次小调整,那么一轮的提示已经够用;如果这条结论要被写成一条长期沿用的规则,那就必须经过足够多的轮次和足够多样的处境,两种用途对应的门槛差得很远。
还有一种情况是无论多少轮都无法分辨,因为外部环境在这段时间里一直在剧烈变化,每一轮的处境都不一样,任何两轮之间都不构成可比的对照。这种情况下继续增加轮数也不会提升分辨力,应该做的是换一种更可控的方式来核对,或者干脆先不下结论。
轮次之间最好保持动作的一致。如果每一轮都在改动作,那么后面几轮其实是在检验不同的东西,轮数虽然增加了,但对同一条结论的检验并没有增加,这种情况下的多轮看起来热闹,实际提供的证据和一轮差不多。
记录的方式也影响轮数的有效性。如果每一轮只记结果不记当时的处境和预期,那么回头再看时只能凭印象对比,印象会不自觉地向结论靠拢,几轮下来,记录反而成了对结论的强化,而不是对它的检验。
一个经常被忽略的细节是,要把对不上的那几轮记得更详细一些。对上的一轮人们愿意复盘,对不上的一轮往往被草草记为条件特殊,而恰恰是这些对不上的轮次里包含最多的信息,它们决定了这条结论的边界究竟在哪里。
如果几轮下来对上的比例并没有提升,那就说明这条结论可能本来就不成立,或者它成立的条件比原先设想的要窄得多。这两种情况都需要被区分开,前一种应该放弃这条结论,后一种应该把范围收窄之后再继续试。
几轮才算数还有一层现实约束:轮数越多,成本越高,而结论的时效也在流失。有些判断拖上几轮之后就算被确认了也已经过期,这时候要接受一个事实,有些结论注定只能以线索的形式存在,不可能被完整验证。
把这几层放在一起看,可以得出一个比较稳的答案:最少两轮构成对照,三轮能看出方向,但前提是这几轮的处境确实不同、动作保持一致、记录里带着当时的预期,缺了哪一条,轮数再多也很难把偶然剔除掉。
| 结论的来源 | 事前有预期吗 | 有几轮对照 | 现在算不算数 | |||
|---|---|---|---|---|---|---|
| 动 | 作 | 前 | 的 | 预 | 判 | |
| 有 | ||||||
| 三 | 轮 | 且 | 处 | 境 | 不 | 同 |
| 算 |
回头看的时候凭什么区分复盘管用和时点好
回头看的时候,复盘管用和时点好这两件事长得很像。两者都会表现为结果变好,也都能被讲成一条因果。区别在时间上:前者在动作之前就有一个预期,后者是在结果出现之后才被追溯出来的说法,而追溯总是能成功。
区分这两件事的一个办法是看时间。在动作之前,如果你已经写下了预期会变的方向和幅度,事后结果与之相符,那么这次更可能是做法在起作用;如果事前没有预期,事后才总结出应当如何,那么这次更可能是时点好。
另一个办法是看外部同时发生了什么。在结果变好的那段时间里,如果整体大盘也在往上走,同行整体都在变好,那么自己的结果变好就缺少了独立的信息量;只有当自己的变化明显偏离大盘的时候,才有一点归给自己的余地。
还有一个办法是看变化的形状。做法起作用时,变化通常出现在动作覆盖到的那一部分上,其他部分大体不动;时点好带来的变化则是全面的,所有项都往上抬,无论有没有做过动作。看变化分布在哪儿,比看变化有多大更能说明问题。
从结果往回找原因的时候,人会自动挑选支持自己偏好的那条路径。同一批数据里常见好几条都能解释的路径,选择哪一条完全取决于希望得到什么答案。要减少这种倾向,可以让一个不参与当初动作的人先看数据再说结论,他的说法往往更接近数据本身。
复盘管用还有一个特征,它解释得比较省。一条做法能解释的部分通常是有边界的,超出这个边界的部分它说不清;而时点好这件事可以解释一切,无论是哪一项变好都能用那阵风来解释,解释力太强的说法往往是空的说法。
时点好这种情况还有一层麻烦,它留下的记忆特别深。人在顺的时候容易记住自己做了什么,不顺的时候容易记住外界不好,于是回顾时自然会把自己的动作记成主因。要抵消这种偏差,唯一可靠的办法还是事前留下记录。
有些情况下两件事确实纠缠在一起,分不开。比如在外部上升期做了一次有效调整,动作和时机各贡献了多少,从数据里读不出来。这时候较好的处理是承认分不开,然后按保守的方式记录:把这次的结果算作时机为主,动作只记为一次可能的加分项。
按保守方式处理看起来吃了亏,实际上省下了后面更大的代价。把时机误判成做法,会让一套本来没什么用的做法被固定下来,接下来几轮都会照着它做,直到某一次外部环境变差,它的无效才暴露出来,那时纠正的代价比现在还大。
回头看的时候还可以做一件事:找出当初被认为没用、事后却显得有道理的那些判断。这类判断往往最能说明归因的问题,它们在当时不合预期,事后却对得上,说明当时的归因方式本身有缺陷,这个缺陷比某一条结论对错更值得关注。
有一种较硬的区分办法是做一次反向的检验。把当初那个动作重新做一遍,前提是外部环境已经回到和当时接近的状态。如果这次结果还是往同一个方向走,那么做法在起作用的可能性上升;如果这次没有变化,那当初的变好更可能来自外部。
做这一次反向检验之前,先要问清外部状态有没有真的回到接近的位置。很多时候你以为回到了,实际上量级、竞争结构、买家结构都已经不同,这时候得到的结果无法和当初相比,硬要比,只会得到一个新的、同样分不清的判断。
知虾的站点分析那一栏把各个站点的整体走势摊开摆在上头,一边是整体一边是自己那几个数,同一段时间里自己的变化有多少是跟着大盘走的,对着这一栏比一遍就能看出一部分,这一步能帮上忙的地方在于把外部那一层先剥掉。
区分这两件事还有一个心理上的难点:人更愿意相信是自己的做法起了作用,因为这个结论更有掌控感。承认这次是时机好,等于承认自己手上没有一样东西能搬到下一轮,这个承认不好受,但从长期看,能分清的人手里的结论会越来越结实,分不清的人手里的结论只会越来越多。
最后值得记一条经验:当一条结论怎么解释都解释得通的时候,它多半已经把时点好的成分吸收了进来。真正由做法带来的结论通常是有条件的、有边界的、说得清在什么情况下不成立的,缺了这些特征,就该往时点的方向多想一想。
所以回头看的时候凭什么区分,答案其实落在两件事上:事前有没有写下预期,外部有没有同步在动。这两条都在,区分才有依据;这两条缺一条,剩下的就只是解释,而解释永远能解释得通,也永远不能拿来用。
同样的数换成另一个时间段还看得出来吗
同样的数换成另一个时间段还看不看得出来,这个检验之所以有用,是因为它能在不动做法的情况下换掉时机。同一个动作、同一批货、同一套判断,只是把观察期挪到外部环境不同的时间上,前后两次的结果放在一起,就有了一点分辨力。
做这个检验时最先要处理的是可比性。两个时间段的基线水平不一样,淡季和旺季的量天生差一截,直接比较绝对数没有意义,要比的是相对变化,也就是这个动作带来的那部分增量在整体里的占比,比的是比例而不是绝对值。
其次是两个时间段的长度要接近。一个观察十天一个观察一个月,后面那一段自然能看到更多的东西,包括更多无关的波动,两边一长一短,得到的结论会被长度差掩盖掉,看不出做法到底在这里起了多少作用。
还有一个因素是两个时间段的竞争状况。同样的动作在竞争激烈的时段效果会被摊薄,在竞争缓和的时段效果会被放大,如果两段时间的竞争强度差得远,得到的结果比不出做法的强度,只能比出两个时段各自的拥挤程度。
如果同一个动作在两个时间段里都给出了同方向的变化,那么这条做法的可信度会明显上升。注意是同方向而不是同幅度,方向的一致说明这个做法的逻辑在起作用,幅度不同只说明不同时段的敏感度不一样,这是两件不同的事。
如果两段时间给出的方向相反,先别急着判做法无效。要回去看这两段时间里外部发生了什么,是不是其中一段正好遇上平台的整体调整,或者是自己另外一项动作同时上马把结果盖住了,排掉这些之后再看剩下的部分。
这个检验还有一个变体,就是把同一个动作放到同一时间段里的另一半样本上做。这样能避开时段差异,代价是样本被切成两半,每一半的噪声都更大,看得不那么清楚,适合用来核对那些效果比较明显的动作。
换时间段的时候要留一个缓冲。紧贴着动作节点的那几天数据往往最不稳定,因为它还在变化当中,把这一小段切掉再看,剩下的部分更能反映稳定的状态,切掉的这一段不长,但对结论的干净程度影响不小。
还有一种情况是两个时间段都看不出变化。这未必说明做法无效,有可能是这个动作的效果本来就小于这段时间的波动幅度,被噪声盖住了。这时候应该做的是把观察期拉长,而不是马上下结论说这个动作没有用。
拉长观察期也有代价。时间一长,中间发生的其他事情就越多,别的变化会挤进来影响结果,最后你面对的是一个混杂了很多因素的结果,比短窗口更难看清楚,这个矛盾没法完全解决,只能按动作的性质挑一个合适的长度。
同一个数在不同时间段的解释也会变。同样是转化率掉了两个点,在流量大涨的时期可能只是结构变化,在流量平稳的时期可能就是真的出了问题。所以换时间段比的时候,要把那段时期的整体处境一起带上,光比数是不够的。
这个检验最大的价值在于它能让人慢下来。本来一轮做完就想定论的,因为要等下一段时间,自然会先把它当候选放着,这段等待期恰好是最容易发现反例的时候,很多错误的结论就是在这段时间里被自己推翻的。
从记录的角度看,最好在第一次做的时候就把当时的时间处境标清楚:处在什么位置、外部在往哪个方向走、手边还有没有别的动作在跑。等到下一段时间要做对照时,这些标注能帮你判断两段时间到底能不能比。
如果始终找不到一个条件接近的第二段时间,那就接受这个检验做不了。有些判断一年才有一次机会检验,硬要拉一个不合适的时段来比,得到的结论还不如不做,因为它会给你一个看起来有依据、实际上错的答案。
换时间段也不是万能的,它只能排除掉一部分时点造成的偏差。如果外部环境在两个时间段里都以同样的方式在影响结果,那这个影响不会被这个检验发现,所以它应该是和其他方式配合使用的一步,而不是唯一的一步。
说到底,同样的数换成另一个时间段还看不看得出来,问的其实是这条结论稳不稳。稳的结论不会因为换了一段时间就散掉,散的结论多半本来就没有根,只是恰好在那一段时间里对上了而已。

外部越不平静,能从数据里读出做法作用的地方就越少
结论立不住的时候怎么把它降级成线索
结论立不住的时候,多数人的处理方式是把它扔掉或者把它改个说法继续用,这两种都不太合适。更合理的处理是把它降一级,从结论降成线索,也就是从一条能拿来指导动作的判断,变成一条值得留意、但还不能据以行动的方向。
降级的第一步是把说法改掉。把做了什么就会怎样改成似乎和什么有关,把肯定句改成条件句,看起来只是措辞变化,实际影响很大,因为改成条件句之后,你在下一次遇到这个条件时就不会自动照着做,而是会先看一眼。
降级之后这条线索还要留在记录里,不能直接删掉。直接删掉的后果是下一次还会重新撞上同一个想法,然后重新走一遍同样的错误路径。留着的意义是它带着失败记录保存下来,下一次看到它时会多一层警惕。
立不住的原因要一起记下来,否则这条线索过一段时间会被自己重新捡起来当成结论。原因通常有三种:外部不平静导致无法分辨、对照不够导致分不清因果、样本太小导致只是偶发,把属于哪一种标清楚,下次才有机会换个方式再试。
给线索标一个重看的时间点也很实用。有些线索之所以立不住,只是因为在当时的环境里看不出来,换一个环境重新看就可能显形。标个时间点,比如下一轮结束之后再看,既不会让它立刻影响动作,也不会让它彻底沉底。
有些结论立不住是因为它的适用对象比原以为的窄,这种时候降级的方法不是改成条件句,而是把适用范围写清楚。写清范围之后,这条结论在自己那一小块里仍然是结论,出界之后才降成线索,这样就保住了一部分可用性。
降级还要区分是暂时立不住还是根本立不住。暂时立不住的是那些等条件合适就能重新检验的,根本立不住的是那些无论如何都无法构造出对照的,前者值得留着,后者留着也只是占地方,两种处理方式应该分开。
降成线索之后,这条东西的用法就变了。它不能作为下一次动作的依据,只能在几个候选方向里当作一个参考权重,比如在几个都差不多的选择之间,有一条线索指向其中一个,可以轻微倾斜一下,但不该让线索决定动作本身。
什么时候能把线索升回结论,标准应该事先定好。比较常见的标准是它在新的独立场景下再对上两次,或者它在一个条件接近的场景里完全对上。标准事先定好,就不会因为一时手痒而提前升级,也不会因为遗忘而永远停留在线索状态。
降级这件事需要在一个固定的位置做,不能各人各做。如果每个人自己决定哪些结论降级、怎么降,那么同一份复盘在不同人手里会结出不同的结果,往后谁也说不清手上哪一条是结论哪一条是线索,这一点比降级本身更麻烦。
从复盘的价值看,能主动降级的团队往往比不降级的走得更稳。原因不在于他们更谨慎,而在于他们手上的结论库存是干净的,每一条都是经过检验的,用起来不用再去想它到底算不算数,省下的这点犹豫在忙的时候非常值钱。
一条结论在两个时间段的词上表现一致不一致,对着知虾公开页面的关键词分析那一栏对一遍就有答案,栏里把各个词的走势摆在一起,比较的时候顺着看下来就行,对不上的那部分正好用来判断这条东西该按结论留着还是该降成线索。
还有一种情况需要直接放弃而不是降级,就是那条结论的方向明显错了。方向错的结论不能用条件句包起来留着,因为它在错误的方向上会继续吸引注意力,正确的处理是把方向写反过来,连同它当初怎么错的记录一起放回去。
降级的操作本身也要有个轻重。影响面大的结论降级要谨慎,因为降级意味着接下来一段时间内相关动作缺少依据;影响面小的结论降级可以干脆一些,反正它本来也不决定什么,拖着反而让人以为手上东西很多。
从长期看,结论和线索之间的流动应该是双向的。新翻出来的东西先进线索区,通过检验再升为结论;旧的结论在新环境里失效就退回线索区,重新找机会检验。这个流动机制理顺了,手上的判断库存就会一直保持在一个健康的状态。
所以结论立不住的时候怎么处理,答案不是删掉也不是硬撑,而是把它降成线索、写清降级的原因、标好重看的时间,让它继续待在记录里等着下一次机会。这样处理,一次没站住的结论也仍然有它的用处。

头一轮对上少数几项并不能说明什么,要等对不上的那部分连着收窄才有意义
算不算得了数,看完才敢下这一句
算不算得了数,最终要落到一句话上,而说这句话之前要先把前面几关都过一遍:事前有没有写下预期,这一轮有没有对照,几轮的处境是否真的不同,外部有没有同步在动。这几关都过了,那句话才有底气说出来。
如果这几关只过了一部分,那么说出来的话也应该相应打折。过了事前预期这一关但没过对照这一关,可以说这次结果和预期方向一致;过了对照但没过多轮这一关,可以说这条做法至少在这一次条件接近的场景里有效,不能说它是一套方法。
说话的分寸很重要,因为它决定了这条结论接下来会被怎么用。说成定论,它会被直接搬进动作里,往后几轮都不再被检验;说成方向,它会被放在旁边看着,下一次遇到类似场景时才会被拿出来参考,两种用法带来的后果完全不同。
还有一层是这条结论要影响多大的动作。如果只是推动一次小范围的调整,那么一条中等强度的结论已经够用,因为错了的代价很小,很快能改回来;如果它要影响的是一个季度内的主要安排,那就必须等到这几关都过了,否则中途返工的代价太大。
从复盘本身的角度看,敢说算不了数其实是一种能力。它意味着人愿意承认这一次没弄清楚,而不是用一条听着合理的说法把事情糊过去。这种承认在短期内让人不太舒服,长期看却能让手上的每一条判断都是真的,省下大量反复。
也有些时候,算不算得了数这个问题本身就不该急着回答。有些做法的作用要好几轮才看得出来,第一轮就追问算不算数,得到的答案永远是不知道。这时候更合适的位置是把它记为待观察,等够轮数再来问,而不是现在就下一个勉强的判断。
值得注意的是,判断的主体和判断的时机要分开。谁来下这一句、在什么时间点下这一句,都应该固定下来,比如每轮复盘结束时统一过一遍。如果随时都能下判断,那么判断会跟着情绪走,顺的时候容易说算数,不顺的时候容易说不算,两种都不是依据。
外部环境越动荡,能算数的结论就越少,这一点要提前接受。有些时期里无论做多少轮复盘,能固定下来的结论都只有一两条,其余全是线索,这不是复盘做得不好,而是那段时间本来就不提供可分辨的信息,硬要凑出结论只会凑出错的。
少数几条能算数的结论,价值远高于一屋子说不清的东西。手上有三条经过检验的判断,每一次做决定时都能拿出来用,这种确定感是五十条线索给不了的。所以在这个问题上,宁少勿多是划算的,哪怕一时间显得手里的东西很少。
还有一点经常被忽略:算不算数这件事是有期限的。一条今天算数的结论,过几个季度之后可能就不再算数了,因为外部的条件变了。所以在给结论做判断的时候,同时记下这个判断做出来的时间,往后过一段时间就自动进入待重看的状态。
把结论、线索、待观察这三种状态放在一起管理,比只分对错要实用得多。三种状态各有各的用法和门槛,流动的规则也清楚,这样无论谁来看这份记录,都能一眼知道自己手上哪一条可以拿去做决定,哪一条只能当方向。
前面几节讲到的那些拆开归因的方法,最后都要落到这一句话上。方法再细,如果最后没有说清这一条到底算不算数,那么翻出来的东西就还停在材料的状态,别人拿去用的时候仍然不知道该怎么用,等于前面的工夫只做了一半。
说完这一句之后,下一轮的动作才有依据。如果这一句说的是算数,那么下一轮就可以按它安排;如果说不算数,下一轮就先按原来那套走,把这条放回去继续观察。判断的作用不是让结论变多,而是让动作变得有依据。
回头看每次复盘结束时那几句算不算数,如果长期下来大部分都是算不了数,那要检查的可能不是结论本身,而是核对的方式。是不是每次都没有事前预期,是不是每一轮都在改动作,是不是从来没留下可以对照的东西,从这几个地方查起比较容易找到原因。
所以算不算得了数,看完才敢下这一句,这里的看完指的是看完前面那些关口,而不是看完手里的数据。数据看完了只说明整理工作结束了,关口都过了才说明这条东西有资格被称为结论,两者之间差的恰恰是这一节要说的全部内容。
把这一句说得清楚,下一次复盘开始的时候就不一样了。你会知道该在动作之前先写下预期,该在每轮结束的时候留一份可以对照的记录,该在拿不准的时候先把它放成线索,这几件事做下来,手上能算数的结论自然会一点点攒起来。