读书笔记-随机性的傻瓜

• 不确定性 4 部曲第一本,尝试理解书中的随机性.

• 更新

  2022.04.16 初始

导语

年初到现在,仿佛回到了 2 年前,回忆 2 年前更远的时间,恍如隔世.

新冠疫情下的政策之争毫不意外的又上升到了制度,文件,国家.如此又点燃了高度不安全感的神经,我想去拿药,也得出的去啊/笑/,不得不开始更多自我调节,尝试戒断新闻,掩耳盗铃.

戒断新闻的日子里重新回看不确定性系列,期望能找到点什么,也没有期望什么.

回到这一篇,这是篇读书笔记/摘录, obsidian 编写,其引用格式与标准 markdown 不同,故显示会有大量 ^xxx 等.

• 埋下一个坑,有时间写工具整理这些不同格式.

检视阅读

无处不在随机性 ->[[随机漫步的傻瓜#^6vucdiv5b9x]]

幸运的傻子 -> [[随机漫步的傻瓜#^zdpqg02hzg]]

• 人们常常低估事情中随机成分
• 人类硬件缺乏处理概率的能力

[[随机漫步的傻瓜#^443q8vshaq9|第一篇 黑天鹅]]:

• 随机性的无处不在
• [[随机漫步的傻瓜#^nclrkbm5su|第一章]]: 赚大钱可能是靠运气
• [[随机漫步的傻瓜#^iu6sebt2sq|第二章]]: 错把持续运气当实力
• [[随机漫步的傻瓜#^i8rn55bxsqf|第三章]]: 历史 过去 未来,信息的毒性.
• [[随机漫步的傻瓜#^0w3j4by36pn|第四章]]: 生活细节不需要讲究随机性,只有关系生存才需要.
• [[随机漫步的傻瓜#^mm5abg910dp|第五章]]: 进化只能适应某一段时间,而不是所有环境平均值.
• [[随机漫步的傻瓜#^tfmefnw09m|第六章]]: 随机性的分布是不对称的
• [[随机漫步的傻瓜#^0oy0iy960jzd|第七章]]: 归纳法的误用,结论/预测只是能够被证伪而不是证明正确.

[[随机漫步的傻瓜#^9hrz2n31x4c|第二篇 打字机前的猴子]]

• 我们对待随机性的偏差
• [[随机漫步的傻瓜#^mc5ai4hp89q|第八章]]: 幸存者的双重偏差
• [[随机漫步的傻瓜#^ql1xs7bfr5|第九章]]: 观察者的偏见,随机的事件表现并不随机
• [[随机漫步的傻瓜#^2pbrbjxcf4l|第十章]]: 因为路径依赖破坏了独立性,生活以非线性呈现
• [[随机漫步的傻瓜#^k7gc3psr1s|第十一章]]: 我们对随机性的偏见及原因

[[随机漫步的傻瓜#^ddon18s4jc5|第三篇 活在随机世界中]]

• 个人如何在随机的世界中自处
• [[随机漫步的傻瓜#^e8em8nt16jw|第十二章]]: 我们不擅长建立正确的因果关系
• [[随机漫步的傻瓜#^2ety1keortj|第十三章]]: 怀疑论与路径依赖
• [[随机漫步的傻瓜#^7gwtd470ctx|第十四章]]: 随机性总是最后的赢家,其唯一无法掌控的是你的行为.

分析阅读

幸运的傻子: 对随机性一无所知,误解了运气.

[[随机漫步的傻瓜#^is8sy2hxy2a|一般来说，我们确实低估了很多事情中的随机成分]]

[[随机漫步的傻瓜#^swzgjt3ddf|我们的心智并没有配备适当的硬件，缺乏处理概率问题的能力]]

第一篇 黑天鹅

黑天鹅 极不可能 却实际发生 产生重大影响.

• 概率上是离群点
• 重大影响
• 事后的可解释性

来自运气之物也会轻易被运气取回.

偏态: [[随机漫步的傻瓜#^q4m3uwjhinp|如果失败的代价太大那其成功的概率再高也无关紧要]]

[[随机漫步的傻瓜#^nclrkbm5su|赚钱的随机性]]

第一视角: 高收益高风险,卧轨不自知,一旦爆破则一无所有.

第三视角: [[随机漫步的傻瓜#^8vp6p9fdwg8|除了考虑观察到的结果,也需要考虑无法观察到的可能结果]]

[[随机漫步的傻瓜#^iu6sebt2sq|奇特的结算方法]]

我们不能只以结果论述一项决策的优劣.同样的结果,其价值也并不相同.

• 上千人的俄罗斯转盘,赚大钱背后是大部分人的消亡.
• 赚取 10000 赌博和工作,结果相同,但其价值并不相同.

普遍上我们并不了解随机性,并经常错误使用.

• [[随机漫步的傻瓜#^797npwtm4uu|唯一异议的地方是胜利与他们处事的谋略品质有关]]
• [[随机漫步的傻瓜#^3vni9u2vydu|大部分的概率结果是反直觉的]]
  • 正确性与可解释性无关
  • 警惕 “金句”

如何在风险与赚钱中间取得平衡? -> [[随机漫步的傻瓜#^d8jsq5shi08|方法是同时兼任风险经理和操作业务主管]]

• 更详细叙述要在 [[反脆弱]] 一书.

[[随机漫步的傻瓜#^i8rn55bxsqf|从数学的角度思考历史]]

样本路径: 一段时间内事物的发展路径.

蒙特卡洛模拟: 以概率论为指导的数值计算方法

• 典型的投针计算 Π.

以蒙特卡洛发生器开始,生成数以百万计的可能样本路径,来模拟一个过程,可以是历史可以是股市..

[[随机漫步的傻瓜#^t428n358otb|遍历性]]: 众多样本路径最后看起来会彼此会非常相似,一条非常长的样本路径会类似许多较短路径的平均值. ^f42c83

• 即使幸运的傻瓜的好运加持下,最终处境也会趋于排除运气的平均值.
• 无论单个阶段的运气,超长的路径最终会向长期性质收敛.

[[随机漫步的傻瓜#^2wcjg7kln71|人类的本能并不利于经验的传承]]

• 他人劝解/经验往往要到自己亲身经历才会有实感.
• 本能上的相信自我高于其他,等待诊断出疾病才大为震撼,反问问什么是我?

短期内的随机性并不值得关注,大尺度上时间总是赢家.

[[随机漫步的傻瓜#^n9syozuibs|太密切注意随机性的人反而被烧伤.]] ^083255

• 任何标准上,短时间内表现并不具备意义.
• [[随机漫步的傻瓜#^n9syozuibs|有些行为负面影响强度是正面强度的 2.5 倍]]

[[随机漫步的傻瓜#^5oo7g9ipd0c|信息的毒性]]: 应用在信息上

• 短期内大量噪声信息的生产(新闻依赖此为生)
• [[随机漫步的傻瓜#^l10wauqowu|信息垃圾场内筛选的成本 >> 错过珍珠的成本]]
• ![[#^083255]]
• 如何解决? -> 让时间尺度代替我们筛选.

作者的观点

• [[随机漫步的傻瓜#^wzmuu4uz01t|重视提炼后实现甚于新颖思想]]
• [[随机漫步的傻瓜#^85239gbguik|能够生存下去的都是最老的人,时间越长,经历的稀有事件越多,就有更大的抵抗力]]

[[随机漫步的傻瓜#^0w3j4by36pn|随机性和科学知识分子]]

[[随机漫步的傻瓜#^yt6cy7lmz4|区分科学知识分子和人文学者]]: 科学知识分子能够辨别他人著作,人文学者则无法区分科学家 和 能言的非科学家

利用随机性生成作品,但永远无法生成科学作品.

• 蒙特卡洛生成器 or 狗屁不通文章生成器
• 人文领域更易受到随机性干扰.
• [[随机漫步的傻瓜#^jrw3tjytxo|如果你的老板不久前刚说过类似的话]] -> 预备跑路

[[随机漫步的傻瓜#^z8revw4c5j|人天生需要一片天地来逃避现实,因此对生活细节并不需要那么讲究科学理性,除非面对可能危及生存的状态]]

• 虽然我们通常搞反了生活和重大时刻的状态…

[[随机漫步的傻瓜#^mm5abg910dp|最不适者可能生存吗?]]

[[随机漫步的傻瓜#^flk9gq63zsq|横断面问题]]: 市场上任意一个时间点,获利最多的交易员可能是最适合上一个循环的交易员

• 仅在随机性职业成立,牙医钢琴家不在此列.

最不适者的交易员爆破的原因

• 回声室效应: 交易员之间说的太多,以至于彼此观点非常趋同,当这个观点错误时,后果就是赔钱.文中称为 [[随机漫步的傻瓜#^ry9zhvuh87|消防站效应]]
• 没有事先规划亏损时的措施,因为根本没有看到这样的可能性.
• 当亏损发生时,倾向于改变言论,否认事实,根本不接受自己的方法可能存在缺陷.

进化论的误用.

• [[随机漫步的傻瓜#^dpeyigu5tje|达尔文谈论的是繁殖适应性而不是生存,把随机性注入系统时,原来看似进化的东西可能是转向或者退化]]
  • 负突变比被取代的特质还差,但是还能够生存,虽然最终时间尺度还是胜利者,但在几代中还是会存在退化 –> [[随机漫步的傻瓜#^ic2e65jzfn|临时聚集]]
• [[随机漫步的傻瓜#^l26hw7c0fpe|进化论适应于长的时间尺度而不是短期内观察的现象,最终时间尺度会消除累计的随机性]]

进化与随机性

• 平均上动物具有适应力,但不是每一只动物都能适应,而且不是时时适应,一只动物可能因为幸运的样本路径而生存下来.
  • 推到交易员,最好的交易员可能是过度适应某一个样本路径,此样本路径从未出现稀有事件.
• 从未经历稀有事件意味着对稀有事件的承受力越低,依照 [[#^f42c83|遍历性]] 意味着长时间尺度下物种的毁灭.
• 进化只能适应某一时间序列,而不是所有可能环境的平均值.

[[随机漫步的傻瓜#^tfmefnw09m|偏态与不对称]]

偏态/偏度: 概率分布上不对称,平均值和中位数并不相同,与之相对的是钟形曲线(正态分布是一种钟形曲线,下文还会有提到)

• 

文中例子

事件	概率	结果	期望
A	999/1000	1	0.999
B	1/1000	-10000	-10
		合计	-9.001

• 纯理性上,期望是负,因此结论是不参加这次游戏.
• 但现实是我们一直玩着这个游戏并乐此不疲.

大部分人接受的教育中接触的大都是对称环境(钟形曲线),而没有意识到自己玩的是个偏态游戏.

坏则炸毁,使得偏态中单纯预测好坏没有意义,我们的目标是: 下不对称赌注,利用偏态下稀有事件赚钱.->[[黑天鹅]]

对称领域中剔除极值对整体影响不大,但类似财务学的领域,罕见事件的巨大结果无法视而不见,所谓非对称.

• 冰盖未来特征,忽略某天的高温极值,你试试?

为什么统计学家无法预测稀有事件?

• [[随机漫步的傻瓜#^ukg43qxt9lb|统计学上把握指是信赖水平,但这个值与观察次数的比例 不是线性而是平方根.]]
  • 从罐子取红黑球,取 20 次估计比例 A 和取 10 次估计比例 B,两者的信赖水平相差 $\sqrt{2}=1.41$ 而不是 2 倍
• [[随机漫步的傻瓜#^l430pqbkbjs|在不对称事件中,随着一次一次实验,稀有事件不发生,我们对其发生概率的信赖程度增长比平方根还慢,而一旦有稀有事件发生,因为我们习惯对称事件,我们对稀有事件估计的概率又会急速升高]]
  • 满满的一罐子黑球,只有一个红球,随着实验进行,没有取到红球,则对红球存在的信赖一直非常低,一旦一次取到红球,对红球占比的估计飙升.
• [[随机漫步的傻瓜#^enpx15v8w6v|过去的信息反映了系统过去的状态,如果系统改变了,那么过去的信息对预测未来毫无意义.]]
  • 把上面从罐子取球的过程改为从顽皮孩子手中取球,显然这样而来的估计毫无意义.
  • 由于分布缺乏定常性,以科学万能/数学万能来预测未来,观念上大错特错,且附带非常惨痛的代价 –> 下一节 科学上归纳法的问题

[[随机漫步的傻瓜#^0oy0iy960jzd|归纳法的问题]]

卡尔·波普尔 的 批判理性主义

• 反对 观测－归纳法,科学理论不适用于普世,只能作间接评测.
• 人类所掌握到的一切知识,都不过是推测,在解决问题的过程中人不可避免地掺入了想象力和创造性,好让问题能在一定的框架中得到解答.
• 真伪的不对称性 即理论一定能证明为假,但不能被证明为真.
  • 一只黑色天鹅能够证伪前面100万次白天鹅.

观测-归纳法 (一定程度上是个人受到教育中的基石)

• [[随机漫步的傻瓜#^dg0bgy34z9|如果方法不恰当,经验观察会误入歧途]]
• 车祸经常发生在家附近,我们在家附近必须小心 –> 人们经常在家附近开车

波普尔看来科学并不是那么严丝合缝,理论的分类

• 第一,经过检验已经被证伪的.
• 第二,尚未知道是否错误,但将来可能被证伪的.
• 如果理论未包含证伪条件,则就不是科学而是骗术了.

真伪的不对称使得黑天鹅事件对观察-归纳法的基础动摇.

波普尔其他

• [[随机漫步的傻瓜#^rlkihs1luo|我们不可能验证理论,一味追求实证,伤害多余其他]]
• 开放心胸,没有真理永垂不朽. [[随机漫步的傻瓜#^yc1kp1btu4|任何乌托邦都是阻塞的,已经是最好了.因此不接受否定性验证,最终会通向极权主义]]

[[随机漫步的傻瓜#^jmbb62zruff|落实到统计学上,波普尔拒绝盲目接受: “知识是随着信息增殖而不断增加的”,这一统计推论的理论基础]]

接受过去能够给我最好的东西,但不被它危害

• [[随机漫步的傻瓜#^hitg1x2wg1|如果统计学能够帮助到我,我会用它,如果它构成威胁,那么可以弃用]]
• 使用统计学和归纳法积极下注,但不用它们管理风险.
• 一定要确认犯错的成本有限,且犯错的概率不是从过去资料推理而来,一旦理论证伪,结束认赔,避免黑天鹅.

第二篇 [[随机漫步的傻瓜#^9hrz2n31x4c|打字机前的猴子]]

[[随机漫步的傻瓜#^q2dusm0zg88|我们对随机性的偏差]]

• 存活者(幸存者)偏差: 只见赢家
• 不同凡响的成功最常见原因是运气
• 生物上我们缺乏了解概率的能力

[[随机漫步的傻瓜#^mc5ai4hp89q|下一个富翁]]

邻家的百万富翁 双重存活者偏差

• 归纳结论的样本支持只有富人,那么进行同样行为的失败者呢?
• (?未读到原书,无法确认?) 犯了归纳法的错误,只专注于不寻常事件,资本价值目前的报酬永远不变 (?术语不太懂?)

基金管理大师: 反其道而行,将资金交给较差的经理人,反而获得了更高的账面利润.

• 即使较差的经理人,也是存活者,更差的经理人已退群.样本已经缺失了很多人.
• 较差的经理人绩效也可能只是受随机影响暂时性的.

[[随机漫步的傻瓜#^e7785noyid|我们经历的现实只是所有可能出现的随机历史中的一个,我们却误将它当做最具代表性的,忘了还有其他可能性.]]

• 人是经验动物,我们就活在这样的历史之中,当首次尝试以随机的视角审视历史时,虚无感油然而生.

[[随机漫步的傻瓜#^ql1xs7bfr5|买卖证券比煎蛋容易]]

不同凡响的成功最常见原因是运气,两个有违直觉的结论:

• 一个整体欠佳的群体,仍然存在表现极好的个体.
• 绩效的极大值期望和群体的大小正相关.与个体的个别运气不太相关.

被随机性愚弄

• [[随机漫步的傻瓜#^r5udcaaywr|生日悖论]]: 23个人,任意两人生日相同的概率是约 50%.
• 随机的事件并不随机,如果分布完全随机,那才可能有问题.
• 科学知识中没有成果一般不会发表,问题就在这了,没有成果也是信息,没有发生和没有去发现是两回事.

问题来了,既然随随机性如此普遍,支配着比我们自觉下更多的事物,那么如何区分运气和实力呢?

• 作者也是无解,只能说 [[随机漫步的傻瓜#^iive2uv2707|由于缺乏更多信息,我宁可不做任何判断]]

[[随机漫步的傻瓜#^2pbrbjxcf4l|生活中的非线性现象]]

[[随机漫步的傻瓜#^lywzo0vdzi|生命是以非线性的方式呈现不公平]]

• 一点点的优势却有惊人的回报.
• 两极化,赢者通吃.

解释非线性 -> 路径依赖: 指给定条件下人们的决策选择受制于其过去的决策,即使过去的境况可能已经过时. ^beb1db

处理非线性过程的数学产生了波利亚过程,对非线性过程有了一个解释:

• 罐子中等量黑球红球,不放回的取,不断预测取出球的颜色.
• 与有放回取最大的区别是: 前面正确率越高,后面猜对的几率更大,正确率依赖于之前的结果.

波利亚过程的结果是: 两次猜测之间的独立性被破坏,造成了非线性的结果.

随机性除了两极化的不公平外,有优点吗?

• 一点点的随机性可以解决不少僵局.增加系统的健壮性,在反脆弱一书中有更多描述.

[[随机漫步的傻瓜#^k7gc3psr1s|我们是概率盲]]

对概率的偏见存在我们的硬件中,这些阻碍了我们认识随机性.

• 我们生活环境变化的速度远远快于基因进化的速度,更糟的是文明的时代还太短,基因根本没有改变.
• [[随机漫步的傻瓜#^cowy6xmndht|从设计角度上,人是用来求生和繁衍的,而不是理解事物]]
• [[随机漫步的傻瓜#^6zzi3j7bqvb|生存的偏执狂能够活下来,因此其基因更易遗传下来]]
• 更可笑的是为了生存,我们进化出了一套事后合理化机制,一旦因为随机性犯错,合理化机制就会启动,阻碍反思的过程.

我们的感官无法直接处理概率,新闻媒体在制造大量误解新闻.这是他们的工作,却加重了我们处理的负担.

那么如何区分噪音和显著性,以至于不会错过显著性事件?

• 显著性,噪音有值域.
• 因果关系,因果关系非常非常复杂.
• 依赖过去的观察,为事件定义一个各个因素的信赖水平,信赖水平不到 90% 拜拜头条.
• 一个窍门: 看事物的变化率的变化率.(看加速度而不是看速度)

下面是一些我们对随机性误解的例子

条件概率的误解

• 虐待妻子的男人只有 10%非杀妻,正确的角度: 妻子被谋杀案子中有 50% 的存在虐待妻子行为.
• 辛普森案下血液检测结果与辛普森一致,律师辩论之一: 血液证据 1/500k,乘以 洛杉矶人口,整个洛杉矶就有 4 个人可以犯罪.但是另一个角度是: 加上其他证据的概率,相乘得到的联合事件概率比这个小得多,即对辛普森不利.

疾病 5% 的误报率,群体阳性率 1%,你阳性了,然后你真正患病的概率?

• 直接反应 95%,但实际只有 2% 不到.
• 1000 人,1人真阳性,约 50 人假阳性.因此阳性真正患病的概率是 1/51.

预期寿命的谬误: 预期寿命 73 你活到 80 了,那么此时你的预期寿命是 -7 吗?

• 死亡统计上,那些先于你去世的人占了位置,实际预期寿命在随着年龄不断增长.

[[随机漫步的傻瓜#^ddon18s4jc|活在随机的世界]]

随机性主宰的世界个体如何自处

• [[随机漫步的傻瓜#^8dpzw3uyu0m|了解自己不够聪明,不够坚强,不必奢望对抗情绪反应]]
• [[随机漫步的傻瓜#^hmp4u8umfwt|戒掉媒体]],无意识间垃圾信息消耗了太多处理能力,这些空间原本可以用于更重要的事情.

[[随机漫步的傻瓜#^fytiereedx9|赌徒的迷信与笼中的鸽子]]

[[随机漫步的傻瓜#^9ogtgn6dcep|鸽子实验]]: 以随机的供给食物,看鸽子行为

• 几乎每一只鸽子都发展出一种与喂食连接起来的仪式…
• 关联到人类,典型的就是赌徒的一些迷信

我们会不直觉的将所经历事物之间联系起来,构建正反馈回路,这个过程近乎本能.即使从理性上得出毫无关系的两个事情,本能不 care.

战胜感性?

• 生活的精力/能量大部分来自感性,然后也就不可能通过消耗精力/能量完全控制源泉.
• 只有极少数场合这样的误判会造成重大影响,因此只需要在这些场合避免感性的误判.

避免感性误判

• 先承认受制于情绪,不可能完全摆脱.
• 郑重其事的使用暗示,仪式感,远离诱惑等窍门,不求控制,只是避免其对重大决策影响.

[[随机漫步的傻瓜#^2ety1keortj|概率与怀疑论]]

[[随机漫步的傻瓜#^8a8mnsdrx1x|怀疑论]]: 没有任何事情是肯定的,我们可以得到各种概率程度不同的结论并且以其为行动的指引.

[[随机漫步的傻瓜#^vymu0yqsfll|由于进化的目的,我们在基因上便持有已经投注不少时间的观念]]

• 教育中的坚持的观念,公众舆论中对背叛的定义.在坚持碰上黑天鹅时,事后自动合理化的机制.
• 上文 [[#^beb1db|路径依赖]] 导致了非线性的结果,破除路径依赖使得可以破除这个怪圈,很少有人能做到,能做到的人大概率被评价为背叛者.

[[随机漫步的傻瓜#^7gwtd470ctx|掌控随机现象]]

无论怎样随机性是最后的裁判,时间是最后的赢家.

[[随机漫步的傻瓜#^hmsm0124kas|无论我们的选择有多复杂,无论多擅长支配运气,随机性总是最后的裁判,我们只剩下尊严]]

[[随机漫步的傻瓜#^cst9c4xbkeh|情绪起伏时,坚定不为所动,有情绪反映没错,也不失尊严-人生来如此.错的是不能像英雄那般,或至少像个有尊严的人那样挺直腰杆]] -> 斯多噶哲学

[[随机漫步的傻瓜#^f36fh4w8lfg|下次碰到厄运,不妨开始强调个人的举止优雅,应该表现为在不管出什么情况下,都知道如何生存]]

命运女神唯一不能控制的东西,是你的行为.