登陆注册
19712100000090

第90章 网络学说的概率知识准备1

1我们希望能够将来结合线性代数和微积分等等相关的数学分支来更好地理解随机过程和模式识别等等学科。因为我们要做的建模需要很好地理解这些思想才能有好的算法,如动态规划以及之后用于序列匹配的BLAST算法就是我们的目标,从公式和定理到具体的应用。概率论的公理化的前置条件,测度论是一种基本前提假设和共同认知,毕竟数学要严谨。概率是基于测度的一组度量,就如同度量衡需要提前定义然后才能各种描述。借助概率论,我们能够通过把握很小一部分信息就能够把握整体,毕竟整体的运动很复杂,我们很难也没有必要全部把握,我们只需要把握其中的不动点就足够以局部指代整体。这就有点类似于信号与系统的傅里叶变换,把复杂的时域变化变换为简单明了的频域。这是一种升维的角度,我们没有办法掌握具体的变化,这需要的运算量太大了,但我们可以通过把握高维的一些变量来理解底层的变化。统计和概率是一家。

概率的本质,有两方面的解释,一个是频率(根据过去的统计数据得出的频率),一个是可能性(将来发生的可能性的度量)。如果我们认为不存在时间的差异的话可以认为是等同的。根据不同事件的组合,其发生的概率最后会形成一定的概率分布。通过对这些信息的把握,我们可以把握不同事件发生的相对比例,从而为我们的选择提供很好的指导。毕竟新的信息加入总会减少不确定性,使得我们的决策在统计水平上会比随机决策好一点,这堆积起来就构成如今复杂的高度有序的世界。

集合论的使用本质上是对各种关系的描述(抽象的表述),而概率论则是定量化这些关系。我们构建一个系统来建模,其存在很多变量可以影响系统的运行,我们要全部把握是不可能的。但通过理论的推导和经验的积累,我们还是可以做出比较优化的选择的。

使用函数的概念,就有概率函数(本质上是一种映射,从事件到概率值),自变量是特定的事件(本质是集合,因此需要考虑相关的性质:全集,空集,补集,交集),因变量就是发生该事件的概率(值域范围0-1)。其中德摩根定律就是很好的例子。A并集B的补集等于A的补集交集B的补集,这在韦恩图上很容易观察到其是成立的。而这种等价关系的确立是数理逻辑常用的,即求真值表。一般来说其证明方法都是使用排中律/反证法。

样本空间,是概率实验所有可能的结果的集合(可以视为集合的集合)。这是统计的结果,而具体每一次的事件是固定的排他的,我们很难把握,但可以把握统计层次的相对比例。

系统具有不确定性,我们需要把握具有确定性的量,即概率是对整体的一组提炼。因此建立概率模型能够使得我们更好地理解复杂系统,毕竟随机事件发生的比例即概率已经知道。

2概率的公理体系:1任何一个事件发生的概率一定都是大于等于零的2样本空间的事件概率之和为一3互斥事件的并集发生的概率等于各自概率加和

通过底层的假设构建的系统,如同欧几里得几何公理体系就是从有限的5条公理推导出各种复杂的几何关系,而改变第五公设形成的黎曼几何和洛巴切夫斯基几何。不同的假设可以导出不同的公理体系,从而可以形成更加复杂的定理及其性质。这是大厦的基底,只要公理在特定领域也成立,那么后续的定理以及性质是不证自明的,可以直接拿来用。

同样,一个足够复杂的事件其实也是可以逐步分解,直到最基本的满足公理的事件。这种还原论的思路在微积分发挥过巨大的作用,还有程序设计语言需要顺序,分支,循环三种语句来表示各种复杂的逻辑。C.Bohm&G.Jacopini,“FlowDiagrams,TuringMachinesandLanguageswithOnlyTwoFormationRules,“CommunicationsoftheACM,vol9(5)May1966,pp366-371。因此本质上公理体系是一种重言式的推断。而各种定理的提出则是一种有意义的线性组合。

当然,这种组合是指数级爆炸的,我们要从中提取出有意义的定理就如同海底捞针,但这是可行,也可以视为一种层次的涌现。参考其衍生的各种性质:空集发生的概率为0;任何一个事件A发生的概率会等于1减掉A的补集发生的概率。

概率是对信息的掌握程度的度量。条件概率(P(X|Y)=P(XY)/P(Y))是特定事件发生后概率发生的更新,本质上是样本空间的更新,使得原有的事件发生概率变化。通过对事件的变换可以得出不同的事件组合发生的概率。

性质一P(X|Y)条件概率一定大于等于0;性质二在Y发生的情况之下P(Y|Y)的概率会等于1;性质三如果A、B互斥,在Y已经发生的情况之下A并集B的概率等于他们两个各自的条件概率相加;类似于概率的公理体系,实际上就是其延伸到条件概率的性质。

TotalProbability定理,全概率公式(P(A)=∑P(A|Ci)*P(Ci)),对任意事件A我们都有P(A)=P(A|C1)P(C1)+P(A|C2)P(C2)+...+P(A|CN)P(CN)。这是一种分解。然后其逆运算就是贝叶斯定理BAYES'RULE,考虑的是发生特定事件的前提下,其他事件发生的概率即P(Cj|A)=P(CjA)/P(A)=P(A|Cj)*P(Cj)/∑P(A|Ci)*P(Ci)。这些事件的变换就可以形成复杂的关系,能够对应与现实发生的特定事件。

3概率独立性:A跟B这两个事件同时发生的概率等于它们个别发生的概率相乘,则A跟B是独立的事件,即彼此不受影响。或者在一个事件发生情况之下与另外这个事件会发生的概率跟该那个事件没有发生的概率相等。

温伯格遗传平衡就是基于遗传因子A和a的基因频率与其形成的基因型频率(AA,Aa,aa)的关系:P(AA):P(Aa):P(aa)=P(A)^2:2P(A)P(a):P(a)^2.

概率计算:1拆解为简单的基本事件,概率相乘再加和。2组合排列3实验的方法,蒙特卡洛算法就是基于这个原理的,能够把复杂的概率运算简化为大规模的实验得出的统计数据,即频率=概率。

二项式定理,其系数对应于可能的发生情况数。

4随机变量本质上是函数,有连续和离散随机变量,前者是有限的或者可数的无穷多个变量,后者是不可数无穷多个变量。这是通过构造的方法得到的结论,总可以找到一个数字是特定算法数不到的。

比较集合的大小其实是通过对应关系来进行的,如奇数集合和偶数集合和整数集合是等势的,对于集合的每一个元素都能够找到其他集合的对应元素即一对一的映射,如一个线段上跟一个平面上的点是一样多。

累积分布函数CDF,用于计算随机变量值会落在某个范围的概率:离散的随机变量的CDF就是各种可能性的加和,连续的随机变量的CDF就是求该函数在特定区间的面积

概率质量函数PMF(只有离散的随机变量才有)

概率分布:伯努利几率分布;二项分布

5

离散概率分布

连续的概率分布

几何概率分布

泊松分布(e的-λT次方乘上x阶乘分之λT的x次方),二项分布的近似(n取x乘上p的x次方再乘上1-p的n-x次方)

正态分布是进一步的近似。

概率密度函数(从PDF到CDF就是积分,从CDF到PDF就是微分),类似高维量的提取

同类推荐
  • 戮祖

    戮祖

    万般造化,不过渺渺!真龙命运,捏碎便是!无上传承,打爆即可!吾一吼,九天十地,无不战栗!吾一出,普天之下,谁不匍匐!吾一怒,八荒大地,莫非敌血!吾乃戮祖——饮敌血,踏尸骨,杀伐天下。吾将开辟,尸骨铺就的至尊路。
  • 以武至圣

    以武至圣

    穿越到符修世家的方闲却发现自己武道天赋惊人,从此他便武道为主,符修为辅,在弱肉强食的世界走出自己的武途,当他以为已有绝强力量之时,却发现自己不过是一个道器的器灵,看他如何挣脱命运枷锁,逆势至圣!
  • 混沌悲仙

    混沌悲仙

    “仙”的存在烙印在人们的心中,可为什么没人见过“仙”?“仙”的存在真的不符合天意吗?还是说,“仙”的伟大已经超过了天?一个武学、魔法、玄法的世界,一个科技与文明的世界,一个未知的世界,“仙”是否还存在?
  • 长剑踏歌行

    长剑踏歌行

    修炼是一座城,城外的人想进去,城里的人想出来。简李园不懂修炼,却误打误撞,成了练剑的天才。山河乱世,简李园如何搅动风云?
  • 问天逆命

    问天逆命

    前世今生再续未了情緣脚踏风云只待笑尽天下手持雷电却是恩怨难断
热门推荐
  • 三国之艰辛历程

    三国之艰辛历程

    作为21世纪的“四有”青年,不幸穿越到东汉末年,坐看主角刘磊是如何从一名深山出来的孤儿蜕变成一代霸主,从泰山小村发展到统一中原,让那些在三国中的龙套角色发光发热,他的励志属于一本书。
  • 甜宠999次:腹黑男神别过来

    甜宠999次:腹黑男神别过来

    【甜文】13岁进入凌家,三年来,夏沫对自己暗恋的腹黑哥哥百依百顺,也渐渐的暴露了自己的真心。凌墨枭在给夏沫补习时,夏沫荣幸的睡在了凌墨枭的书桌上,在梦里隐隐感觉唇上一片湿热,睁开眼是凌墨枭放大的俊脸……
  • 情深入骨:陆少,好久不见

    情深入骨:陆少,好久不见

    七月七日,H国的各大新闻上集体报道:总统阁下再婚了!结婚对象是他的前妻!举国哗然!就是那个……三年前和总统阁下离婚的,又传言在三年前的空难中死去却没有找到尸体的苏珞小姐?少时情窦初开的年纪,父母因为她的心愿,临死之前闭着他立下重誓:此生必娶苏珞为妻。然而,父母冰凉的墓碑前,他冷漠相对:我不爱你,至死都不会。成婚时,她以为所有的爱情只需要耐心等耐用心浇灌总会开出美丽的花儿,可日日夜夜,迎来的却是他无情的质问,在他的逼视下签下一纸离婚协议书。三年之后,她是颇负盛名的畅销书作家,他再次出现在她的面前……
  • 异界天机

    异界天机

    半步真魔,天机邪皇。一人独战十三宗,同归于尽,醒来发现重生异界成落魄大少。
  • 冰封的记忆:我不是恶魔

    冰封的记忆:我不是恶魔

    她是令无数人闻风丧胆的歆儿,杀人不眨眼的恶魔,却又是在哥哥朋友面前伪装的好好的乖乖女他是个很冷漠的少女杀手,寒气逼人...他曾给她承诺,自己的温柔只为她打开....兄妹?一切都太突然,杀的人措手不及....
  • 又是一个秋

    又是一个秋

    两人明明相爱,却因当初爱的不够成熟而不得不忍痛割爱。时间在向前,没有人会在原地等你。只是心还在那。多年后,男女主角是否会重新走在一起?
  • 见习魔神

    见习魔神

    传说,每一颗生命星球都有自己的意识,保护着整颗星球在无限的多元宇宙中独立自主。物种大量灭绝,地星意识行将崩灭,无奈开启位面入侵之路。
  • 伯乐之眼

    伯乐之眼

    千里马常有,而伯乐不常有!我叫李远航,我拥有一双在人群中可以发现“千里马”的眼睛,不管你是厨子,司机,还是小白领,我都能发现你不为人知的潜力。想要成为成功人士,其实是件很容易的事,前提是……你要先碰见我!(来来来,骚年,我看你骨骼清奇,万中无一,不如你把这本书翻开看看可好?)
  • 时空天君

    时空天君

    大千世界诞生至今,天才修士犹如过江之鲫,不计其数,然天君之位,只得六尊。非是修者无能,只是因为,要证得天君之位,必须或得天地赐予的天君灵气,才能迈出最后一步。当第七道天君之气诞生时,无数的止步于天君之下,突破不得的大能,都虎视眈眈!就在这风起云涌的大时代帷幕即将拉开之前,赵海降临这个世界!
  • 火辣娇妻:无度宠

    火辣娇妻:无度宠

    前世,她为爱付出一切,却换不来自己所爱的人的一句关心,避她如蛇蝎。重生后,一切都看开了,那些害她的人,对不起她的人,她都不想原谅,一个也不能放过。简介:这是一本女主甩男主,男主苦追女主的玛丽苏剧情,但是绝非坑货,且看男主如何在妻管严的路上越走越远,头也不回;女主如何虐渣男,扇小百花,爽文爽文,当然………………嘿嘿嘿