分享

复杂性:混沌性的局部与整体之间 的非线性形式

 东方文捷 2022-08-26 发布于天津

复杂性:混沌性的局部与整体之间的非线性形式

复杂性是混沌性的局部与整体之间的非线性形式,由于局部与整体之间的这个非线性关系,使得我们不能通过局部来认识整体。

相关名言

编辑 播报


生活是复杂的,——这才令人感到兴味无穷——我们需要一种能把握它的复杂性的思维方式,以让我们根据生活的复杂性相应地确定我们的目标。——坎贝尔

解决语言演化问题的难度不亚于破解物种演化之谜的难度;语言演化既是一种社会现象,又是一种自然现象,还是人类心智发展和历史文化演变的结果;由于语言的起源与变化有其内在的原因和外界的影响,从而增加了语言演化问题的复杂性。——周海中
一个人一生命运的复杂性,有时也是悲剧性就在于:虽然“草稿”里蕴藏着成为一个独特的个人的各种素质——卓越的才能、禀赋、倾向性、天才——但是负责对这一“草稿”进行加工,以便使其变得更为美好的人,却反其道而行之,他用自己那双笨拙而又漫不经心的手把草图中美好的东西弄得丑陋不堪。——苏霍姆林斯基

数量地理学

 数量地理学 计算地理学 数理地理学 地学统计 地学计算
 算法 计量革命 人地关系动力学 环境动力学 区域动力学
 孤立系统 封闭系统 地理控制论 地理系统工程 地理系统分析
 动态系统 控制系统 宏系统 巨系统 复杂系统
 混杂系统 分布式系统 递阶系统 网格系统 状态空间
 复杂性 不确定性 风险 自主体 均衡
 平衡 平衡点 极限环 稳态 分叉





其他科技名词

 混沌 时空复杂性 网络 信息空间 博弈论
 信息论 平均信息域 域元 随机过程 数学规划
 分形 假设 模型 建模 模拟
 全球模型 地方模型 局部模型 概念模型 可计算模型
 类比模型 经验模型 物理模型 概率模型 候选模型
 模式识别 参数化 尺度分析 敏感性分析 符号模型
 随机模型 统计模型 动力学模型 混杂模型 数字模型
 数值模型 模型拟合优势度 模型误导 数值方法 非数值方法
 元胞自动机 受限扩散生长 计算复杂性 地学数据处理 地学数据同化
 时空数据 抽样技术 空间统计 均值 方差
 变差系数 中位数 贝叶斯推理 相关 回归
 多元统计 地理加权回归 空间自相关 时间序列分析 时空序列分析
 判别分析 聚类分析 动态聚类 系统聚类 主成分分析
 因子分析 范畴数据分析 显着性检验


复杂性理论

所谓复杂性理论,从根本上说就是研究哪些工作可以很容易地用计算机完成,哪些工作不能的理论。
在复杂性理论中,最关键的事情是搞清楚随着输入数据的增长,解决一个问题所需的步骤会以什么样的方式增加。 [1] 
如果一个问题的求解需要相当多的资源(无论用什么算法),则被认为是难解的。计算复杂性理论通过引入数学计算模型来研究这些问题以及定量计算解决问题所需的资源(时间和空间),从而将资源的确定方法正式化了。其他复杂性测度同样被运用,比如通信量(应用于通信复杂性),电路中门的数量(应用于电路复杂性)以及中央处理器的数量(应用于并行计算)。计算复杂性理论的一个作用就是确定一个能或不能被计算机求解的问题的所具有的实际限制。
在理论计算机科学领域,与此相关的概念有算法分析和可计算性理论。两者之间一个关键的区别是前者致力于分析用一个确定的算法来求解一个问题所需的资源量,而后者则是在更广泛意义上研究用所有可能的算法来解决相同问题。更精确地说,它尝试将问题分成能或不能在现有的适当受限的资源条件下解决这两类。相应地,在现有资源条件下的限制正是区分计算复杂性理论和可计算性理论的一个重要指标:后者关心的是何种问题原则上可以用算法解决。
复杂性理论所研究的资源中最常见的是时间(要通过多少步演算才能解决问题)和空间(在解决问题时需要多少内存)。其他资源亦可考虑,例如在并行计算中,需要多少并行处理器才能解决问题。
时间复杂度是指在计算机科学与工程领域完成一个算法所需要的时间,是衡量一个算法优劣的重要参数。时间复杂度越小,说明该算法效率越高,则该算法越有价值。
空间复杂度是指计算机科学领域完成一个算法所需要占用的存储空间,一般是输入参数的函数。它是算法优劣的重要度量指标,一般来说,空间复杂度越小,算法越好。我们假设有一个图灵机来解决某一类语言的某一问题,设有X个字(word)属于这个问题,把X放入这个图灵机的输入端,这个图灵机为解决此问题所需要的工作带格子数总和称为空间。
复杂度理论和可计算性理论不同,可计算性理论的重心在于问题能否解决,不管需要多少资源。而复杂性理论作为计算理论的分支,某种程度上被认为和算法理论是一种“矛”与“盾”的关系,即算法理论专注于设计有效的算法,而复杂性理论专注于理解为什么对于某类问题,不存在有效的算法 [2]  。

历史

编辑 播报


在20世纪50年代,Trahtenbrot和Rabin的论文被认为是该领域最早的文献。而一般说来,被公认为奠定了计算复杂性领域基础的是Hartmanis和Stearns的1960年代的论文On the computational complexity of algorithms。在这篇论文中,作者引入了时间

在20世纪50年代,Trahtenbrot和Rabin的论文被认为是该领域最早的文献。而一般说来,被公认为奠定了计算复杂性领域基础的是Hartmanis和Stearns的1960年代的论文On the computational complexity of algorithms。在这篇论文中,作者引入了时间复杂性类TIME(f(n))的概念,并利用对角线法证明了时间层级定理(Time Hierarchy Theorem)。
在此之后,许多研究者对复杂性理论作出了贡献。期间重要的发现包括:对随机算法的去随机化(derandomization)的研究,对近似算法的不可近似性(hardness of approximation)的研究,以及交互式证明系统理论和零知识证明(Zero-knowledge proof)等。特别的复杂性理论对近代密码学的影响非常显著,而最近,复杂性理论的研究者又进入了博弈论领域,并创立了“算法博弈论”(algorithmic game theory)这一分支 [3]  。

基本概念工具

编辑 播报


计算模型与计算资源

计算复杂性理论的研究对象是算法在执行时所需的计算资源,而为了讨论这一点,我们必须假设算法是在某个计算模型上运行的。常讨论的计算模型包括图灵机(Turing machine)和电路(circuit),它们分别是一致性(uniform)和非一致性(non-uniform)计算模型的代表。而计算资源与计算模型是相关的,如对图灵机我们一般讨论的是时间、空间和随机源,而对电路我们一般讨论电路的大小。
由邱奇-图灵论题(Church-Turing thesis),所有的一致的计算模型与图灵机在多项式时间意义下是等价的。而由于我们一般将多项式时间作为有效算法的标志,该论题使得我们可以仅仅关注图灵机而忽略其它的计算模型。
判定性问题和可计算性
主条目:判定性问题
我们考虑对一个算法问题,什么样的回答是我们所需要的。比如搜索问题:给定数组A,和一个数s,我们要问s在不在A中(判定性问题,decision problem)。而进一步的,s如果在A中的话,s的位置是什么(搜索型问题,search problem)。再比如完美匹配问题(perfect matching):给定一个二分图G=(V,E),我们问是不是存在边集E,使得二分图中每个结点恰好属于该边集的一条边(判定型问题)。而进一步的,E存在的话,E具体是什么(搜索型问题)。
自然的,我们会发现对于一般的算法问题A,我们都可以这样来问:首先,解是不是存在的?其次,如果解存在,这个解具体是什么?这就是A的判定型问题和A的搜索型问题(又称函数型问题)区分来源的直观解释。对判定型问题的回答只需是“是”或“否”,而对搜索型问题,需要返回解的具体形式或者“解不存在”。所以一个对A的搜索型问题的算法自然的也是对A的判定型问题的算法。反之,给定了一个A的判定型问题的算法,是否存在A的搜索型问题的算法,在可计算性理论计算复杂性理论中有着不同的回答,这也是理解计算复杂性理论与它的前身可计算性理论不同的一个基本的观察。
在可计算性理论中,可以说明,判定型问题和搜索型问题在可计算性的意义下是等价的(见Decision problem)。而在计算复杂性中,Khuller和Vazirani在1990年代证明了在P≠NP的假设下,平面图4-着色问题的判定型问题是在P中的,而寻找其字典序第一的着色是NP难的。
所以在可计算性理论中,只关注判定型问题是合理的。在计算复杂性理论中,虽然一些基本的复杂性类(如P,NP和PSPACE),以及一些基本的问题(P和NP关系问题等)是用判定型问题来定义的,但函数型问题复杂性类也被定义(如FP,FNP等),而且一些特别的函数型问题复杂性类,如TFNP,也正在逐渐受到关注。
算法分析
上面提到计算复杂性理论的研究对象是执行一项计算任务所用的资源,特别的,时间和空间是最重要的两项资源。
我们用时间作例子来讨论算法分析的一些基础知识。如果将输入的长度(设为n)作为变量,而我们关注的是算法运行时间与n的函数关系T(n)。因为一个算法在不同的计算模型上实现时T(n)可能会有常数因子的差别(参见可计算性理论),我们使用大O表达式来表示T(n),这使得我们可以忽略在不同计算模型上实现的常数因子。
以搜索这个计算任务为例。在搜索问题中,给定了一个具体的数s,和长度为n的数组A(数组中数的位置用1到n作标记),任务是当s在A中时,找到s的位置,而s不在A中时,需要报告"未找到"。这时输入的长度即为n+1。下面的过程即是一个最简单的算法:我们依次扫过A中的每个数,并与s进行比较,如果相等即返回当前的位置,如果扫遍所有的数而算法仍未停止,则返回"未找到"。
如果我们假设s在A中每个位置的概率都相同,那么算法在找到s的条件下需要1/n (1+2+...+n)=n(n+1)/2n=(n+1)/2的时间。如果s不在A中,那么需要(n+1)的时间。由大O表达式的知识我们知道算法所需的时间即为O(n)。
而如果我们进一步假设A是已排序的,那么我们有二分查找算法,使得算法的运行时间是O(logn)。可以看出执行一项计算任务,不同的算法在运行时间上是有很大差异的 [4]  。
复杂性类
将计算问题按照在不同计算模型下所需资源的不同予以分类,从而得到一个对算法问题“难度”的类别,就是复杂性理论中复杂性类概念的来源。例如一个问题如果在确定性图灵机上所需时间不会超过一个确定的多项式(以输入的长度为多项式的不定元),那么我们称这类问题的集合为P(polynomial time Turing machine)。而将前述定义中的“确定性图灵机”改为“不确定性图灵机”,那么所得到的问题集合为NP(non-deteministic polynomial time Turing machine)。类似的,设n为输入的长度,那我们可以定义“在确定性图灵机上所需空间不超O(logn)的算法问题的集合”(即为L),“存在深度为O(logn),输入的度(fan-in)为O(1)的电路族(circuit family)的算法问题的集合”(即为NC)等等复杂性类。
定义复杂性类问题的目的是为了将所有的算法问题进行分类,以确定当前算法的难度,和可能的前进方向。这是复杂性理论的一个主线之一:对算法问题进行抽象和分类。例如透过大O表达式,我们可以对忽略因计算模型不同而引入的常数因子。而第二个重要的理论假设,就是将多项式时间作为有效算法的标志(与之对应的是指数时间)。这样,复杂性类使得我们可以忽略多项式阶的不同而专注于多项式时间和指数时间的差别。(对多项式时间作为有效算法的标志这一点是有一定争议的,比如,如果算法的运行时间n,那它也可以看作是缓慢的,见理论与实践。)在本文的其余章节,“有效算法”等价于“多项式算法
归约
归约(reduction)是将不同算法问题建立联系的主要的技术手段,并且在某种程度上,定义了算法问题的相对难度。简单来说,假设我们有算法任务A和B,如果我们想说“A比B简单”(记为A≤B),它应该是什么意思呢?从归约的观点来看,就是说如果我们有了B的有效算法M,那么我们有一个有效算法N,它可以引用M,最终它要解决A问题。
我们以点集覆盖问题(vertex cover)和独立集问题(independent set)为例来进行说明。这两个问题都是图论中的问题。假设给定了无向图G=(V, E),和一个自然数k,点集覆盖问题是要找到V的子集S,使得对∀e∈E,有s∈ S,使得s∈ e,且|S|≤k;而独立集问题也是要找V的子集S,要求是∀s1, s2∈S,(s1, s2)∉ E,且|S|≤k。
一个简单的观察即是:对G=(V, E),一个S⊂V是覆盖点集,当且仅当S在G的补图中是独立点集(而且保持集合大小)。利用这个观察,假设我们有了解决覆盖点集问题的算法M,我们设计解决独立点集的算法N如下:
  • 算法N。

    • 输入:给定无向图G=(V, E),自然数k;

    • 输出:一个大小≤ k的独立点集(如果存在,否则返回“不存在”);

    • 已知:算法M,输入为(无向图G, 自然数k),输出大小≤ k的覆盖点集,如果这样的点集存在。否则返回“不存在”;

  • 算法步骤:

    1. 对G,产生G的补图G';

    2. 调用M,输入为(G', k);

    3. 如果M返回“不存在”,输出不存在。如果M返回S⊂V,输出S。

可以看出若产生补图这一步是有效的,那么如果M有效,N也是有效的。一般的,如果我们有一个B有效的算法M,和利用B作为“神谕”(oracle)的解决A问题的算法N,那么如果N是有效的,则我们有有效的解决A问题的算法N'——只需将N中查询B的操作换作具体的M算法即可。而这一性质的基本解释是:将多项式的不定元用另一个多项式代替,那么得到的仍是一个多项式。
所以从归约的观点来看,下面的说法可以看作与“A比B简单”(记为A≤B)等价:
  • A归约到B(reduces A to B, or A is reducible to B, or A can be reduced to B);

  • 存在通过查询B问题来解决A问题的算法(there exists an algorithm that asks oracles of B, and solves A)。

理论与实践

编辑 播报


计算复杂性的初衷是理解不同算法问题的难度,特别的是一些重要算法问题的困难性。为了确切的描述一个问题的困难性,计算复杂性的第一步抽象是认为多项式时间是有效的,非多项式时间是困难的。这基于指数函数增长速度的“违反直觉”的特性:如果一个算法的时间复杂性为2的n次方,取输入的规模是100,在运算速度是10的12次方每秒(关于CPU速度,参见Instructions per second,其中报告截止2009年,主流个人电脑的运算速度可以看作是4X10的10次方每秒)的情况下,该程序将会运行4X10的10次方年,几乎是宇宙年龄。这为多项式时间被看作是有效时间提供了直观上的证据。

然而多项式的指数很大的时候,算法在实践中也不能看作是有效的。如n的10次方的多项式算法,取问题规模大小为1000,那么几乎就是2的100次方的大小。另一方面,即便一个问题没有多项式算法,它可能会有近似比很好的近似算法(参见近似算法),或有很好的启发式算法(heuristics)。启发式算法的特点是在理论上没有精确的行为的分析,或者可以表明存在很坏的输入,在这些输入上运行很慢。然而在大多数时候,它都能快速解决问题。计算复杂性中对应的理论分析是平均复杂性理论(average-case complexity theory)和光滑分析(smooth analysis)。实际中的例子包括en:Presburger arithmetic、布尔可满足性问题(参见SAT solver)和背包问题

复杂性造句

国际法这一领域,不熟悉其复杂性则寸步难行。这其中的复杂性围绕着技能的属性。巨大的成就是在巨大的期望之中产生的。信任是减低社会复杂性的一种机制。问题的复杂性,艰巨性和挑战性在近几年来我国贸易实践中已经显现出来。所以时间复杂性与双数组的大小和字母集的大小成正比。在竞技舞厅舞的世界,一个舞种的多元化通过不同的标准来衡量:包括肉体和视觉上的观感,复杂性、乐性、续时间和舞者的表情。几何、理论算术和代数,这些学科除了定义和公理之外,没有其他原则,除了演绎以外,没有其他证明过程但就在这一过程中,却已综合了简单性、复杂性、严密性和一般性,这一特性是不为其它学科所具有的。在计算复杂性领域里,大多数复杂类都是按照接受它们的图灵机而加以描述的。利用最大树法来实现对小样本案例的聚类与提取,避免了制定推理规则的复杂性。该电梯调度方法有效地避免了电梯“空驶现象”,并大大降低了方法的复杂性。

字义分解

读音:fù

复fù

(1)(动)重复:~写|~制。

(2)(形)繁复:~姓|~分数|~比例。

(3)(动)转过去或转回来:反~无常|翻来~去|循环往~。

(4)(动)回答;答复:~信|请即电~。也作覆。

(5)(动)恢复:光~|收~|~婚。

(6)(动)报复:~仇。

(7)(副)再;又:旧病~发|死灰~燃|死而~苏|一去不~返。

读音:zá

杂zá

(1)(形)多种多样的;混杂的。

(2)(动)混合在一起;搀杂。

读音:xìng

性xìng

(1)(名)性格:个~|耐~|天~。

(2)(名)性能;性质:弹~|药~|油~。

(3)(名)在思想、感情等方面的表现:党~|纪律~。

(4)(形)有关生物的生殖或性欲的:~器官|~行为|~生活。

(5)(名)性别:男~|女~|雄~|雌~。

(6)(名)表示名词(以及代词、形容词)的类别的语法范畴。

与复杂性相关的词语

复杂复性品流复杂复杂如繁错综复杂纷繁复杂复杂劳动可复用性有性杂交杂杂乱杂杂火杂杂嘈嘈杂杂刮刮杂杂拉拉杂杂

与复杂性相关的成语

错综复杂嘈嘈杂杂拉拉杂杂杂七杂八刮刮杂杂反反复复良莠淆杂门无杂客五方杂厝人多口杂职务繁杂杂沓而至杂乱无章蜂屯蚁杂私心杂念

复杂性 - 视频大全 - 高清在线观看

    本站是提供个人知识管理的网络存储空间,所有内容均由用户发布,不代表本站观点。请注意甄别内容中的联系方式、诱导购买等信息,谨防诈骗。如发现有害或侵权内容,请点击一键举报。
    转藏 分享 献花(0

    0条评论

    发表

    请遵守用户 评论公约

    类似文章 更多