分享

【大数据为什么会成为基础架构的真正挑战】

 容峰 2016-04-03
  当下,围绕大数据开展的研讨与座谈数不胜数,但似乎很少有人会把关注焦点放在支持大数据所必需的基础设施身上——这一点在实际应用层面甚至尤为明显。
  对于大多数企业而言,大数据意味着为长年维护且尘封已久的数据仓库配备一道访问的大门。数据仓库过去一直是、未来也将仍然是企业级机构所不可或缺的关键性组成部分。
  这类系统的作用是将企业方方面面产生的数据汇聚起来,然后分门别类加以划分,最终让这些纷繁复杂的信息成为业务分析师深入了解企业运营状况的宝贵资料。
  一套针对可扩展性而精心设计出的基础设施正是大数据能否真正发挥作用的关键所在。
  经过分析与处理、能够应用于实践指导的信息数据会被整理到数据中心、应用程序以及基础设施当中,企业管理者需要以此为基础进一步将其导入各类系统及业务流程,并最终获得(近乎)实时的决策能力。
  然而数据仓库在设计之初并没有考虑到如此规模的整合及访问状况,目前也没有任何一款商务智能系统足以帮助其解决这一难题。
  数据的产生速度如此之快,常常会瞬间压垮支持系统的处理能力。此外,大量系统对数据源发起的访问同样难于招架,管理应用根本不可能抵抗得住此等量级的资源需求攻势。
  要想让大数据在企业中成为可资业务及运营所利用的成功平台,IT部门必须首先对自己的数据中心资源进行有针对性的二次规划。换言之,为了确保原有系统能够应付即将到来的访问及查询需求,我们不得不面临一次漫长而充满艰辛的基础设施及架构变革。
  我们已经针对大量公开应用的扩展性配备了强大的基础架构,现在要想让大数据发挥理想中的作用,我们也需要拿出同样的合理化方案——正所谓积跬步而至千里,从每周到每天再到近乎实时,我们所做的所有努力都会在大数据的响应速度方面得到明确回报。这就是我们理想中所需要的下一代数据中心架构,这一目标的实现也必将给企业在经济价值上带来又一次新飞跃。
  数据检索面临的阻碍
  可靠性是企业业务环境的根本诉求,这一点在基础设施身上表现得更加明显。但服务与基础设施及应用的整合往往面临巨大阻碍——当系统尝试从服务中检索数据时,通常都会遭遇无法实时获得响应的窘境。这时系统只能选择等待,直到本次任务流程完成或者宣告失败。
  在服务运转良好时,这种小小的阻碍倒还可以忍受。数据检索会(几乎)立即获得反馈,流程也将继续进行。然而当服务运行本身就有些力不从心时,与之相关联的系统很可能为了等待响应而陷入停滞。
  这种延迟效应会干扰到整个业务链——从服务自身到相关系统,并最终影响终端用户。作为终端用户,显然成了这次故障的最大受害者——由于系统常常隐藏于众多架构服务层之下,他们根本无从得知系统为何没能正常响应。
  因此,大数据系统的可靠性及性能表现就成了我们要解决的核心问题。一套针对扩展性做出合理设计的架构能够承担起保障各层间连通性的重任,有了它的帮助,大家才能够为自己的企业竖立“大数据能手”的良好口碑。
  综上所述,目前我们只有经历漫长的调整周期才能让现有结构框架获得必要的可扩展能力,但这种能力正是大数据普及道路上的必要推动力。
  【编辑推荐】:
  1、当大数据梦想照进“全面预算”现实
  2、虚 拟化使得中小企业进行大数据分析成为可能
  3、未来大数据的处理和发展的五个趋势
  =====可能对您有帮助====
  对于我国,大数据真正落地面临哪些重大的挑战
  答:挑战一:数据来源错综复杂. 挑战二:数据挖掘分析模型建立. 挑战三:数据开放与隐私的权衡. 挑战四:大数据管理与决策. 挑战五:大数据人才缺口.
  ======================
  对于我国,大数据真正落地面临哪些重大的挑战
  答:百度数据大呢,但是怎么转化为商用呢,太琐碎了,没有专业的数据采集、利用机构, 阿里的数据到是精准呢,但是总局限于电商,很多线下活动,传统行业并没有统计在内,所以还是缺少这样的机构,把BAT的数据整合
  ======================
  美利达挑战者320最大载重是多少公斤?求真实数据
  答:自行车理论上不能超过150公斤,包括你自身重量在内。 这只是理论上的,但越好的自行车最好别带太多的东西。对车架,轮组都没有任何的好处。
  ======================
  梦三国为什么我挑战张角时是魔化张角,而不是真正...
  答:是为了成就里的普通张角人头吧。挑战张角,是就打魔化张角一个人,普通的张角是在黄巾入侵里最后一波的BOSS,如果之前没有把张梁和张宝干掉,他们三个一起出来,还会合体。要打未魔化的就刷黄巾入侵,三围100+的黄月英,会刷的能单过,不会就先...
  ======================
  谁能给我的名字做一个一笔签或狂草签,那才是真正...
  问:我的名字叫 尧颢頠,有没有大师来挑战一笔签或狂草签???
  答:有,那你会吗
  ======================
  德国为什么会成为展览王国?有具体的数据和资料吗...
  问:要具体的数据和资料
  答:德国有世界展览王国的美誉,在过去5年中平均每年在本国举办144个国际博览会,吸引世界各地16.6万家参展商及900万至1000万参观者。2004年,德展览公司的营业总额近25亿欧元,参展商和参观者每年为德国博览会支出近100亿欧元。博览会还为交通、旅...
  ======================
  求有关数据维护方面的论文和资料,急!!!
  问:要具体的数据和资料
  答:看看有没有你需要的 题名: 数据仓库的数据维护及数据一致性的研究 作者: 王建芬,曹元大 单位: 北京理工大学计算机系,北京理工大学计算机系 北京100081 ,北京100081 文献来源: 计算机工程与应用 关键词: 数据仓库;;数据维护;;附加文件 摘要: 该文...
  ======================
  最近一档节目很火~你正常吗?挑战者可以提前上网查...
  问:节目组调查的问题,不一定会出现,可是如果每题都提前参与,就是很轻松...
  答:现在的节目很多都是不真实的
  ======================
  为什么北大会成为新文化运动中心?
  问:节目组调查的问题,不一定会出现,可是如果每题都提前参与,就是很轻松...
  答:北京大学前身是京师大学堂,许多师生有时代使命感,关心国事。新文化运动时,蔡元培出任任校长,实行思想自由、兼容并蓄的办学方针,任新旧各种思想在这里充分发挥、碰撞,再加上陈独秀、李大钊等在北京大学任教,《新青年》杂志也在北大师生之...
  


    本站是提供个人知识管理的网络存储空间,所有内容均由用户发布,不代表本站观点。请注意甄别内容中的联系方式、诱导购买等信息,谨防诈骗。如发现有害或侵权内容,请点击一键举报。
    转藏 分享 献花(0

    0条评论

    发表

    请遵守用户 评论公约

    类似文章 更多