分享

大数据技术发展态势跟踪(下)

 qinjy2008 2016-04-07

当前,全球大数据产业正处于蓬勃发展的孕育期和机遇期。核心关键技术也在加快发展和更新换代,各类解决方案提供商加大力度宣传造势,尤其是围绕电信、航空、交通、生物、城市管理等重点领域描绘美好蓝图,力求推动行业应用和商业模式创新,抢占产业增长点;与此同时,小微企业和创业者对大数据热情高涨,期望借此机会实现高速成长的梦想。简言之,由于整个产业开始转向应用创新阶段,高成长的预期让各方都对未来抱以乐观的态度。

一、大数据产业从“技术驱动”转向“应用驱动”

大数据产业的“技术驱动”色彩十分明显,与“应用驱动”阶段尚有一定差距,但这一转变过程正在加速进行。

1、“两纵三横”的产业体系趋于成熟。作为一个独立的产业来看,大数据的产业体系框架表现为“两纵三横”:“两纵”基于技术的基础程度,分为底层技术和应用层技术,前者是共性、基础性技术,如Hadoop 框架、Hbase 数据库、Mahout 算法集等;后者是“二次开发”行为,包括各类个性化方案、产品与服务。而“三横”基于处理的流程顺序,分为基础设施、分析系统和应用工具,也可进一步细化为数据的采集、存储、处理、分析、服务五方面。这一框架体系已经趋于成熟,能够应对绝大多数的产业应用需求。

彭博创投(Bloomberg Ventures)在2012 年对大数据产业进行了调研,也曾将大数据领域的企业和产品分为三类:基础设施、分析和大数据开源技术大数据基础设施大数据分析系统 大数据应用工具分析基础设施操作基础设施基础设施即服务(IaaS)数据库分析解决方案可视化数据即服务(DaaS)商业智能(BI)垂直(产业)应用日志应用广告/媒体应用采集、存储、处理、分析、服务应用,这种划分方法对应了大数据的产业体系框架,基本覆盖了数据处理技术的全链条、各环节。

2、产业发展的方向大都与大数据关联。广义的大数据应用本质上是一种“增值分析”,前景有着近似无限的可能,不受任何行业、资源、地域、用户的约束。从此角度上讲,产业的未来发展方向几乎都能和大数据挂钩。以“十二五”国家战略性新兴产业发展规划为例,很多技术前沿的描述和布局,均与大数据相一致或关联,或是可以通过大数据实现。如新一代信息技术产业布局了物联网、移动终端设备、云计算、海量数据处理软件;节能环保产业布局了高效储能、节能监测和能源计量;生物医药产业布局了生物资源样本库、基因测序、以及基于物联网的远程健康管理服务等。

3、技术的开源特点加速了应用转化过程。大数据技术兴起于互联网时代,而互联网企业大都持有共享开放的价值观,不偏好也不需要依靠垄断有限资源生存,这导致大数据技术早在萌芽阶段就是开源技术,无偿供给全世界的开发者使用;后续包括Hadoop 等底层技术均为开源性质,也没有任何专利门槛。这种免费、去专利化的特点催生了开源项目、开源社区、开放性创新联盟组织的兴起,有效降低了产业技术的壁垒,推动更多的企业和创业者介入,进一步加快了技术应用转化的过程,有助于产业的迅速成长。

二、产业竞争策略逐步成型

大数据产业是典型的知识密集型服务业,除了基础设施环节会带来一定能耗之外,其余环节均为零能耗、高附加值。其在初始资本、法规监管等方面的准入门槛极低,但对人才资源的要求较高。为此,产业竞争呈现出数量大、水平高的特点,企业竞争策略逐步分化。

1、竞争者虽多,却未形成过度竞争。大数据从业者正在急剧增加,几乎所有的信息技术企业都在此领域布局,同时创业者持续不断地进入此领域。然而,由此带来的并非是过度竞争,而是良性竞争,最终将推动技术的创新和价值的实现。这主要归功于两个原因:一是高创新的属性。大数据技术是ICT 领域中的高附加值环节,以谷歌、亚马逊等为代表的大数据企业,无论是在技术先进性、创新活跃度还是在市场份额上,都在全球处于领先位置。二是高增长的预期。作为企业个体,在产业急速成长的预期之下,基本都选择了追求专业性的策略,依靠产品性能和服务取胜,而摈弃了追求低成本的策略。

2、三类竞争者各具优势。按照技术的变革性与应用水平,主要分化为三类竞争者:一是“互联网颠覆者”,谷歌、亚马逊、Apache基金会开发了全新的基础技术与数据库构架,依靠免费、开源的所谓互联网模式,彻底改变了原有的技术标准与游戏规则,颠覆了ICT 产业。二是“初生牛犊”,在新的规则面前,大公司与创业者处在同一条起跑线上,一些拥有核心人才与市场嗅觉的创业企业,如SPLUNKClouderaEvernote 等企业,在特定工具、专业平台方面迅速抢占先机,填补市场空白,获得快速发展,在产业链中拥有了一席之地。三是“系统集成商”,微软、IBMHPOracleEMC2SAP,这些传统IT 巨头拥有强大的资金、研发能力和市场资源。面临大数据的冲击,他们能够敏锐意识到自我革命的紧迫性,并且马上采取应对举措。他们的策略更多是防御性和商业化的,即依靠已有客户资源、成熟的产品线、丰富的行业经验加上商业并购予以应对。

在技术布局方面,大数据的竞争策略分为两类:一是做细分市场专业产品,主要是“互联网颠覆者”和“初生牛犊”,专注于技术领域的耕耘,大量的不同创新产品与应用层出不穷,形成了大数据的技术创新生态。二是整合资源,主要是“系统集成商”,依靠并购“初生牛犊”企业,整合各类资源,将大量专业技术产品组装为面向行业的应用解决方案。如IBM 在7 年内(2006-2013年)并购了30 多家公司,均指向数据库、存储、商务智能、非结构化分析工具等,IBM还计划2015年前再支出145 亿美元用于大数据并购。

3、政府是大数据产业的重要一环。与金融、化工、医药等行业相比,大数据并不是一个需要政府强力监管的行业。目前,各国也只有在网络安全与隐私保护方面出台了相关监管法案。与此相反,政府将在促进产业发展上扮演更加重要的角色,主要体现在公共数据的开放上。2009 年,美国总统奥巴马签署了首份总统备忘录《透明和开放的政治》,成立了统一的政府数据开放门户网站:Data.Gov,全面开放政府拥有的公共数据,提供多种应用程序接口,供开发者创建特色应用。这一开放式平台极大地刺激了数据驱动型创新,截至2014年初,该网站开放的数据集已经超过了85000 项,汇集了1200 余个应用程序和软件工具、手机插件,其中超过300 个是由个人或民间组织开发,新的商业模式和企业随之产生,如FlightCaster 公司基于美国交通统计局、联邦航空局交通管制中心警报、美国气象局和航班运行状况信息网站FlightStats 的数据,提供航班晚点预报,比航空公司的正式通知早6 个小时,且准确率达到85%-90%

三、大数据的商业模式创新

数据驱动型的商业模式有如雨后春笋,在全球加快涌现。为对应产业体系框架,进一步明确价值流向,本文按照数据的获取、管理、分析、应用环节的区分方式,将大数据的商业模式分为数据托管和交易平台、关系挖掘和沉淀价值利用、数据社交和跨界连接三种类型。

1、数据托管和交易平台模式

该模式应用已有数十年之久,是发展最为成熟、最为普遍的大数据商业模式,本质是发挥规模效应,降低单个企业在数据信息存储和寻找上的投入成本。主要业务形态有空间出租托管、数据商店、数据市场等,典型的代表企业为亚马逊、EMC2DropBox。近年来,该模式引入“云”的概念,从简单的数据存储,逐步扩展到数据聚合平台,最终形成云服务;而以独特数据资源进行的整合朝着纵向产业链上下游整合和横向多种产业整合两个方向发展,促使了一站式数据商店和数据交易平台的出现。如亚马逊、微软等企业均建立了可以交易应用程序和高级数据集的数据商店,目前已有数万亿个数据点、数千个订阅、数百个应用程序。

2、关系挖掘和沉淀价值利用模式

关系挖掘是媒体热炒的主流大数据商业模式,也是数据科学的主要应用模式。核心是通过数据发现隐藏的相关性,最终用于指导商业、精准化服务与辅助决策。该模式的实现需要一些先决条件,主要是面向数据的处理分析环节:一是目标领域的完全量化,如互联网广告领域,从广告点击到用户购买行为,均有完整详实的数据记录;二是数据处理能力的大幅提升,要能够处理非关系型数据,并在海量条件下保持实时快速的性能。该模式的难点在于需要颠覆常规的用户思维和需求逻辑,典型类型是沉淀价值的利用,即将一些通常无意义的数据甚至是垃圾数据进行利用,最终得出有价值的结论。比如,谷歌公司利用了数十亿用户搜索时的错误拼写记录,用以提升其拼写检查器的智能性。就目前而言,基于关系挖掘的大数据模式尚未成熟,但这种模式获得了社会各界的较高期望,认为其将有助于驱动产业转型和发展新兴产业,如推动生物医药等研发密集型产业、企业咨询等知识密集型产业向数据密集型产业转型,推动零售、交通等传统服务业向现代服务业转型,推动传统制造业向智能制造业转型等。

3、数据社交和跨界连接模式

与前两种模式不同,该模式直接面向每一个社会个体,本质上是充分挖掘物理世界的个体资源,将其变成虚拟世界的一个节点,与其他的节点进行连接、交互和交易,从而大大降低各类商业化业务的推广成本,并形成新兴业态。该模式正在走向成熟,最典型的代表就是O2O(线上-线下连接)。比如,微信不光是聊天工具,更成为了连接线上线下、开展移动支付的重要入口;打车软件有效降低了供需双方的信息不对称,提升了出租车市场的智能化程度;可穿戴设备将人体的讯息进一步量化,并提供决策建议;苹果Passbook 软件为用户提供一个智能的电子卡包,整合信用卡、护照、登机牌、优惠券等各类卡牌的信息功能。该模式的推行也有几个必要条件,主要是针对数据的采集传输环节:移动化,需要带有位置服务、能够发射无线信号的智能终端;稳定连接,需要高速、泛在的外部网络环境;在线支付,依靠用户最终的支付行为实现盈利;持续感知能力,需要先进的传感器技术、低功耗芯片技术以及电池技术作为保障。

来源:上海科技发展研究中心《科技发展研究》  执笔人:党倩娜、陶翔

    本站是提供个人知识管理的网络存储空间,所有内容均由用户发布,不代表本站观点。请注意甄别内容中的联系方式、诱导购买等信息,谨防诈骗。如发现有害或侵权内容,请点击一键举报。
    转藏 分享 献花(0

    0条评论

    发表

    请遵守用户 评论公约

    类似文章 更多