多模数据处理破茧成蝶 大数据“卡脖子”成为过去！

在传统混合模型中，不同模型数据间做关联分析，需要进行跨数据库的数据导入导出，十分复杂。而采用了统一的数据管理，一个简单的SQL语句就可以直接进行关联查询，如同操作同一个数据库一般，使应用开发变得十分便捷。

在传统混合模型中，不同模型需要运维不同数据库。特别当同一份数据存储于多数据库时，数据一致性成为极大挑战。此外，数据总体情况的运维，需要各个运维子系统汇总并二次开发，运维成本巨大。而采用了统一的数据管理，在产品底层服务中直接保障数据一致性，同时对多模型的数据进行整体运维，是天然的一体化系统。

3.大数据替代即将来临， “卡脖子”会成为过去?

多模型数据处理平台的进步只是大数据技术发展的一个缩影。

吕程认为，多模异构数据平台未来的发展方向之一是积极推动主要服务、组件、模块的标准化。由于数据相关技术异常复杂，技术日新月异，各类基础服务、组件、模块要做到面面俱到，是异常困难的。而通过建设一定的标准，设立一定的规范，让更多的企业参与其中，无论是开源社区，还是闭源厂商，都能贡献自己的力量，创造自己的价值。

第二，构建一个良性的生态。除了最基本的作用以外，平台还应当能支撑更多的上层应用，在不同行业、不同企业、不同业务中创造更高价值。这就对基础数据平台的生态提出了巨大的挑战，越来越多的应用，越来越多的厂商适配的接入，就会创造一个更加良性循环的生态，从而促进整个产品和平台的繁荣。

第三，坚持新技术探索。面对现在日益复杂场景，不能停留在解决的单点问题。在日益凸显的复杂场景面前，不同技术的组合是否能创造出新价值呢?是否需要新技术来解决复杂场景呢?这些地方是很值得深入研究和发展探索的，如现在讨论比较多的批流一体，又如检索和分析同时使用等。

开源路线与自主研发路线正在演绎另一场大数据领域的国产化技术替代。

近年来，大数据产业飞速发展，应用层和基础层软件不断进步，但是实施复杂、技术进步步伐迟滞的Hadoop却不断遭遇挑战，各种替代技术不断涌现。

因此，大数据领域因为开源技术的复杂性日益增加，用户采用商用系统或者云服务商的技术方案成为一大方向。

Hadoop技术上碰到了难以逾越的挑战。Hadoop是基于15年前的技术环境设计的，如今的硬件技术环境发生根本性变化，网络普及万兆，存储每秒钟能够做上百万次操作，当时的架构已经完全跟不上现在硬件的发展。

另一个原因，Hadoop软件是仿造谷歌的系统来构建的，最初的目标是用于互联网公司的日志处理和营销推广等场景。当这个技术应用到各行各业时，就发现它在功能缺失、一致性和可靠性、高性能并发等问题上的局限性，无法突破，甚至有分析机构说Hadoop已死。

以前因为有开源软件，大家常常有一种感觉，既然有免费的，就用免费的就好了。但是后面慢慢逐渐认识到这种模式的问题，想使用开源Hadoop，就需要大量专业技术人员，要知道Hadoop是个软件栈，里面有上百款的组件，如何建成大数据平台，并维护平台成为一大挑战。

很多云服务商会推出自己研发的产品。目前，大数据上云，很多云服务商会基于开源软件和自己研发的系统，为用户建立大数据平台，支持用户大数据应用开发与维护。目前，它正成为一大方向。

很多大数据专业企业坚持自主研发路线。星环科技CEO孙元浩表示，星环科技坚持大数据基础软件的完全自主研发，原创了一条完全自研的技术路线。

大数据领域另一个替换则是国产大数据基础软件产品在不同领域开始替换甲骨文、IBM等国外软件。国内众多大数据平台已经在众多行业开始替代包括甲骨文、IBM，甚至一些国外Hadoop供应商的产品。

记者获悉，近日中兴通讯签约国内大数据企业永洪科技，利用后者提供的拥有自主知识产权的一站式大数据平台与可视化分析方案，实现从企业管理到客户经营的精细化运营，提升企业运营效率，打造合作共赢的产业生态环境。

接受记者采访的永洪科技市场总监张旭军说，国产化替代已经从软硬件国产化的“去IOE”(IBM、Oracle、EMC)延伸到顶层设计咨询国产化的“去SOA”(SAP、Oracle、Accenture)，保证全方位的信息安全。大数据领域的国产化替代会快得多。

孙元浩表示，替代国外产品主要还是技术革命造成的，不光在中国发生，在美国创新型的大数据基础软件也开始替代传统企业的数据库等产品，面对日益增加的数据量，传统软件的处理性能已经无法满足用户需求，分布式技术带来的性能飞跃是客户进行替换的一个重要动力。在新的技术领域，星环科技走得会更快一点，替代成功的项目更多一点。

另外，国外的大数据软件在中国“水土不服”。因为国内的数据体量通常比国外大一到两个数量级，数据应用也更为复杂。1TB和100TB在数据分析是完全不同的两件事，而由于国外并没有这样的应用场景，所以国外的大数据软件在处理这类的问题时天生不足。国产软件在设计时就会充分的考虑这些情况。

帆软市场经理丁明浩告诉记者，大数据国产化替代最直接的效果是降低采购成本和运营维护成本，同时国内公司能定制化地为企业解决运营管理线上化进程中遇到的各种问题。

工业和信息化部新闻发言人、信息技术发展司司长谢少锋介绍，基础软硬件方面，将实施国家软件重大工程，集中力量解决关键软件的“卡脖子”问题，着力推动工业技术的软件化，加快推广软件定义网络的应用。

而大数据领域的替代，正在从软件、应用等不同领域开展，大数据领域的“卡脖子”就成为过去。

（编辑：辽源站长网）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!