多角度展示的一幅大数据技术图谱
作者:倪光南
2018-04-02 17:11:01

demo.jpg

《大数据与智慧社会》

张克平 陈曙东 人民邮电出版社

随着信息技术的飞速发展,“大数据”已被认为是继互联网、云计算、物联网之后又一大颠覆性的技术革命。通过对海量、动态、高增长、多元化数据的高速处理,大数据正在引发全球范围内的经济和商业变革,其应用涉及金融、交通、教育、医疗、制造、环保、零售、文化、娱乐等各行各业。大数据更带来了一场政府治理方式的变革,在提高公共决策能力的同时,改变着国家治理的架构和模式。可以毫不夸张地说:“大数据时代没有旁观者。”

研究发现,即使在缺乏精准的数据分析模型和算法的情况下,只要拥有足够多的数据,也能揭示事物的内在联系。这给计算衍生学科带来了里程碑式的启示:大数据本身可以保证数据分析结果的有效性。因此,大数据被誉为新的生产力。

大数据使我们至少拥有了四个方面的核心能力。

首先是海纳百川的数据融合能力。通过将各种数量庞大、分布广泛、形式多样、变化迅速的异构数据资源汇聚、融合在一起,资源数量和质量的巨大提升引发资源价值的巨大提升,使大数据成为现代社会的巨大财富。

其次是基于大数据的科学研究能力。基于这种能力的科研范式有别于传统的实验归纳、模型推演、仿真模拟等范式,被称为数据密集型科学发现,即第四范式。应当指出,运用这种能力,当数据达到一定量时,传统计算架构已经不再适用,云计算应运而生。实际上,大数据与云计算相辅相成,两者之间互相推动与促进。没有云计算能力,大数据的价值就无法被挖掘出来;没有大数据,云计算也就没有用武之地。

再次是明察秋毫的洞见力。透过数据发现隐藏在事物表面下的本质规律,发现事物之间的关联,揭示事物发展的规律,便于人类发现新的原理或者产生新的科学创造。这种运用第四范式获得的科学发现,既不像理论和模拟那样在一定程度上告诉我们“为什么”,也不像实验那样明确地告诉我们“是什么”,只能告诉我们“与什么相关”。第四范式强调了以大数据为基础的数据密集型研讨方法,这种方法将会在越来越多领域的研讨中发挥至关重要的甚至是决定性的作用。

最后是高瞻远瞩的预测和决策能力。在过去的商业决策中,管理者凭借自身的经验和对行业的敏感来决定企业的发展方向和方式,这种决策有时候仅仅参考一些模糊的数据和建议。而大数据和大数据分析工具的出现,让人们找到了一条新的科学决策之路。

大数据正是因为能赋予我们这四种核心能力,才受到越来越多的关注。我国已经将大数据提升到国家战略高度,在“十三五”规划纲要中指出:实施国家大数据战略,把大数据作为基础性战略资源,全面实施促进大数据发展行动,加快推动数据资源共享开放和开发应用,助力产业转型升级和社会治理创新;深化大数据在各行业的创新应用,探索与传统产业协同发展新业态、新模式,加快完善大数据产业链。我国发展大数据有非常好的机遇,同时我们也应该清醒地认识到,我国大数据产业刚刚起步,从技术上、观念上、法律上等多个层面都需要变革,才能满足大数据的发展需要。

由张克平、陈曙东主编的《大数据与智慧社会》一书,顺应时势,系统地从大数据起源、大数据哲学本质、大数据技术框架、大数据应用案例等不同的角度为读者展示了一幅大数据技术图谱。该书首先概述了大数据的哲学本质、技术现状和发展趋势,然后详述了大数据的技术框架、大数据存储和大数据处理技术。当前,大数据应用处于起步期,产业生态处于酝酿期,必须在实际应用中发挥大数据技术的作用,推动大数据产业的发展。因此,作者们又详述了大数据在生活、政务、交通、医疗和金融等相关领域的应用实战,为读者使用大数据指出了一条探索之路。

编辑:肖笛 责编:赵宇清