大数据的发展历程及其应用

龙源期刊网

大数据在互联网中的应用及其发展前景

作者：孔德汉 钟怡雯

来源：《电脑知识与技术》2016年第22期

摘要：随着信息技术的飞速发展，使用互联网的人数越来越多，人们需要处理的数据日益增加。如何对大量的数据进行分析和归纳，并从杂乱无章的数据中发现其隐藏的特征和规律，从而被人们加以提炼和使用，这正是该文所要探讨的问题。该文以大数据的相关理论知识为背景，阐述了大数据在互联网中的实际应用及其发展前景。

关键字：大数据；互联网；数据分析

中图分类号：TP311 文献标识码：A 文章编号：1009-3044（2016）22-0006-03

1前言

在过去的几十年里，大数据这一术语正是产生在全球数据爆炸增长的背景下。大数据被挖掘的隐藏价值则会给各个领域的发展带来新的机遇，然而同时也给数据的有效组织和管理的研究带来了新的挑战，无论涉及科学研究还是实际应用，大数据都将持续给我们的生活带来潜移默化的改变。

在商业、经济及其他领域中，决策将渐渐基于数据和分析而作出，而不是根据经验和直觉。哈佛大学社会学教授加里·金说：“这是一场革命，庞大的数据资源使得各个领域开始了量化进程，无论学术界、商界还是政府，所有领域都将开始这种进程。” 而根据大规模的数据增长，互联网的意义也越发重要，现在人们的生活与互联网息息相关，不知不觉中就提供了数据信息，如果这些信息被有效的提炼和分析，无论对商业还是生活都极具价值。“大数据”时代已经降临。

2大数据的内涵及关键技术

2.1大数据的内涵

在获取、存储、管理、分析方面，其范围大大超出了传统数据库软件能力范围的数据的集合。它具有数据规模大、数据流转快、数据类型多样和价值密度低四大特征。当然，不同行业的数据有不同的自身特点，还需要结合自身的行业知识才能把大数据转换为价值。

数据发展的历程及其特点

一、数据起源

数据起源于远古时代，人们通过计数、记录等方式进行信息管理。最初的数据处理方式是手工处理，例如用石子、结绳等原始的方式进行计数和记录。

二、手工处理

随着社会的进步和发展，数据处理方式也逐渐进化。手工处理的方式虽然繁琐，但却是数据处理的基础。在这个阶段，数据处理主要依靠人力和简单的工具完成，如算盘、计算器等。数据处理效率低下，容易出现错误，但是为后续的数据处理奠定了基础。

三、电子化处理

随着计算机技术的出现和发展，数据处理方式发生了革命性的变化。电子化处理的方式大大提高了数据处理的速度和精度，同时也降低了人力成本。在这个阶段，数据处理主要依靠计算机和相关的软件完成，如Excel、数据库等。电子化处理使得数据处理更加高效、便捷和准确。

四、大数据时代

随着互联网、移动设备等技术的快速发展，数据量呈爆炸式增长，我们进入了大数据时代。大数据时代的特点是数据量大、种类多、速度快、价值高。在这个阶段，数据处理主要依靠大规模的计算机集群和高效的算法，如Hadoop、Spark等。大数据技术的应用范围广泛，包括金融、医疗、教育、电商等领域。通过对大数据的分析和处理，可以挖掘出更多的信息和价值，帮助企业和政府做出更明智的决策。

五、人工智能应用

人工智能技术的快速发展为数据处理带来了更多的可能性。人工智能技术可以自动化地对大量数据进行分类、清洗、分析和利用。同时，人工智能技术还可以通过机器学习和深度学习等技术对数据进行自动化学习和预测，为决策提供更加准确和可靠的依据。人工智能技术的应用范围广泛，包括自然语言处理、图像识别、智能推荐等领域。

六、数据安全与隐私 随着数据的不断增加和处理技术的不断提高，数据安全和隐私保护成为越来越重要的问题。企业和政府需要采取一系列的安全措施来保护数据的安全和隐私，包括加密技术、访问控制、安全审计等。同时，也需要制定相关的法律法规来规范数据的收集和使用，保障个人隐私和企业商业秘密的安全。

国开大数据技术概论

国开大数据技术概论是一门介绍大数据技术的课程，旨在帮助学生了解大数据的基本概念、发展历程和应用场景。以下是该课程的详细内容：

一、大数据的基本概念

1. 大数据是什么？

大数据是指规模巨大、类型多样、处理复杂的数据集合，通常需要借助计算机等技术手段进行存储、管理和分析。

2. 大数据的特点有哪些？

大数据具有四个特点：规模性、多样性、价值密度低和处理复杂性。

3. 大数据技术有哪些？

大数据技术包括分布式存储系统、分布式计算框架、机器学习算法等。

二、大数据的发展历程

1. 大数据的起源是什么？

大数据起源于20世纪90年代，当时互联网开始普及，人们开始产生海量的数字信息。

2. 大数据发展到今天有哪些里程碑事件？

1999年，谷歌发布了PageRank算法；2004年，Hadoop项目启动；2006年，亚马逊推出弹性计算云服务（EC2）；2008年，谷歌发布了MapReduce论文等。

三、大数据的应用场景

1. 大数据在哪些领域有应用？

大数据在金融、医疗、电商、物流等领域都有广泛的应用。

2. 大数据在金融领域的应用有哪些？

大数据在金融领域的应用包括风险评估、反欺诈、投资分析等。

以上就是国开大数据技术概论的详细内容。通过学习这门课程，学生可以了解大数据的基本概念、发展历程和应用场景，从而更好地掌握大数据技术。

大数据的起源和发展

随着科技的不断进步和互联网的普及，我们进入了一个信息爆炸的时代。大数据时代已经到来，成为推动社会发展的重要力量。那么，大数据究竟是从哪里来的？它的发展经历了怎样的历程呢？本文将从大数据的起源、发展现状和未来趋势三个方面进行探讨。

首先，我们来看大数据的起源。大数据一词最早出现在1997年，当时美国数据专家麦卡菲提出了大数据的定义，他将大数据划分为三个维度：数据量大、处理速度快和多样性。随后，随着Technopedia和Gartner等机构推出了更加精准的定义，大数据逐渐引起了广泛的关注。

其次，让我们看看大数据的发展历程。大数据的发展可分为三个阶段：数据的产生和储存、数据分析技术的发展和应用场景的拓展。

在第一阶段，数据的产生和储存成为了重要的基础。众所周知，互联网的普及和智能手机的普及使得数据的产生量呈现爆发式的增长。各种传感器和设备的广泛应用使得数据的来源更加多样化。同时，云计算技术的出现和不断完善，使得数据的储存成本大幅降低，促进了大数据的发展。

在第二阶段，数据分析技术得到了重要的突破，成为了大数据时代的核心竞争力。数据挖掘、机器学习、人工智能等技术的出现，为我们提供了更多的方法和工具来分析和利用大数据。这些技术的发展使得我们能够从大数据中挖掘出有价值的信息，为决策提供支持。 在第三阶段，大数据的应用场景不断拓展。不仅仅是互联网行业，大数据已经渗透到各个领域，包括金融、医疗、交通等。大数据的分析和利用，使得各个行业的效率得到了提升。例如，金融行业可以通过大数据分析预测市场趋势，提高投资收益；医疗行业可以通过大数据分析改善疾病的预防和治疗。

随着大数据的不断发展，未来的趋势也值得我们关注。首先，大数据的应用场景将进一步拓展。随着物联网、人工智能和区块链等新技术的发展，大数据将不再局限于传统行业，而是融入到更多的领域中。其次，数据隐私和安全问题将成为重要的关注点。大数据时代的到来，也带来了个人隐私泄露和数据安全问题的挑战。因此，在大数据的利用过程中，保护用户隐私和数据安全将成为一个重要的任务。