大数据时代对社会的影响与挑战
- 格式:docx
- 大小:26.59 KB
- 文档页数:9
什么是大数据时代,它对社会的挑战是什么?随着信息技术的日益发展,大数据时代已经悄然而至。
那么,什么是大数据时代?它对社会又带来了哪些挑战呢?本文将从以下几个方面进行探讨:一、大数据时代的定义及其应用领域大数据是指规模巨大、类型复杂、速度快,以至于传统数据处理技术无法处理和分析的数据。
大数据时代已经成为当今信息时代的一大特征,其应用领域也非常广泛,包括金融、医疗、农业、教育等各个行业。
例如,大数据技术可以被应用于金融领域,帮助银行实现客户信息的智能化管理,预测风险与市场趋势,提供个性化的金融服务,为金融机构的决策提供数据支持;在医疗领域,大数据技术可以被用来进行医学影像分析、研究新药、预测疾病发生和治疗效果等。
二、大数据时代对社会的挑战然而,大数据时代也带来了许多挑战,下面就几个方面来探讨一下。
1.数据安全问题大数据时代所处理的数据越来越多、越来越重要,数据安全也成为了大数据时代亟需面对的一个难题。
2019年,全球平均每个组织都有6次安全违规事件。
对此,各国政府和企业都需要加强数据安全保护,建立更加完善的数据安全审计和监管机制。
2.数据隐私问题大数据时代所处理的数据普遍涉及到个人隐私,如何保护用户的隐私成为了一大难题。
借助大数据技术,数据分析者可以获取到大量的个人信息,其滥用甚至泄露用户个人信息必定引发舆论和法律的关注。
因此,政府和企业需要建立健全的数据保护法律法规,强化用户隐私保护。
3.数据量大和杂乱无章的问题大数据时代的数据量很大,类型也很复杂,由于数据来源的不确定性,数据本身的质量也很难保证,导致在数据分析的过程中难以从大数据中挖掘出精准的信息。
因此,需要进行数据清洗和处理,提高数据的质量和准确性。
4.人才短缺问题随着各个行业对大数据技术应用的不断深入,对大数据人才的需求也越来越多,但相应的人才缺口也越来越明显。
因此,政府和企业需要建立更加完善的培养和引导机制,提高大数据人才的培养和素质。
综上所述,随着大数据时代的到来,虽然为我们带来了很多便利和发展机遇,但其也带来了一系列新的挑战。
大数据时代的挑战与机遇随着科技的不断发展,大数据已经成为当今社会中不可忽视的重要资源。
以往无法收集和处理的海量数据现在可以被有效利用,为企业、政府和个人带来了各种机遇和挑战。
本文将探讨大数据时代所带来的挑战和机遇。
一、挑战1. 数据隐私与安全问题在大数据时代,个人数据的收集和利用已经变得比以往更加广泛和深入。
这就引发了隐私和安全问题。
大量个人信息的泄露和滥用可能导致个人隐私的侵犯和个人财产的损失。
因此,保护个人数据的隐私和安全成为一个严峻的挑战。
2. 数据质量和可信度在大数据时代,海量数据的收集和管理变得异常复杂。
数据的质量和可信度成为了一个重要的问题。
错误或不准确的数据可能导致错误的决策和不良的业务结果。
因此,确保数据的质量和可信度成为了一个重要的挑战。
3. 数据处理和分析能力大数据时代产生的海量数据需要进行高效的处理和分析。
然而,传统的数据处理和分析方法已经无法满足大规模数据的需求。
因此,如何提高数据处理和分析能力成为了一个重要的挑战。
二、机遇1. 商业发展机遇大数据为企业提供了更多商业发展的机遇。
通过深入分析海量数据,企业可以更好地了解客户需求和市场趋势,从而优化产品和服务。
此外,大数据可以帮助企业发现潜在的商机,拓展新的市场。
因此,大数据为企业带来了更多商业发展的机遇。
2. 智能决策机遇大数据的收集和分析为决策提供了更多的信息和依据。
通过分析大数据,决策者可以更加准确地评估风险和机会,提高决策的准确性和效率。
此外,大数据还可以帮助决策者及时发现和解决问题,做出更加明智的决策。
因此,大数据为智能决策带来了机遇。
3. 社会发展机遇大数据时代的到来为社会带来了更多的发展机遇。
通过分析大数据,政府可以更好地了解社会状况和民生需求,制定更加精准的政策措施。
此外,大数据还可以帮助解决社会问题,提升社会运行效率,推动社会进步和发展。
因此,大数据为社会发展带来了不可忽视的机遇。
结论大数据时代带来了诸多挑战和机遇。
大数据对人类社会的影响与未来展望随着信息技术的飞速发展,大数据作为一种新型的数据处理和分析技术,正逐渐渗透到人类社会的方方面面,对我们的生活、工作、经济、政治等各个领域产生着深远的影响。
本文将探讨大数据对人类社会的影响,并展望其未来发展。
一、大数据对人类社会的影响1. 改变了商业模式大数据技术的出现,使得企业可以更加精准地了解消费者的需求和行为,从而调整产品策略、营销策略,提高市场竞争力。
通过大数据分析,企业可以更好地把握市场趋势,预测需求变化,实现精准营销,提高销售额和客户满意度。
2. 促进了科学研究在科学研究领域,大数据为研究人员提供了更多的数据来源和分析工具,加速了科学研究的进程。
科学家们可以通过大数据分析,挖掘出隐藏在海量数据中的规律和趋势,为科学研究提供更多的启示和突破口,推动科学技术的发展。
3. 优化了城市管理大数据技术在城市管理中的应用,可以帮助政府部门更好地了解城市运行的情况,优化城市规划和资源配置。
通过大数据分析,政府可以更好地监测交通流量、环境污染、市民健康等指标,及时发现问题并采取措施,提升城市的运行效率和居民的生活质量。
4. 提升了医疗水平大数据在医疗领域的应用,可以帮助医生更准确地诊断疾病、制定治疗方案,提高医疗效率和治疗成功率。
通过大数据分析患者的病历数据、基因信息等,医生可以更好地了解患者的病情和治疗方案,实现个性化医疗,提升医疗水平。
二、大数据的未来展望1. 智能化发展随着人工智能技术的不断发展,大数据将与人工智能相结合,实现更加智能化的数据分析和应用。
未来,大数据将更加智能化地为人类社会提供决策支持、服务优化等方面的帮助,推动社会的智能化发展。
2. 隐私保护与数据安全随着大数据的广泛应用,数据隐私和安全问题日益凸显。
未来,隐私保护和数据安全将成为大数据发展的重要议题,相关法律法规和技术手段将不断完善,以保障个人隐私和数据安全。
3. 社会治理与公共服务大数据在社会治理和公共服务领域的应用将更加广泛。
大数据时代的到来机遇与挑战随着信息技术的不断发展,大数据时代已经悄然而至。
在这个信息爆炸的时代,大数据不仅给我们带来了巨大的机遇,也带来了前所未有的挑战。
本文将探讨大数据时代的到来,以及其中蕴含的机遇与挑战。
一、大数据时代的背景大数据时代的到来,主要得益于信息技术的飞速发展。
互联网的普及和移动互联网的快速发展,使得人们在日常生活中产生了海量的数据。
同时,各种传感器技术的广泛应用,也为数据的采集提供了更多可能。
这些数据以前所未有的速度增长,形成了所谓的“大数据”。
二、大数据时代的机遇1. 商业机会:大数据为企业提供了更多的商业机会。
通过对海量数据的分析,企业可以更好地了解消费者的需求和行为,从而精准推出产品和服务,提升市场竞争力。
2. 创新发展:大数据时代催生了许多新兴产业,如人工智能、物联网等。
这些新技术的发展,为社会带来了更多的创新机会,推动了科技的进步。
3. 政府治理:大数据也为政府提供了更多的治理工具。
通过数据分析,政府可以更好地了解社会民生状况,制定更科学的政策,提升政府治理效率。
三、大数据时代的挑战1. 数据隐私:随着数据的不断增长,数据隐私问题日益突出。
个人信息泄露、数据滥用等问题频频发生,给社会带来了安全隐患。
2. 数据安全:大数据的存储和传输需要更高的安全性保障。
数据泄露、黑客攻击等安全问题成为了制约大数据发展的重要因素。
3. 数据治理:大数据时代数据量庞大,如何有效管理和利用这些数据成为了一个亟待解决的问题。
数据标准化、数据共享等方面的问题亟待解决。
四、应对大数据时代的策略1. 加强数据安全保障:企业和政府应加强数据安全意识,建立健全的数据安全管理制度,确保数据的安全可靠。
2. 完善数据治理机制:建立统一的数据标准和共享机制,推动数据的互联互通,实现数据的共享和利用。
3. 加强法律法规建设:完善相关法律法规,加强对数据隐私和数据安全的监管,保护个人和企业的合法权益。
五、结语大数据时代的到来,既带来了巨大的机遇,也带来了前所未有的挑战。
大数据时代的挑战与机遇在大数据时代的挑战与机遇中,我们面临着海量数据爆炸带来的挑战,同时也蕴含着巨大的机遇。
本文将从数据增长、数据品质、数据隐私和数据应用四个方面探讨大数据时代的挑战与机遇。
一、数据增长随着互联网的快速发展,数据量呈现爆炸式增长。
从传统的文本数据到现在的多媒体数据、传感器数据等,数据的种类越来越多样化。
数据增长的挑战主要体现在数据的存储和处理能力方面。
传统的存储技术已经难以满足海量数据的存储需求,因此需要开发出更加高效的存储技术。
同时,数据的处理也面临着巨大的压力,需要利用大数据技术来提高数据的计算速度和处理效率,以应对数据量不断增长的挑战。
二、数据品质大数据时代,数据的品质成为了一个前所未有的挑战。
由于数据的来源广泛、数据的处理复杂,数据的品质容易受到各种因素的干扰。
误差、噪声、不完整性等问题都可能导致数据的失真,从而影响到数据的分析和应用。
解决数据品质问题的关键在于数据清洗和数据质量管理。
通过对数据进行分类、去重、纠错等操作,可以提高数据的品质,从而使数据更加可信和可靠。
三、数据隐私在大数据时代,人们关注的不仅仅是数据的利用,还涉及到数据的隐私保护。
随着大数据技术的应用,人们的个人信息被不断采集和分析,如果没有合适的隐私保护措施,个人隐私信息就面临泄露的风险。
保护数据隐私需要从法律、技术和管理等多个方面进行。
法律法规的制定和执行可以为数据隐私提供法律保障;技术手段如数据加密、权限控制等可以保护数据的安全性;管理措施如数据访问审计、权限管理等可以监督和管理数据的使用。
四、数据应用大数据时代蕴含着巨大的机遇,数据应用是其中的重要方向。
利用大数据技术,可以对数据进行深度挖掘,发现数据隐藏的关联性和规律,从而为决策提供坚实的支持。
数据应用的挑战在于如何将数据转化为有价值的信息和洞察。
这需要利用机器学习、数据挖掘等技术对数据进行分析和建模,从而发现数据背后的价值,并将其应用到实际的业务场景中。
大数据时代的挑战与机遇随着科技的不断进步和互联网的普及,大数据已经成为当今社会的一个热门话题。
大数据时代的到来,给我们的生活带来了诸多的挑战和机遇。
本文将从不同的角度探讨大数据时代的挑战与机遇,并分析其对个人和社会的影响。
首先,大数据时代给个人隐私带来了巨大的挑战。
在大数据时代,个人的隐私已经变得越来越脆弱。
我们的个人信息被不断地收集、分析和利用,以满足商业和政府的需要。
例如,当我们在网上购物时,我们的购买记录、浏览历史和个人喜好都会被记录下来,并用于个性化推荐和广告。
虽然这些个性化的服务给我们带来了便利,但也暴露了我们的隐私。
此外,大数据的滥用也可能导致个人信息被泄露或滥用,给个人的财产和人身安全带来风险。
然而,大数据时代也给个人带来了巨大的机遇。
随着大数据的积累和分析能力的提高,个人可以通过分析自己的数据来了解自己的健康状况、消费习惯和行为模式。
这样的数据分析可以帮助个人更好地管理自己的生活和健康,做出更明智的决策。
例如,通过分析我们的运动数据,我们可以了解自己的运动习惯和身体状况,从而制定更科学的锻炼计划。
通过分析我们的消费数据,我们可以了解自己的消费偏好和开支情况,从而更好地规划个人财务。
在社会层面上,大数据时代也带来了许多挑战和机遇。
首先,大数据时代加剧了信息不对称的问题。
在过去,信息的获取和传播相对有限,导致信息不对称的情况较少。
然而,随着大数据的普及,信息变得更加容易获取和传播,导致信息不对称的情况更加普遍。
这给企业和政府带来了巨大的挑战。
他们需要更加准确地了解市场和社会的需求,以制定更合适的决策和政策。
同时,信息不对称也为企业和政府提供了更多的机遇。
他们可以通过分析大数据来了解市场和社会的需求,从而更好地满足人们的需求。
其次,大数据时代也给社会治理带来了新的挑战和机遇。
在过去,社会治理主要依靠政府的行政手段来实现。
然而,随着大数据的普及,社会治理的方式也在发生变化。
政府可以通过分析大数据来了解社会的状况和问题,从而制定更科学的政策和措施。
大数据时代的挑战与机遇随着互联网技术的迅速发展和智能设备的普及,大数据已经逐渐成为社会经济发展的重要资源。
同时,大数据也给我们带来了巨大的挑战和机遇。
本文将从技术、隐私保护、应用领域和数据治理等方面讨论大数据时代的挑战与机遇。
一、技术挑战与机遇1. 数据存储和处理能力:作为大数据时代的核心技术,存储和处理大规模、高速的数据成为了一项重要挑战。
然而,随着云计算和分布式存储技术的不断进步,我们也获得了巨大的机遇,可以更高效地存储和处理数据。
2. 数据质量和可靠性:大规模的数据来自不同的来源,数据质量和可靠性是另一个关键挑战。
在大数据时代,我们需要使用先进的数据清洗和校验技术来确保数据的准确性,提高决策的可信度。
3. 数据隐私和安全:大数据时代的另一个重要挑战是数据隐私和安全问题。
随着个人信息被大规模采集和分析,如何保护数据隐私成为了亟待解决的问题。
同时,我们也可以通过加密算法和安全机制来确保数据在传输和存储过程中的安全性。
二、隐私保护的挑战与机遇1. 法律法规:在大数据时代,隐私保护面临许多法律法规的挑战。
随着数据的交叉和共享,个人隐私的泄露风险也在增加。
然而,通过制定和完善相关法律法规,加强对个人隐私的保护,我们可以为大数据应用营造安全可靠的环境。
2. 技术手段:隐私保护的挑战还包括技术手段的创新和应用。
例如,匿名化技术、隐私保护算法和数据脱敏技术等,可以帮助保护用户的个人隐私,减少个人信息泄露的风险。
3. 隐私教育和意识:提高公众对隐私保护的意识和教育程度也是一个挑战。
只有通过加强隐私教育,让大众更加了解隐私保护的重要性,才能更好地保护个人隐私。
三、应用领域的挑战与机遇1. 商业广告和营销:大数据时代给商业广告和营销带来了巨大的机遇。
通过分析用户的购买和浏览行为,企业可以更加准确地选择目标用户,提供个性化的产品和服务。
2. 健康医疗:大数据在健康医疗领域的应用也有着广阔的前景。
通过分析患者的病历、基因数据和生活习惯等,医生可以提供个性化的诊断和治疗方案,提高医疗质量和效率。
大数据时代的挑战和机遇在大数据时代,人类社会正面临着前所未有的挑战和机遇。
大数据的爆发给传统的数据处理方法带来了巨大的冲击,同时也为各行业带来了全新的机遇和发展空间。
本文将从技术、经济和社会层面来探讨大数据时代所带来的挑战和机遇。
一、技术挑战和机遇在大数据时代,数据的规模和复杂度都大大超过了传统的数据处理能力。
传统的数据库和数据分析方法已经无法胜任这种规模的数据处理任务,因此大数据技术应运而生。
分布式存储、并行计算以及数据挖掘等技术的发展,为处理海量数据提供了有效的解决方案。
然而,大数据技术的发展也面临着很多挑战。
首先是数据的质量问题。
大数据中常常夹杂着噪音和错误的数据,如何准确地从海量数据中提取有用的信息成为了首要问题。
其次是数据的安全和隐私问题。
大数据的泄露和滥用可能导致用户隐私泄露和信息安全受到威胁。
因此,在大数据时代,如何保障数据的质量和安全成为了迫切需要解决的问题。
同时,大数据时代也给技术发展带来了巨大的机遇。
大数据的分析可以帮助企业发现潜在的商机和市场需求,优化产品和服务。
同时,数据分析也可以帮助企业更好地了解用户需求,提高用户体验。
此外,大数据技术的应用也可以为城市管理、医疗健康、交通等领域带来巨大的改变和发展机会。
二、经济挑战和机遇大数据时代对经济发展带来了深远的影响。
一方面,大数据的出现让传统产业面临着深刻的转型升级压力。
比如,传统的零售行业面临着电商的冲击,需要通过大数据分析来提高运营效率和市场竞争力。
另一方面,大数据也为新兴产业的发展提供了机遇。
例如,互联网金融的快速崛起,离不开大数据的支持和驱动。
然而,大数据经济也面临着一系列挑战。
首先是数据壁垒的问题。
目前,大数据的积累主要掌握在少数互联网巨头手中,导致数据资源的不均衡。
其次是数据交易和价值实现的问题。
虽然数据被称为“新石油”,但如何找到数据的真正价值并实现价值是一个挑战。
此外,大数据时代可能带来新的就业压力,需要培养更多掌握大数据技能的人才。
随着科技的不断发展,大数据已经成为当今社会的热门话题。
大数据时代带来了许多机遇和挑战,这些都对我们的社会、经济和科技发展产生了深远的影响。
首先,大数据时代为企业和组织带来了巨大的机遇。
通过收集、分析和利用大数据,企业可以更好地了解消费者的需求和行为,从而制定更加精准的营销策略。
同时,大数据分析也可以帮助企业提高生产效率、降低成本,从而增强竞争力。
此外,大数据还可以帮助企业发现新的商机和创新点,促进产业的升级和转型。
其次,大数据时代也为科学研究和技术创新提供了全新的可能性。
通过收集和分析大量的数据,科学家可以更好地理解自然规律,推动科学研究的深入发展。
同时,大数据也为人工智能、物联网、云计算等新兴技术的发展提供了强大支持,为人类创造了更多的科技创新机会。
然而,大数据时代也带来了一些挑战和问题。
首先,隐私和安全问题成为了大数据时代的一个重要议题。
随着个人信息的大规模收集和传播,用户的隐私和数据安全面临着严峻的挑战。
同时,大数据的滥用和泄露也可能导致社会不稳定和经济损失。
其次,由于大数据的复杂性和多样性,数据分析和处理的技术需求也日益增加,这对技术人才提出了更高的要求。
综上所述,大数据时代既带来了巨大的机遇,也带来了一些挑战。
我们需要在充分利用大数据的同时,加强对数据隐私和安全的保护,不断提升数据分析和处理的技术水平,以实现大数据时代的可持续发展和社会进步。
相信随着科技的不断进步,我们能够更好地应对大数据时代的挑战,实现更加美好的未来。
互联网大数据时代的机遇与挑战随着互联网的快速发展和智能设备的普及,大数据已经成为当今社会的热门话题。
大数据的出现给各行各业带来了巨大的机遇和挑战。
本文将探讨互联网大数据时代的机遇与挑战,并分析其对社会、经济和个人的影响。
一、机遇1.1 商业机遇互联网大数据为商业提供了前所未有的机遇。
通过对大数据的分析,企业可以更好地了解消费者的需求和行为,从而精准地进行市场定位和产品推广。
例如,电商平台可以通过分析用户的购买记录和浏览行为,为用户推荐个性化的商品,提高用户的购买满意度和忠诚度。
此外,大数据还可以帮助企业进行风险评估和预测,提高决策的准确性和效率。
1.2 科学研究机遇互联网大数据为科学研究提供了丰富的资源和工具。
科学家可以通过分析大数据,发现隐藏在数据中的规律和趋势,从而推动科学研究的进展。
例如,在医学领域,科学家可以通过分析大量的病例数据,发现疾病的发病机制和治疗方法,为临床医生提供更好的诊断和治疗方案。
1.3 社会发展机遇互联网大数据为社会发展提供了新的机遇。
通过对大数据的分析,政府可以更好地了解社会民生问题和公共需求,制定更科学、更有效的政策。
例如,在城市规划中,政府可以通过分析大数据,了解人口流动和交通状况,优化城市交通和资源配置,提高城市的生活质量。
二、挑战2.1 隐私保护挑战互联网大数据的分析需要收集和使用大量的个人信息,这给个人隐私带来了挑战。
在大数据时代,个人的隐私信息可能被滥用或泄露,给个人带来损失和困扰。
因此,保护个人隐私成为互联网大数据时代面临的重要挑战。
政府和企业应加强对个人信息的保护,建立健全的法律法规和技术手段,保障个人隐私的安全。
2.2 数据质量挑战互联网大数据的质量对数据分析的准确性和可靠性有着重要影响。
由于数据的来源和采集方式的多样性,大数据中可能存在着噪声、错误和不完整的数据,这给数据分析带来了挑战。
因此,提高数据质量成为互联网大数据时代面临的重要挑战。
政府和企业应加强对数据的采集和整理,提高数据的准确性和完整性。
大数据时代面临机遇和挑战。
一、“大数据”概念的界定(一)“大数据”概念的提出与发展2008年9月4日,《自然》(Nature)刊登了一个名为“Big Data”的专辑,首次提出大数据(Big Data)概念,该专辑对如何研究PB级容量的大数据流,以及目前正在制订的、用以最为充分地利用海量数据的最新策略进行了探讨。
[1]2011年5月,EMC(全球最大的外置存储硬盘供应商)举办了主题为“云计算相遇大数据”的大会;紧随其后,IBM、麦肯锡等众多国外机构发布了“大数据”的相关研究报告,2011年6月,麦肯锡全球研究所发布研究报告——《大数据的下一个前沿:创新、竞争和生产力》(Big Data: The Next Frontier for Innovation, Competition, and Productivity)[2],首次提出“大数据时代”来临。
此后,联合国、世界经济论坛也纷纷关注信息时代海量数据对社会经济发展所带来的冲击,2012年5月,联合国“全球脉冲”(Global Pulse)计划发布《大数据开发:机遇与挑战》(Big Data for Development: Challenges & Opportunities)[3]报告,阐述了大数据带来的机遇、主要挑战和大数据应用。
2011、2012年达沃斯世界经济论坛将大数据作为专题讨论的主题之一,发布了《大数据、大影响:国际发展新的可能性》(Big Data, Big Impact: New Possibilities for International Development)[4]等系列报告。
奥巴马政府创造性地将“大数据”概念全面引入到公共行政领域。
2009年,美国联邦政府发布《开放政府指令》(The Open Government Directive),作为大数据的前奏推出了“”公共数据开放网站。
2012年3月,美国联邦政府发布了《大数据研究和发展倡议》(Big Data Research and Development Initiative)[5],正式启动了“大数据发展计划”,宣布将投入超过2亿美元在大数据研究上[6];同年5月,联邦政府发布《数字政府战略》(Digital Government Strategy)[7],致力于为公众提供更好的“数字化”服务,围绕数据进行的一系列措施在美国政府全面推进,大数据对美国政府的影响逐步显现。
(二)大数据的概念“大数据”作为信息社会发展的一个新生事物,目前尚处在逐渐被认识、被应用的初始阶段,无论是学术界还是IT行业对大数据的理解各有侧重,尚未形成一套完整的理论体系,因此很难进行精准的定义。
维基百科将大数据定义为“所涉及的资料量规模巨大到无法通过目前主流软件工具在合理时间内达到撷取、管理、处理并整理成为帮助企业经营决策更积极目的的资讯”[8]。
全球知名的咨询公司如麦肯锡、Gartner以及知名信息化企业如IBM等作为大数据的推崇者,更侧重于从技术层面界定大数据。
2011-2013年,Gartner发布了多个与大数据有关的白皮书,如“Hype Cycle for Big Data, 2012”,定义了大数据的技术生命周期,报告中指出大数据不只是一项单一的技术,而是一个概念,一套技术。
《互联网周刊》则认为,“大数据是通过对海量数据进行分析,获得有巨大价值的产品和服务,或深刻的洞见,最终形成变革之力”。
[9]⒈大数据的技术属性大数据在诞生之初仅仅是一个IT行业内的技术术语,其主要的特征有:海量化数据(Volume)——数据体量巨大及规模完整性。
随着数据加工处理技术的提高,网络宽带的成倍增加,以及社交网络技术的迅速发展,使得数据产生量和存储量成倍增长,数据规模从TB级别跃升到PB级别。
多样化结构(Variety)——数据类型繁多。
随着物联网、社交网络、智能终端等的普及和应用,网络日志、视频、图片等非结构化数据所占比例越来越大。
高速化处理(Velocity)——主要表现为数据流的处理速度快。
数据规模的无限扩张既对高速化处理提出了新的要求,也为其带来了新的机遇,大数据的高速化处理要求具有时间敏感性和决策性的分析,要求能在第一时间抓住重要事件发生的信息。
这一点也是大数据和传统的数据挖掘技术的本质区别所在。
低密度价值(Value)——体现出的是大数据运用的真实意义所在。
数据规模大并不意味着价值高,相反,这些数据间更多地表现为稀缺性、不确定性和多样性。
[10]尽管对大数据难以明确定义,但大数据所具有的规模性(Volume)、多样性(Variety)和高速性(Velocity)特征被广泛地认同。
在3V基础上,人们对大数据的第四特性有不同的看法,IDC认为大数据具有高价值性(Value),尽管这种价值更多地表现在低价值度的碎片化数据中,如何挖掘这种价值正是大数据的关键所在;IBM则认为大数据应该具有真实性(Veracity),真实性将促使人们利用数据融合和先进的数学方法进一步提升数据的质量,从而创造更高价值。
[11]2014年,IBM发布了《践行大数据承诺:大数据项目的实施应用》(Realizing the Promise of Big Data: Implementing Big Data Projects)白皮书,在该报告中进一步扩展了大数据的特性,首次提出将大数据的特性由4V扩展为“Vs”。
[12]“Vs”在大数据已有特性的基础上,增加了数据粘度(Viscosity),主要用来衡量数据流间的关联性(resistance to flow of data);数据易变性(Variability),主要衡量数据流的变化率;数据有效性(Volatility),主要表明数据有效性的期限和存储的期限时长。
我们认为,未来随着大数据技术的发展成熟,以及人们对大数据应用的深入,大数据的“Vs”特性将会不断变化和拓展(参见表1)。
2.大数据的社会属性任何事物都具有物理和社会两类属性特征。
无论是最初的“4V”还是IBM修正后的“Vs”理论,我们认为它们都属于大数据的物理属性,是大数据所具有的区别于其他事物的特征,更多关注的是大数据的物理属性。
这时的大数据被贴上的是“技术”标签。
事实上,现在我们所谈到的大数据概念,其范畴已经远远超过了技术领域,而是被赋予了更丰富的社会属性。
在看待大数据时,要建立全面、系统的大数据意识,要看到大数据在创造社会价值、变革行为方式等社会属性的“大”,而不仅仅只是其物理属性的“大”。
艾伯特·拉斯洛·巴拉巴西在《爆发:大数据时代预见未来的新思维》一书中指出,“大数据,更强的流动能力,社会化增强;每个人都是自媒体,个性化增强;更大范围的连接,网络化增强”;涂子沛在《大数据:正在到来的数据革命》一书中指出,“大数据时代是一个更开放的社会、一个权力更分散的社会、一个网状的大社会”。
综合以上观点来看,我们认为,大数据只有与人发生了关系,展示了人类行为的规律性,才真正具有了意义。
大数据应该具有它的社会属性,大数据社会属性是指大数据受社会影响所衍生出来的属性。
事实上,我们认为,大数据发展到今天,其内涵已经不仅仅局限于技术维度,而是在演变过程中概念和涵义不断扩展,进而形成了一个语义更加丰富、维度更加多元的综合性的概念,主要可以从以下几个方面理解:大数据是一种技术。
大数据中的数据量非常巨大,达到了PB级别,在这庞大的数据之中不仅仅包括结构化数据(如数字、符号等数据),还包括非结构化数据(如文本、图像、音频、视频等数据)。
这使得大数据的存储、管理和处理很难利用传统的关系型数据库去完成。
在大数据之中,有价值的信息往往深藏其中。
这就需要利用可视化分析、数据挖掘算法、预测性分析能力、语义引擎和数据质量管理(Data Quality Management)等技术对海量数据进行快速处理并获取有价值的信息,这个获取信息的过程就是大数据技术。
大数据是一种能力。
大数据是一种寻找确切意思的能力,在大量数据当中寻找到背后隐藏的意义,发现事先未能想到的关系、有意思的联系的能力;大数据是一种能较准确判断事物发展趋势的能力,大数据通过对行为数据、物理数据等的分析,可以找出数据之间微妙的关联关系,然后利用这些关系找到事物发展的规律,进而预测未来;大数据是一种能带来创新的能力,大数据通过对数据的整合,将看似不相关的数据进行“重组”和分析,挖掘数据的潜在价值,进而实现数据创新,这种创新有可能带来产业的转型,也可能创新某种产品。
大数据是一种思维。
大数据是一种以“开放共享”为核心价值观的思维方式,在大数据时代强调从信息公开到开放数据,从开放数据到开放数据接口,随着数据开放共享程度的提高,社会的开放共享程度也在提高。
2014年4月24日,百度宣布开放全球首个大数据引擎,并向外界开放,为社会提供大数据存储、分析及挖掘的技术能力。
大数据是一个时代。
大数据开启了一个以数据为基本元素的、以数据为战略资产的时代,在大数据时代掌握了数据就意味着拥有了核心竞争力。
每个个体都是一个数据“源”,每个个体都可以发声,大数据时代让社会朝着更加个性化、民主化、自由化、开放化的方向发展。
(三)大数据的技术路线从技术角度来说,大数据不是数据的简单罗列和堆积,而是需要对所收集的碎片化、多样化、价值度低的数据进行关联分析,如对政府部门业务数据库、政府网站浏览量,以及政务微博和微信等社交网络数据进行抽取集成后,利用数据挖掘、统计分析等分析工具找出可以预测事物发展的规律、可以对现象做出解释的原因,然后以可理解的、交互的方式展现给使用者,为用户提供决策分析支持(参见图1)。
二、大数据时代对政府治理的影响在看待大数据时,要建立全面、系统的大数据意识,要看到大数据在创造社会价值、变革行为方式等社会属性的“大”,而不仅仅只是其物理属性的“大”。
大数据时代,政府治理中更加关注的是大数据的社会属性,物理属性为政府治理提供了技术支撑,而社会属性却可能变革政府治理的模式,对于政府治理创新有着不可估量的作用。
从技术层面来看,大数据时代社会信息化和政府信息化程度前所未有,物联网、云计算、数据整合、基于语义网的Web3.0、关联数据、信息发布等新技术的发展与普及,为政府治理实现“智能”化提供了技术支撑,将会从根本上改革政府的组织模式和政府形态,进而改变政府治理模式,影响整个政府存在的形态。
从长远来看,大数据将会对政府治理范式、政府职能和政府自身管理等多个方面产生影响。
(一)对政府治理理念的影响⒈开放的意识“开放”是大数据时代最强音。
无论是美国提出的“开放政府”战略,还是规模不断扩大的世界“开放联盟”组织,世界各国政府的开放意识在强化。