导航:首页 > 数据处理 > 如何战胜大数据

如何战胜大数据

发布时间:2022-12-17 20:30:17

1. 如何有效应对大数据技术的伦理挑战

如何有效应对大数据技术的伦理挑战
大数据技术是一把“双刃剑”,既可以为人类服务,也可能给人类带来麻烦。近来,频繁的网络公司泄露个人信息事件引起广泛关注,也使人们意识到,正确认识和有效应对大数据技术带来的隐私伦理问题至关重要。
关注“算法”背后的隐私伦理
数据分析可以对人进行数据成像,在聚类、相关性分析以及数据整合的基础上刻画人的行为特征与倾向,在商业智能推荐、人的行为预测等方面具有广泛的应用前景。中国社会科学院哲学研究所研究员段伟文认为,从现象上看,它是一种非常有效的分析工具,但如果使用这些技术的人动机不纯,就有可能带来不良后果。从本质上讲,大数据带来的负面影响源于数据本身的特殊性,数据中隐含着人的各种信息,而这些信息很容易作为引导、说服与控制人类行为的工具。这一本质特征往往会诱使商家和滥用权力者干预人的自主权和侵犯人的隐私权。
“在大数据技术背景下讨论隐私伦理问题,人们主要关注的是信息隐私方面的伦理问题,最集中地体现在数据的开放共享与个人信息保护两者如何平衡的问题上。一般所说的大数据技术是一把‘双刃剑’,也主要是从这个意义上说的。”北京师范大学哲学学院教授田海平表示,数据的开放共享只是大数据技术得以实现的一个方面。除此之外,它还包括通过数字化技术获取和存储数据,通过大数据平台对海量数据进行深度挖掘、预测以及反馈等更为深度和实质性的数据占有与使用。目前,这种获取和使用数据的方式,可以通过深度机器学习做到完全智能化。就大数据的占有和使用方面而言,大数据技术加上机器学习,不仅在数据共享方面,而且在数据深度挖掘方面,把个人信息保护和数据权的确权问题都交给了“算法”,这是一个值得关注的、更为深层次的问题。
找寻技术和规范两方面原因
大数据技术的应用给人类带来一系列的隐私伦理问题和挑战,这其中既有大数据技术自身的原因,也有制度规范等的原因。
江西财经大学马克思主义学院教授黄欣荣表示,大数据技术在推动人类社会发展的同时,也带来了数据采集权、保存权、使用权、知情权、所有权、删除权、隐私权等伦理问题。产生这些问题的原因在于,大数据技术是一种全新的信息技术,大数据的隐私伦理问题是全新的问题。传统的法律法规、伦理道德难以约束相关机构采集、存储、传输和使用数据,并且新技术带来的新问题还没有完全暴露,新的法律法规难以同步发展。
段伟文认为,目前造成大数据隐私伦理问题的主要原因有:一是基于大数据分析的智能化商业推荐系统带来了全新的营销模式,其营销效率较传统的营销模式具有指数倍增效应,巨大利益诱惑面前,包含个人隐私及敏感信息的数据被单纯地视为牟利的工具和随意转卖的商品,个人的数据保护往往被商家忽视,甚至被商家运用算法加以算计,使人的隐私权受到侵犯;二是合理可行的个人数据授权和保护机制尚未建立,很多数据在用于某一分析之后被用于其他不明领域;三是分散的数据被整合之后,也可能通过数据分析洞察出一些不一定准确但会对主体造成负面影响的特征,进而诱使对这些特征进行不良使用。
加强数据立法 坚守伦理底线
对于如何让大数据技术更好地为人类服务,黄欣荣认为,需要强化隐私观念,加强数据立法,坚守伦理底线。
田海平认为,尊重个人隐私权是一个毋庸置疑的底线伦理原则。只有我们的法律体系和道德体系在规范合理性的构建方面坚守这条底线,大数据技术的应用才能够真正做到趋利避害。“数据共享”与“隐私保护”构成了大数据时代无法割舍的两面性,它实际上凸显了将“数据共享的伦理”与“隐私保护的伦理”,既以一种价值方式又以一种技术方式在大数据时代同时实现的任务。
段伟文表示,首先,要进一步凸显主体数据权利保护意识,联系大数据技术发展中的各种伦理冲突,解剖典型案例,进而从理论上廓清符合大数据时代特征的新型数据权利、隐私权以及被遗忘权的基本概念以及实践范例。其次,建立起包括商家、政府法律部门、普通用户等相关利益群体的对话机制,制定在具体的、数据驱动的社会经济乃至治理活动中的数据保护规范与实现机制。最后,做好与危害数据权利、恶意侵犯个人隐私权行为长期斗争的准备,探寻从法律和伦理层面根治此类问题的有效策略,并使之作为治理法规积淀下来。

2. 大数据时代所面临的挑战

大数据时代所面临的挑战

大数据时代临近,企业数据呈现爆炸式增长,如何为了更大的发掘企业数据价值将是很多公司必须要面对的挑战。首当其冲的是大数据的快速发展对我们原有的IT基础设施提供了更高的挑战,原有的IT基础设施以及很难满足大数据时代的需求。发现价值的过程离不开基础平台技术的创新与发展。

基础平台的改变

首先大数据挑战的就是企业的存储系统,大数据爆炸式的增长使得存储系统的容量、扩展能力、传输瓶颈等方面都面临着挑战。与之相连的还有服务器的计算能力,内存的存储能力等等都面临着新的技术攻关。目前闪存技术的发展以及英特尔、IBM等公司在大数据方面都已经投入相当大的资金进行研发,主要也是为了解决大数据对基础平台所带来的挑战。

同样,大数据分析同样面临着软件方面的挑战,同时也引发数据库、数据仓库、数据挖掘、商业智能、人工智能、内容/知识管理等领域的技术变革。Hadoop是近年大家经常提到了一个能够对大量数据进行分布式处理的软件框架,用户可以轻松地在Hadoop上开发和运行处理海量数据的应用程序

商业模式的挑战

大数据具有强大的数据价值,当我们可以利用大数据挖掘到需要信息的时候,则需要我们根据得到的信息对企业的商业模型、产品和服务等方面进行创新,这样才能够真正的让大数据的价值得到体现。

如何利用大数据信息来改变商业模式最终实现价值呢,这里我们引用Tesco为案例。Tesco收集了海量的顾客数据,并且通过对每位顾客海量数据的分析,Tesco对每位顾客的信用程度和相关风险都会有一个极为准确的评估。在这个基础上,Tesco推出了自己的信用卡,未来Tesco还有野心推出自己的存款服务。

以上是小编为大家分享的关于大数据时代所面临的挑战的相关内容,更多信息可以关注环球青藤分享更多干货

3. 大数据时代应如何应对变革带来的机遇与挑战

大数据时代应如何应对变革带来的机遇与挑战

大数据时代带给我们更多冲击,要想与时俱进,并不断的提升,那就要摒弃原来的传统思想,大胆努力的接受大数据带来的新挑战。想要弄清楚大数据时代带给我们的变化,那就要先知道大数据是什么,这样方可以更好的迎接大挑战,应对时代带来的变革。大数据是指海量的数据,这是非结构化的数据,无法用传统的数据来处理。大数据技术的应用给人们生活带来了诸多的便利性,许多疫情的报告都来源于大数据。
大数据的应用并不是那么简单,其引发的是模式的变革,其应用不仅仅是发电、输电,而是基于互联网技术,这对于人们的生产过程以及商品交换带来了变革性的影响。整个变革过程的技术手段就是数据的挖掘与分析,其是在互联网基础上,将使制造行业的生产效率大幅度提升。大灵气无法产生新的物质产品,也无法创造新的市场需求,但却可以大幅度的提升生产力。
国际上对于大数据的定义了四大特征,那就是海量的数据规模、快速的数据流转、动态的数据体系、多样的数据类型以及巨大的数据价值。基于大数据的全国的数据信息总量每两年就翻番。对于企业而言,大数据来源于企业内部信息系统所产生的运营数据,数据越大结果越好。成功的进入大数据时代,企业将拥有更多的发展潜能。
通过对大数据的处理,人们放弃了因果关系而选择了相互联系。在未来的几年内,大数据将成为提升公司竞争力的有力基础,行业与行业之间的竞争将演变为数据的竞争,所以,解决数据资源的搜索与共享将成为当务之急。以互联网行业的代表阿里巴巴和谷歌为例,前者的服务器都达到了上万台,而后者则超过了五十万台,这就是数据的差别。
大数据是一种运营模式,数据的膨胀决定了企业的未来发展方向,越来越多的企业意识到了数据增涨的隐患。随着时间的推移,数据对于人们和企业的重要性会越发突显。

4. 如何摆脱大数据

摆脱不了大数据的。因为当今社会是一个网络发达的社会,大数据在其中占的地位很大,没有大数据就没有现在的发达网络。

5. 面临大数据挑战我们该怎么做

大数据的其中两个特性是数据量大跟实时性,这是企业目前处理大数据所面临的最主要的两个挑战。我们可以看到数据的这两个属性,是传统关系型数据库也一直在处理的问题。
如果光从字面上去理解“大数据”,我们通常会认为大数据就是数据的大爆发,侧重于强调数据的量。但是如果你去总结IBM、ORACLE、EMC对于大数据的定义话,它的外延还包括了数据的多样性已经分析的实时性。
大数据的其中两个特性是数据量大跟实时性,这是企业目前处理大数据所面临的最主要的两个挑战。我们可以看到数据的这两个属性,是传统关系型数据库也一直在处理的问题。如果说传统关系型数据库目前尚不能够满足企业的业务需求,那么技术的研究方向也应该是按照关系型数据库这种技术架构进行进行下去。要知道,传统关系型数据库跟目前针对大数据的非结构化数据库的架构类型是完全不一样的。关系型数据库已经存在了40多年,对于数据处理也已经显得非常成熟,如果企业要用新兴的非结构化数据去取代它,那么会不会面临“捡了芝麻,丢了西瓜”的结局我们也不得而知。
那再让我们来看大数据的第三个特性:“数据的多样性”。这里的“多样性”意味着非结构化数据变得越来越多。
事实上,全球产生的数据中85%以上的确是非结构化的数据。但企业主要处理的还是结构化的数据。大多数厂商的非结构化数据分析工具也是转换成结构化数据之后再进行处理。那么大数据的真正之“大”在于如何将非结构化数据处于成结构化数据,以及之后的对于大量结构化数据的并行处理能力。这跟许多厂商的强调的“非结构化”数据本身并无太大关联。
一些非常资深的数据库专家认为:能把最简单的业务,简单的数据形态挖掘深入才能体现功底,电商这类复杂业务挖掘出一点成果容易,深入难,许多企业不去强调对于数据的挖掘,而在强调工具和技术。这些专家也在提醒,结构化数据相对小,但是富矿,非结构化数据大,但是贫矿,如果富矿还没开始采就转攻大贫矿,后果可想而知。
关于大数据的成本风险
只要不是钱多得烧不完的企业,其IT部门始终要面临这样一个问题:用尽可能少的钱去创造尽可能多的价值。
数据库建设无疑是企业IT预算的大头。一个项目建设花费掉上千万在中国许多企业是非常正常的事情。然而我们看得到的是大数据的建设其花费肯定将不会低于原来传统关系型数据库的花费。
现在很多厂商正在给与我们这样的案例,许多企业依靠大数据的能够,发现了以前根本无法发现的机遇,拓展了自己的市场。那我们就必须要讨论一下大数据的有效性,到底企业利用大数据给企业带来了多少额外增加的价值?这种增加的价值是否能够企业的投入有一个非常好的比例。而且更为重要的一点是,是否只要使用大数据就一定能够给企业带来以前不可能实现的价值?
当然,任何一种新技术的出现都要面临许许多多的挑战,大数据也是一样。只有那种能够给企业带来实际价值的技术才有真正的生命力。任何企业绝对不会为了采用新技术而应用新技术,技术最终的落脚点一定是实现业务价值。
大数据还处于成长当中,许多IT厂商也认为目前大数据需要和传统关系型数据仓库共存。如果企业的确希望利用新兴技术实现业务的突破,那么也应该必须慎重。

6. 大学生应如何应对大数据时代

数据开始主导一切的时代,大学生不管是不是IT行业,都应该去了解大数据。如果你是IT行业的大学生,那么多学一点大数据的知识并没有坏处,而且,大数据未来将于各个行业相互对接,AI技术、云计算也都会和大数据相对接,所以,大学生应该多了解、多学习大数据相关知识,来应对这个时代。

7. 大数据改革时代我们该如何去应对

大数据改革时代我们该如何去应对

对大数据进行进一步深度的分析,并挖掘出对企业发展有利的数据,这是现代企业最常见的行为。而通过对市场的整体分析了解经济增长的内动力以及结构变化和调整,进一步调整产业,以便更好的发挥企业优势,赢得市场,成为同行中的佼佼者,这是任何企业都希望看到的。但是,从大数据提出以来,越来越多的企业表示自己似乎看不懂,大数据变化的太快,让人捉摸不透。而对大数据的改革,我们该如何应对呢?

一、化零为整

数据是零散的,就像一盘散沙,分散在世界各地,企业要想分析市场,就要将这盘散沙捧起来,运用数据分析技术以及特长分析、挖掘埋藏在数据当中的宝贵价值,实现更好的决策,推动企业相关决策的进行。

二、去糟粕,挖精髓

数据泛滥的最直接后果就是数据中有大量无用数据的存在,这些无用的数据会对数据分析技术人员的分析行为造成一定的困扰,对此,技术人员需要对其进行整理、清洗,去掉无用的数据,将有价值的大数据挖掘出来,进行科学管理和分析,严格控制数据的质量,做到真正的数出有源、真实可靠。

三、重视数据源

大数据时代,数据来源不可能仅有一点,尤其是在行业分析当中,不仅要分析自己行业的发展,还要分析竞争对手的数据,更甚者需要分析市场环境的数据。多方面下手才能真正分析出到底是怎么回事,该如何去应对市场危机。

然而,不少企业用户在分析数据的时候,不舍得下血本,只是简单的对自己产品的用户行为以及各种数据进行分析,并不会投资分析大环境以及竞争对数,这样可能导致企业在发展过程中,看不清市场环境,无法做出正确的判断,也就是我们所说的决策失误。

当然,大数据涉及各行各业,分析大数据,不可能仅看一方面,也不可能毫无预算的去分析所有的数据,这样会导致很多浪费,也会增加企业的成本支出。作为现代化企业,最好的做法是转变自己的经营思路,加强各部门之间的沟通协调、保证数据收集的精准,为企业大数据的发展提供更好的环境。

以上是小编为大家分享的关于大数据改革时代我们该如何去应对的相关内容,更多信息可以关注环球青藤分享更多干货

8. 如何解决大数据4个特点带来的四个困难

大数据时代面临挑战的应对策略:

1、合理获取数据

在大数据时代,数据的产生速度飞快而且体量庞大,往往以TB或YB甚至是ZB来衡量。各种机构、个人都在不断地向外产生和发布结构化与非结构化的复杂数据,并进行数据交换,如人们当前最常用的数据来源渠道——互联网,每天的数据交换量已极为惊人。

2、存储随需而变

美国一家知名的 DVD 租赁企业每年都会邀请一些协同处理算法的专家对其用户数据进行分析,从而了解租赁客户的需求。

3、筛选与分析大数据

充分利用数据“洞察”自己身边的人或物,在诸多供给方当中精准地匹配自身需求,从而最大限度地满足自身吁求也是大数据价值的应有之义。

4、理性面对大数据的价值诱惑

毫无疑问,大数据时代将是商业智能“大显身手”的时代。企业利用发达的数据挖掘技术正日益精准地揣摩着消费者心态,并运用各种手段对其“循循善诱” 。

5、云计算和大数据相辅相成

为了满足大数据的需求,商务智能软件必须改变。

9. 如何应对大数据时代的变革机遇挑战

大数据泛指巨量的数据集,因可从中挖掘出有价值的信息而受到重视。《华尔街日报》将大数据时代、智能化生产和无线网络革命称为引领未来繁荣的三大技术变革。麦肯锡公司的报告指出数据是一种生产资料,大数据是下一个创新、竞争、生产力提高的前沿。世界经济论坛的报告认定大数据为新财富,价值堪比石油。因此,发达国家纷纷将开发利用大数据作为夺取新一轮竞争制高点的重要抓手。

大数据时代的来临

互联网特别是移动互联网的发展,加快了信息化向社会经济各方面、大众日常生活的渗透。有资料显示,1998年全球网民平均每月使用流量是1MB(兆字节),2000年是10MB,2003年是100MB,2008年是1GB(1GB等于1024MB),2014年将是10GB。全网流量累计达到1EB(即10亿GB或1000PB)的时间在2001年是一年,在2004年是一个月,在2007年是一周,而2013年仅需一天,即一天产生的信息量可刻满1.88亿张DVD光盘。我国网民数居世界之首,每天产生的数据量也位于世界前列。淘宝网站每天有超过数千万笔交易,单日数据产生量超过50TB(1TB等于1000GB),存储量40PB(1PB等于1000TB)。网络公司目前数据总量接近1000PB,存储网页数量接近1万亿页,每天大约要处理60亿次搜索请求,几十PB数据。一个8Mbps(兆比特每秒)的摄像头一小时能产生3.6GB数据,一个城市若安装几十万个交通和安防摄像头,每月产生的数据量将达几十PB。医院也是数据产生集中的地方。现在,一个病人的CT影像数据量达几十GB,而全国每年门诊人数以数十亿计,并且他们的信息需要长时间保存。总之,大数据存在于各行各业,一个大数据时代正在到来。

信息爆炸不自今日起,但近年来人们更加感受到大数据的来势迅猛。一方面,网民数量不断增加,另一方面,以物联网和家电为代表的联网设备数量增长更快。2007年全球有5亿个设备联网,人均0.1个;2013年全球将有500亿个设备联网,人均70个。随着宽带化的发展,人均网络接入带宽和流量也迅速提升。全球新产生数据年增40%,即信息总量每两年就可以翻番,这一趋势还将持续。目前,单一数据集容量超过几十TB甚至数PB已不罕见,其规模大到无法在容许的时间内用常规软件工具对其内容进行抓取、管理和处理。

数据规模越大,处理的难度也越大,但对其进行挖掘可能得到的价值更大,这就是大数据热的原因。首先,大数据反映舆情和民意。网民在网上产生的海量数据,记录着他们的思想、行为乃至情感,这是信息时代现实社会与网络空间深度融合的产物,蕴含着丰富的内涵和很多规律性信息。根据中国互联网络信息中心统计,2012年底我国网民数为5.64亿,手机网民为4.2亿,通过分析相关数据,可以了解大众需求、诉求和意见。其次,企业和政府的信息系统每天源源不断产生大量数据。根据赛门铁克公司的调研报告,全球企业的信息存储总量已达2.2ZB(1ZB等于1000EB),年增67%。医院、学校和银行等也都会收集和存储大量信息。政府可以部署传感器等感知单元,收集环境和社会管理所需的信息。2011年,英国《自然》杂志曾出版专刊指出,倘若能够更有效地组织和使用大数据,人类将得到更多的机会发挥科学技术对社会发展的巨大推动作用。

大数据应用的领域

大数据技术可运用到各行各业。宏观经济方面,IBM日本公司建立经济指标预测系统,从互联网新闻中搜索影响制造业的480项经济数据,计算采购经理人指数的预测值。印第安纳大学利用谷歌公司提供的心情分析工具,从近千万条网民留言中归纳出六种心情,进而对道琼斯工业指数的变化进行预测,准确率达到87%。制造业方面,华尔街对冲基金依据购物网站的顾客评论,分析企业产品销售状况;一些企业利用大数据分析实现对采购和合理库存量的管理,通过分析网上数据了解客户需求、掌握市场动向。有资料显示,全球零售商因盲目进货导致的销售损失每年达1000亿美元,这方面的数据分析大有作为。

在农业领域,硅谷有个气候公司,从美国气象局等数据库中获得几十年的天气数据,将各地降雨、气温、土壤状况与历年农作物产量的相关度做成精密图表,预测农场来年产量,向农户出售个性化保险。在商业领域,沃尔玛公司通过分析销售数据,了解顾客购物习惯,得出适合搭配在一起出售的商品,还可从中细分顾客群体,提供个性化服务。在金融领域,华尔街“德温特资本市场”公司分析3.4亿微博账户留言,判断民众情绪,依据人们高兴时买股票、焦虑时抛售股票的规律,决定公司股票的买入或卖出。阿里公司根据在淘宝网上中小企业的交易状况筛选出财务健康和讲究诚信的企业,对他们发放无需担保的贷款。目前已放贷300多亿元,坏账率仅0.3%。

在医疗保健领域,“谷歌流感趋势”项目依据网民搜索内容分析全球范围内流感等病疫传播状况,与美国疾病控制和预防中心提供的报告对比,追踪疾病的精确率达到97%。社交网络为许多慢性病患者提供临床症状交流和诊治经验分享平台,医生借此可获得在医院通常得不到的临床效果统计数据。基于对人体基因的大数据分析,可以实现对症下药的个性化治疗。在社会安全管理领域,通过对手机数据的挖掘,可以分析实时动态的流动人口来源、出行,实时交通客流信息及拥堵情况。利用短信、微博、微信和搜索引擎,可以收集热点事件,挖掘舆情,还可以追踪造谣信息的源头。美国麻省理工学院通过对十万多人手机的通话、短信和空间位置等信息进行处理,提取人们行为的时空规律性,进行犯罪预测。在科学研究领域,基于密集数据分析的科学发现成为继实验科学、理论科学和计算科学之后的第四个范例,基于大数据分析的材料基因组学和合成生物学等正在兴起。

麦肯锡公司2011年报告推测,如果把大数据用于美国的医疗保健,一年产生潜在价值3000亿美元,用于欧洲的公共管理可获得年度潜在价值2500亿欧元;服务提供商利用个人位置数据可获得潜在的消费者年度盈余6000亿美元;利用大数据分析,零售商可增加运营利润60%,制造业设备装配成本会减少50%。

大数据技术的挑战和启示

目前,大数据技术的运用仍存在一些困难与挑战,体现在大数据挖掘的四个环节中。首先在数据收集方面。要对来自网络包括物联网和机构信息系统的数据附上时空标志,去伪存真,尽可能收集异源甚至是异构的数据,必要时还可与历史数据对照,多角度验证数据的全面性和可信性。其次是数据存储。要达到低成本、低能耗、高可靠性目标,通常要用到冗余配置、分布化和云计算技术,在存储时要按照一定规则对数据进行分类,通过过滤和去重,减少存储量,同时加入便于日后检索的标签。第三是数据处理。有些行业的数据涉及上百个参数,其复杂性不仅体现在数据样本本身,更体现在多源异构、多实体和多空间之间的交互动态性,难以用传统的方法描述与度量,处理的复杂度很大,需要将高维图像等多媒体数据降维后度量与处理,利用上下文关联进行语义分析,从大量动态而且可能是模棱两可的数据中综合信息,并导出可理解的内容。第四是结果的可视化呈现,使结果更直观以便于洞察。目前,尽管计算机智能化有了很大进步,但还只能针对小规模、有结构或类结构的数据进行分析,谈不上深层次的数据挖掘,现有的数据挖掘算法在不同行业中难以通用。

大数据技术的运用前景是十分光明的。当前,我国正处在全面建成小康社会征程中,工业化、信息化、城镇化、农业现代化任务很重,建设下一代信息基础设施,发展现代信息技术产业体系,健全信息安全保障体系,推进信息网络技术广泛运用,是实现四化同步发展的保证。大数据分析对我们深刻领会世情和国情,把握规律,实现科学发展,做出科学决策具有重要意义,我们必须重新认识数据的重要价值。

为了开发大数据这一金矿,我们要做的工作还很多。首先,大数据分析需要有大数据的技术与产品支持。发达国家一些信息技术(IT)企业已提前发力,通过加大开发力度和兼并等多种手段,努力向成为大数据解决方案提供商转型。国外一些企业打出免费承接大数据分析的招牌,既是为了练兵,也是为了获取情报。过分依赖国外的大数据分析技术与平台,难以回避信息泄密风险。有些日常生活信息看似无关紧要,其实从中也可摸到国家经济和社会脉搏。因此,我们需要有自主可控的大数据技术与产品。美国政府2012年3月发布《大数据研究与发展倡议》,这是继1993年宣布“信息高速公路”之后又一重大科技部署,联邦政府和一些部委已安排资金用于大数据开发。我们与发达国家有不少差距,更需要国家政策支持。

中国人口居世界首位,将会成为产生数据量最多的国家,但我们对数据保存不够重视,对存储数据的利用率也不高。此外,我国一些部门和机构拥有大量数据却不愿与其他部门共享,导致信息不完整或重复投资。政府应通过体制机制改革打破数据割据与封锁,应注重公开信息,应重视数据挖掘。美国联邦政府建立统一数据开放门户网站,为社会提供信息服务并鼓励挖掘与利用。例如,提供各地天气与航班延误的关系,推动航空公司提升正点率。

大数据的挖掘与利用应当有法可依。去年底全国人大通过的加强网络信息保护的决定是一个好的开始,当前要尽快制定“信息公开法”以适应大数据时代的到来。现在很多机构和企业拥有大量客户信息。应当既鼓励面向群体、服务社会的数据挖掘,又要防止侵犯个体隐私;既提倡数据共享,又要防止数据被滥用。此外,还需要界定数据挖掘、利用的权限和范围。大数据系统本身的安全性也是值得特别关注的,要注意技术安全性和管理制度安全性并重,防止信息被损坏、篡改、泄露或被窃,保护公民和国家的信息安全。

大数据时代呼唤创新型人才。盖特纳咨询公司预测大数据将为全球带来440万个IT新岗位和上千万个非IT岗位。麦肯锡公司预测美国到2018年需要深度数据分析人才44万—49万,缺口14万—19万人;需要既熟悉本单位需求又了解大数据技术与应用的管理者150万,这方面的人才缺口更大。中国是人才大国,但能理解与应用大数据的创新人才更是稀缺资源。

大数据是新一代信息技术的集中反映,是一个应用驱动性很强的服务领域,是具有无穷潜力的新兴产业领域;目前,其标准和产业格局尚未形成,这是我国实现跨越式发展的宝贵机会。我们要从战略上重视大数据的开发利用,将它作为转变经济增长方式的有效抓手,但要注意科学规划,切忌一哄而上。

(作者:中国工程院院士)

10. 当代大学生应该如何应对“大数据”带来的机遇与挑战

大数据,或称巨量资料,是指所涉及的资料量规模巨大,以致无法通过目前主流软件工具在合理时间内撷取、管理、处理并整理成为帮助企业达致经营决策目的的资讯。大数据技术不仅能够提高人们利用数据的效率,而且能够实现数据的再利用和重复利用,进而大大降低交易成本,提升人们开发自我潜能的空间。人们可以低成本或零成本进行事物信息全息式的纵向历史比对和横向现实比对。大数据技术自身不仅能够迅速衍生为新兴信息产业,还可以同云计算、物联网和智慧工程技术联动,支撑一个信息技术的新时代。

云计算、物联网、大数据、智慧工程都是新一代信息技术。云计算技术是一种按使用量付费的模式,这种模式可以提供可用的、便捷的、按需的网络访问,进入可配置的计算资源共享池(资源包括网络、服务器、存储、应用软件、服务),这些资源能够被快速提供,只需投入很少的管理工作,或与服务供应商进行很少的交互。云计算技术可以使人们及时利用各类大数据。物联网技术的实质就是物物相连的互联网,物联网的核心和基础仍然是互联网,其用户端延伸和扩展到了任何物品与物品之间,进行信息交换和通信。物联网技术可以溯源大数据和保证信息的真实性。智慧工程就是把感应器嵌入和装备到电网、铁路、桥梁、隧道、公路、建筑、供水系统、大坝、油气管道等各种物体中,并且进行普遍连接,与现有的互联网整合起来,实现人类社会与物理系统的整合。智慧工程可以激活沉寂的大数据。

阅读全文

与如何战胜大数据相关的资料

热点内容
如何进行定位和目标市场选择 浏览:657
银行来款信息是怎么回事 浏览:268
期货交易的书是什么书 浏览:331
金士顿总代理是哪里 浏览:934
奶茶实体店技术培训哪里有 浏览:598
招团长美团事业部产品方向指什么 浏览:210
网卡技术是什么意思 浏览:42
强迫交易罪从犯拿了25万判多少年 浏览:998
广州代理公司需要什么资质 浏览:850
108佛珠产品卖点可以有哪些 浏览:14
委托代理怎么收案 浏览:623
市场调研应该搞清楚哪些内容 浏览:169
微信小商店的产品怎么下架 浏览:558
微商代理费用怎么收费 浏览:32
张庄二手汽车交易市场在哪里 浏览:59
天猫交易平台怎么取消举报 浏览:32
产品集中化策略有哪些 浏览:448
加盟代理商如何开店 浏览:613
农产品直供配送有哪些 浏览:55
数据线可以接多少个灯珠 浏览:524