首页 大数据 正文

关于大数据的问题(关于大数据的问题和建议)

大数据 29
本篇文章给大家谈谈关于大数据的问题,以及关于大数据的问题和建议对应的知识点,希望对各位有所帮助,不要忘了收藏本站喔。 本文目录一览: 1、大数据发展遇到的困境 2、

本篇文章给大家谈谈关于大数据的问题,以及关于大数据的问题和建议对应的知识点,希望对各位有所帮助,不要忘了收藏本站喔。

本文目录一览:

大数据发展遇到的困境

大数据的理念已经被追捧多年,但是还远未达到人们想象的完全实用的程度。大数据的发展受阻主要表现在以下几个方面:

1.数据基础的缺失

大数据发展的前提条件是要有丰富的数据源,对于制造业,IT行业数据化程度比较高,虽然缺少资源共享和信息交换,但至少可以在公司内部探索和尝试。

但对于教育,医疗行业数据化程度还是远远落后于大数据时代的需求。单从患者的角度考虑,自己在各个医院的病例和居家检测的医学数据。如果将这些数据利用起来,就会遇到数据源不算,数据格式不统一,隐私问题等等。

2.数据孤岛之踵

不同的数据源独立存在,不能够互相共享,形成了一个个数据孤岛。

政府部门缺乏数据开放的动力,由于其掌握的数据有一定的敏感性而趋于保守态度。比如税务部门的个人纳税信息会涉及到个人隐私,公安部门的监控信息更是涉及到个人的人身安全问题。

各大企业不会随便开放自身有价值的数据,因为它有巨大的商业价值,也关系到企业的生死存亡。比如搜索引擎,谷歌的搜寻效果比其他的好,其实他们的技术差别不大。真正的差异是谷歌的数据量大,能够找到最佳的搜索策略。而其他的搜索引擎则相反,从而造成恶性循环。

即使没有商业竞争,企业也会尽量独占数据。比如航空公司的航班晚点,他不会提前通知,而会出于商业利益选择在乘客登记结束后广播通知。

3.难以突破创新的瓶颈

对于相应行业数据垄断的大企业,利用自身垄断地位阻碍创新使垄断地位更加坚固。搜索引擎就是一个很好的案例,还有某互联网公司利用资源优势模仿竞争对手的创新产品,并且挤垮对手。

4.个人隐私

个人信息越来越多的被别人掌握,我们既不能阻止,也不知道会产生怎样的后果。一方面,我们的虚拟世界和实际生活轨迹可以通过大数据洞察一切,预测我们的行为。另一方面,作为数据的主人,却不知道数据如何被记录,流向哪里,被谁利用,这个过程我们一无所知。

大数据的发展需要解决个人隐私问题。一方面不能被无限制的使用,每个人都有对个人隐私有知情权,拒绝的权利。另一方面需要将个人隐私数据找到安全,可靠的方法共享,这样大数据才能够发展。

5.其他方面

数据的泛滥,盲目的崇拜等

大数据安全问题有哪些

大数据关系到网络信息安全,比较明显的影响主要表现在以下几个方面

一、规模、实时性和分布式处理大数据的本质特征(使大数据解决超过以前数据管理系统的数据管理和处理需求,例如,在容量、实时性、分布式架构和并行处理等方面)使得保障这些系统的安全更为困难。大数据集群具有开放性和自我组织性,并可以使用户与多个数据节点同时通信。

二、嵌入式安全:在涉及大数据的疯狂竞赛中,大部分的开发资源都用于改善大数据的可升级、易用性和分析功能上。只有很少的功能用于增加安全功能。  但是,你希望得到嵌入到大数据平台中的安全功能。你希望开发人员在设计和部署阶段能够支持所需要的功能。你希望安全功能就像大数据集群一样可升级、高性能、自组织。

问题是,开源系统或多数商业系统一般都不包括安全产品。而且许多安全产品无法嵌入到Hadoop或其它的非关系型数据库中。多数系统提供最少的安全功能,但不足以包括所有的常见威胁。在很大程度上,你需要自己构建安全策略。

三、应用程序:面向大数据集群的大多数应用都是Web应用它们利用基于Web的技术和无状态的基于REST的API。基于Web的应用程序和API给这些大数据集群带来了一种最重大的威胁。在遭受攻击或破坏后,它们可以提供对大数据集群中所存储数据的无限制访问应用程序安全、用户访问管理及授权控制非常重要,与重点保障大数据集群安全的安全措施一样都不可或缺。

大数据带来的弊端

1、社会安全问题,

2、个人隐私,

3、对于国民经济的威胁,

4、国家安全利益,

5、秘密保护。

大数据带来的弊端

1、社会安全问题

中国网民已经接近6亿,每时每刻都产生着大量的数据,也消费着大量的数据,网络的放大效应、传播的速度和动员的能力越来越大,各种社会的矛盾叠加,致使社会群体性事件频发。

2、个人隐私

人们可以利用的信息技术工具无处不在,有关个人的各种信息也同样无处不在。在网络空间里,身份越来越虚拟,隐私也越来越重要。根据哈佛大学近期发布的一项研究报告,只要有一个人的年龄、性别和邮编,就能从公开的数据当中搜索到这个人约87%的个人信息。

3、对于国民经济的威胁

堪称智能交通、智慧电网的国民经济运行和智能社会发展高度依赖信息基础,这些重要的信息基础设施、网络化智能化的程度越高,安全也就越脆弱。

4、国家安全利益

网络空间信息安全、问题严重性、迫切性在很大程度上已经远远超过其他的传统安全,当今主权国家所面临的所有非传统安全威胁总是面临着沧海一粟的困境,政府要找的那根针往往沉没在浩瀚的大海中。

5、秘密保护

美国国家安全局以及网络巨头的关系正是计算能力和海量数据的结合,因此全球大部分的数据都掌握在他们手中,他们大量的数据在网上是没有保护的。

上述就是关于大数据所带来弊端的介绍了,希望能对小伙伴们有所帮助哟。

关于大数据的几个问题!

大数据就是大量数据了,比如淘宝网存储的用户信息,用户购买记录等,这个数据量达到PB级了。

大数据带来的优势不好说啊,见过这样的大数据才有感觉。

大数据应用:最直观还是淘宝、京东这些,有没有注意到你浏览过、买过一些产品之后,有些广告推送就会给推送相关产品,这就是大数据的应用,通过分析你的购买记录,分析你可能感兴趣的商品,比如你买过婴儿奶粉,那你对纸尿裤、湿纸巾可能就感兴趣,这些都是后台大数据分析平台干的事情。

同上。

理解不够深刻,觉得可做的事情挺多,尤其是政府,大数据很有用,比如城市交通状况的预测、停车引导等等,比如犯罪嫌疑人的追踪(这个需要多方面的技术配合)。

大数据存在哪些问题?

数据存储问题:随着技术不断发展,数据量从TB上升至PB,EB量级,如果还用传统的数据存储方式,必将给大数据分析造成诸多不便,这就需要借助数据的动态处理技术,即随着数据的规律性变更和显示需求,对数据进行非定期的处理。同时,数量极大的数据不能直接使用传统的结构化数据库进行存储,人们需要探索一种适合大数据的数据储存模式,也是当下应该着力解决的一大难题。

分析资源调度问题:大数据产生的时间点,数据量都是很难计算的,这就是大数据的一大特点,不确定性。所以我们需要确立一种动态响应机制,对有限的计算、存储资源进行合理的配置及调度。另外,如何以最小的成本获得最理想的分析结果也是一个需要考虑的问题。

专业的分析工具:在发展数据分析技术的同时,传统的软件工具不再适用。目前人类科技尚不成熟,距离开发出能够满足大数据分析需求的通用软件还有一定距离。如若不能对这些问题做出处理,在不久的将来大数据的发展就会进入瓶颈,甚至有可能出现一段时间的滞留期,难以持续起到促进经济发展的作用。

大数据面临哪些安全与隐私问题?

(一)大数据遭受异常流量攻击

大数据所存储的数据非常巨大,往往采用分布式的方式进行存储,而正是由于这种存储方式,存储的路径视图相对清晰,而数据量过大,导致数据保护,相对简单,黑客较为轻易利用相关漏洞,实施不法操作,造成安全问题。由于大数据环境下终端用户非常多,且受众类型较多,对客户身份的认证环节需要耗费大量处理能力。由于APT攻击具有很强的针对性,且攻击时间长,一旦攻击成功,大数据分析平台输出的最终数据均会被获取,容易造成的较大的信息安全隐患。

(二)大数据信息泄露风险

大数据平台的信息泄露风险在对大数据进行数据采集和信息挖掘的时候,要注重用户隐私数据的安全问题,在不泄露用户隐私数据的前提下进行数据挖掘。需要考虑的是在分布计算的信息传输和数据交换时保证各个存储点内的用户隐私数据不被非法泄露和使用是当前大数据背景下信息安全的主要问题。同时,当前的大数据数据量并不是固定的,而是在应用过程中动态增加的,但是,传统的数据隐私保护技术大多是针对静态数据的,所以,如何有效地应对大数据动态数据属性和表现形式的数据隐私保护也是要注重的安全问题。最后,大数据的数据远比传统数据复杂,现有的敏感数据的隐私保护是否能够满足大数据复杂的数据信息也是应该考虑的安全问题。

(三)大数据传输过程中的安全隐患

数据生命周期安全问题。伴随着大数据传输技术和应用的快速发展,在大数据传输生命周期的各个阶段、各个环节,越来越多的安全隐患逐渐暴露出来。比如,大数据传输环节,除了存在泄漏、篡改等风险外,还可能被数据流攻击者利用,数据在传播中可能出现逐步失真等。又如,大数据传输处理环节,除数据非授权使用和被破坏的风险外,由于大数据传输的异构、多源、关联等特点,即使多个数据集各自脱敏处理,数据集仍然存在因关联分析而造成个人信息泄漏的风险。

基础设施安全问题。作为大数据传输汇集的主要载体和基础设施,云计算为大数据传输提供了存储场所、访问通道、虚拟化的数据处理空间。因此,云平台中存储数据的安全问题也成为阻碍大数据传输发展的主要因素。

个人隐私安全问题。在现有隐私保护法规不健全、隐私保护技术不完善的条件下,互联网上的个人隐私泄露失去管控,微信、微博、QQ等社交软件掌握着用户的社会关系,监控系统记录着人们的聊天、上网、出行记录,网上支付、购物网站记录着人们的消费行为。但在大数据传输时代,人们面临的威胁不仅限于个人隐私泄露,还在于基于大数据传输对人的状态和行为的预测。近年来,国内多省社保系统个人信息泄露、12306账号信息泄露等大数据传输安全事件表明,大数据传输未被妥善处理会对用户隐私造成极大的侵害。因此,在大数据传输环境下,如何管理好数据,在保证数据使用效益的同时保护个人隐私,是大数据传输时代面临的巨大挑战之一。

(四)大数据的存储管理风险

大数据的数据类型和数据结构是传统数据不能比拟的,在大数据的存储平台上,数据量是非线性甚至是指数级的速度增长的,各种类型和各种结构的数据进行数据存储,势必会引发多种应用进程的并发且频繁无序的运行,极易造成数据存储错位和数据管理混乱,为大数据存储和后期的处理带来安全隐患。当前的数据存储管理系统,能否满足大数据背景下的海量数据的数据存储需求,还有待考验。不过,如果数据管理系统没有相应的安全机制升级,出现问题后则为时已晚。

关于关于大数据的问题和关于大数据的问题和建议的介绍到此就结束了,不知道你从中找到你需要的信息了吗 ?如果你还想了解更多这方面的信息,记得收藏关注本站。

扫码二维码