大数据概述

 1.为什么产生大数据技术?

从本质上来说,大数据就是曾经被称为数据仓库的逻辑延伸。顾名思义,大数据就是一个大型的数据仓库,一般有一个能支持业务决策的业务重点。如果是链接到客户的所有记录呢?将这么多不同的数据源互相映射,一般的数据库还做不到。另外,需要链接的数据量是非常巨大的。这就产生了大数据概念。大数据使用特殊的数据结构来组织和访问巨大数量的数据,可能达到多个艾字节的范围。一般情况下,这需要跨多个服务器和离散数据存储进行并行计算,而小企业往往难以维持这种大数据的存储库。但是,大数据正逐渐成为云服务提供商能提供的一种服务,从而把大数据应用推向更多的公司。

2.为什么要学习大数据技术?

1.国家对大数据发展的支持。2.应用领域广泛。  3.人才需求巨大。

3.用图表和简单的文字简要描述大数据的发展前景和就业趋势,并谈谈你的看法。

(1) 人才缺口:未来3至5年,中国需要200万+大数据人才,目前大数据从业人数不足50万,市场需要远远得不到满足。总结来说就是,未来大数据人才缺口会越来越大,缺的人多了,自然好就业。

(2) 职位薪资:普通大数据开发工程师的基本岗位薪资起步即1万+,一般入职薪资13000元左右,3年以上工作大数据开发工程师薪资高达30000元/月。

(3) 行业前景:2017年中国大数据产业总体规模为4700亿元人民币,预计2018年将突破5700亿元,未来大数据与云计算、AI相结合,将缔造数百个就业新岗位。说白了就是行业前景可观,未来可期。

(4) 实际问题:企业需求,BAT,滴滴,今日头条重金招贤纳士,急寻大数据人才,校招年薪水平均在30万以上,80%中小型企业大数据建设已经起步,需求量大增。有大企业需求,未来就业前景自然不言而喻。

(5) 总结:大数据行业应用广泛,大数据职业的相关人才匮乏,人才缺口非常大。职业选择多达几十种,要升职加薪很容易!可以说,未来的大数据工作,就意味着高工资,稳定,广泛的职业使用度、优越感……

4.大数据可能带来什么样的问题?如何应对这些隐患?

1、数据收集时带来的风险:在大数据环境中,可以通过用户的网址搜索记录、手机上网记录、淘宝购物记录等信息来获取用户的信息,如兴趣爱好、日常生活等。
但是,这些数据的收集其实都是在用户未知的情况下进行的,用户是不清楚自己的这些信息是被用于哪些用途,亦或是谁用了这些信息,也不清楚这些信息泄露以后是由谁来负责。因此,在这样的情况下,用户的个人信息隐私安全是非常危险的。
2、安全漏洞多,数据泄露风险大:部分大型公司的安全漏洞比较多,而且这些公司也可能会存在对用户数据的违规使用,其安全协议过于宽松。
因此,一旦泄露,就非常危险,因为不少公司掌握的用户数据不仅仅是一个号码一个地址那么简单,而是可能是银行卡信息。
3、在数据分析和挖掘的时候,可能会分析出用户的隐私信息,匿名就再无作用:在分析与挖掘有价值的信息时,很大可能会分析出用户的隐私信息,不但有泄露隐私的风险,同时也可能导致隐私保护的方法失效,例如匿名。
4、无意识歧视:其实这样的情况目前已经非常普遍,当你申请贷款、工作招聘等时候,决策者非常依赖大数据来帮助他们做出决定,因此很可能会出现无意识地根据种族、性别或者年龄筛选,出现歧视的情况。
5、数据相互融合能够推理出个人所有的敏感信息:数据的融合使多个数据融合在一体,从而识别出相应的实体。通常从一些非常简单的数据收集,如用户的购物记录、网上搜索记录等。

如何应对: 

一、监控企业的设备和硬件

二、备份数据并单独存储以防止数据丢失

三、做好数据的安全工作

posted @ 2021-09-06 21:07  kiritle  阅读(93)  评论(0编辑  收藏  举报