第一次作业

1.为什么产生大数据技术?

因为当今社会是数据时代

互联网的发展令交流信息急速增加，而大数据是信息产业持续高速增长的新引擎

并且大数据利用在各大领域都发挥着重要的作用

如：在商业领域，对大数据的分析可以使零售商实时掌握市场动态并迅速做出应对，可以为商家制定更加精准有效的营销策略提供决策支持，可以帮助企业为消费者提供更加及时和个性化的服务。 

        在医疗领域，可提高诊断准确性和药物有效性。   

 

2.为什么要学习大数据技术？

1.大数据是中国官方重点扶持的战略性新兴产业，已逐步从概念走向落地“大数据”和“虚拟化”两大热门领域，得到了广泛关注和重视。

其次，数据分析正在快于预期，曾经有一项调查显示，数据分析的速度要比预计的快得多。调查发现数据分析技术将在未来3年内寻找技术。

而且大数据还能帮助我们开发新的收入来源。分析并将好的数据信息用于良好用途。

3.简述大数据、云计算、物联网、区块链和人工智能的概念和相互关系。

大数据是物联网和云计算发展到一定阶段的必然结果，物联网为大数据提供了大部分的数据来源，而云计算则为大数据提供了支撑平台。

大数据又是人工智能的重要基础，人工智能需要通过大数据完成学习和决策的过程。从整个智能系统的体系结构来看，物联网是触角，云计算是支撑平台，大数据提供数据分析，人工智能完成最终的决策。

区块链技术未来与大数据技术的结合应用将会带来一系列重要的改变，区块链技术本身就是一种数据存储方式，而且区块链存取的数据具有较强的安全性和防篡改特性，大数据与区块链的结合还能解决数据价值化过程中的“确权”问题和流通问题，可以说未来大数据与区块链的结合将更加紧密。

 

4.用图表和简单的文字简要描述大数据的发展前景和就业趋势，并谈谈你的看法。

大数据开发人员的薪资是较为可观的，同时社会对大数据人才的需求也是十分旺盛的。而可供大数据人才选择的就业方向也是多种多样的，如

（1）大数据维护、研发、架构工程师方向，所涉及的职业岗位为：大数据工程师、大数据维护工程师等；

（2）大数据挖掘、分析方向。所涉及的职业岗位为：大数据分析师、大数据高级工程师、大数据分析师专家等

我觉得大数据就业情景相对而言是非常不错的，以后的前景是值得期待的。

大数据可能带来什么样的问题？如何应对这些隐患？

 

大数据在落地应用的过程中，潜在的问题涉及到数据泄露问题，而数据泄露不仅可能会侵犯个人的隐私，甚至会泄露企业的核心技术，所以如果大数据不能解决数据泄露问题，大数据技术未来的发展将会受到很大的制约，而大数据作为人工智能的基础，大数据发展速度减缓也会在一定程度上影响人工智能技术的发展。

除了数据泄露之外，大数据技术如果在使用的过程中，没有边界的限制，很有可能会对大数据的使用者形成一个“认知壁垒”，这对于使用者来说，也是一个潜在的风险。所以，在大数据的落地应用过程中，应该让大数据使用者更多地了解大数据技术的细节，让大数据的参与者共同推动大数据的合理发展。

大数据所存储的数据非常巨大，往往采用分布式的方式进行存储，而正是由于这种存储方式，存储的路径视图相对清晰，而数据量过大，导致数据保护，相对简单，黑客较为轻易利用相关漏洞，实施不法操作，造成安全问题。由于大数据环境下终端用户非常多，且受众类型较多，对客户身份的认证环节需要耗费大量处理能力。　　由于APT攻击具有很强的针对性，且攻击时间长，一旦攻击成功，大数据分析平台输出的最终数据均会被获取，容易造成的较大的信息安全隐患。

在对大数据进行数据采集和信息挖掘的时候，要注重用户隐私数据的安全问题，在不泄露用户隐私数据的前提下进行数据挖掘。需要考虑的是在分布计算的信息传输和数据交换时保证各个存储点内的用户隐私数据不被非法泄露和使用是当前大数据背景下信息安全的主要问题。同时，当前的大数据数据量并不是固定的，而是在应用过程中动态增加的，但是，传统的数据隐私保护技术大多是针对静态数据的，所以，如何有效地应对大数据动态数据属性和表现形式的数据隐私保护也是要注重的安全问题。最后，大数据的数据远比传统数据复杂，现有的敏感数据的隐私保护是否能够满足大数据复杂的数据信息也是应该考虑的安全问题。

大数据的数据类型和数据结构是传统数据不能比拟的，在大数据的存储平台上，数据量是非线性甚至是指数级的速度增长的，各种类型和各种结构的数据进行数据存储，势必会引发多种应用进程的并发且频繁无序的运行，极易造成数据存储错位和数据管理混乱，为大数据存储和后期的处理带来安全隐患。当前的数据存储管理系统，能否满足大数据背景下的海量数据的数据存储需求，还有待考验。不过，如果数据管理系统没有相应的安全机制升级，出现问题后则为时已晚。

存储管理风险，异常流量攻击，信息泄露等安全隐患