01大数据概论

1.为什么产生大数据技术？

       首先，在人物方面，大数据的产生是人、机、物协同作用的结果。在数据不断发展过程中，数据的主体从以往的具有主体性的人慢慢演变为人机物三者以及三者的统一体。首先，人类的生产活动和生存活动都会产生大量的数据。其次，信息系统本身也产生大量的数据，这些数据以文件、图片、视频等形式存在，比如文件的复制和数据备份都属于这类数据，这部分系统本身的数据基数很大，不应该被我们忽视。最后，我们生活中的各类物品也会产生数据，比如各种地理信息采集设备、传感器和摄像头等数据采集设备，这些物品虽然是由人类生产制造出来的，但是一经成型便成为世界中的独立存在物。这人机物三者的相互作用是大数据产生的根本原因。

       所以大数据顺着时代发展和人们的需求而产生。

2.为什么要学习大数据技术？

       首先，学习大数据的原因就是大数据分析的采用率很高，现在很多公司都开始使用大数据这一技术，正如公司开始转向社交媒体品牌广告和客户参与一样，他们也开始转向数据分析。今天几乎不可能找到没有社交媒体的品牌。就数据分析适应而言也是如此。在不久的将来，每个公司都将需要数据分析专家。这使得它成为一个明智的职业生涯，实际上有一个未来的业务。因此，现在大数据的工作人员十分吃香。

       其次，数据分析正在快于预期，曾经有一项调查显示，数据分析的速度要比预计的快得多。调查发现数据分析技术将在未来3年内寻找技术。因此，在未来十年中，数据分析工作可以说是一个铁饭碗。

3.简述大数据、云计算、物联网、区块链和人工智能的概念和相互关系。

       从一个广义的人类智慧拟化的实体的视角看，它们是一个整体，相辅相成：物联网是这个实体的眼睛、耳朵、鼻子和触觉；而大数据是这些触觉到的信息的汇集与存储；人工智能未来将是掌控这个实体的大脑；云计算可以看作是大脑指挥下的对于大数据的处理并进行应用。

       大数据：是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力来适应海量、高增长率和多样化的信息资产。基于物联网的应用，人工智能的基础。

       云计算：是计算、存储、通讯工具，物联网、大数据和人工智能必须依托云计算的分布式处理、分布式数据库和云存储、虚拟化技术才能形成行业级应用。

       物联网：物物相连的互联网，利用局部网络或互联网等通信技术把人与物、物与物相连在一起，是互联网的延伸；是大数据的基础，记录人、事、物及之间互动的数据。

       区块链：是比特币的底层技术架构，它在本质上是一种去中心化的分布式账本。

       人工智能：是研究、开发用于模拟、延伸和扩展人的智能的理论、方法、技术及应用系统的一门新的技术科学；是大数据的最理想应用，反哺物联网。

4.用图表和简单的文字简要描述大数据的发展前景和就业趋势，并谈谈你的看法。

       大数据行业整体市场规模及预测

        由图可以分析出，中国大数据行业的发展依然稳中有升，市场规模达到了 200多亿元，增速超过 39%。未来伴随政策的支持和资本的强势注入，中国大数据的规模将领先于全世界。

 

        企业哪些方面需要大数据

        大数据分析对企业的发展越来越重要，35.1%以上的企业已经开始在企业内部应用到了大数据;34.2%的企业正在考虑应用大数据，22.9%的企业在未来1年有应用大数据的计划，仅仅有7.8%的企业暂不考虑应用大数据。

        所以从整体来看，大数据的就业前景很好，发展也很快，应用范围也特别广泛。

5.大数据可能带来什么样的问题？如何应对这些隐患？

（一）大数据存在的问题：

（1）存在信息收集隐患。在大数据环境下，有些APP存在通过用户的手机上网记录、网址搜索记录等信息获取用户的信息，如身份信息、住址、日常生活等。也有某些企业通过软件登录收集用户信息后非法贩卖给其他机构。

（2）存在安全隐患。大数据所存储的数据非常巨大，往往采用分布式的方法进行存储，而数据量过大，导致数据保护相对简单，黑客较为轻易利用相关漏洞实施不法操作，造成安全问题。

（3）存在存储管理风险。在大数据的存储平台上，数据量是非线性甚至是指数级的速度增长的，各种类型和各种结构的数据进行数据存储，势必会引发多种应用进程的并发且频繁无序的运行，极易造成数据存储错位和数据管理混乱，从而为大数据存储和后期的处理带来安全隐患。

（二）应对隐患的方法：

（1）对于用户来说，不要轻易下载不明APP、不要点有风险的链接。

（2）对于企业来说，需要监控企业的设备和硬件。

（3）备份数据并单独存储以防数据丢失。