摘要： 阅读全文

摘要： 在配置Centos7网络的时候，可能出出现虚拟机、本地以及外网三者之间ping不通的问题，可以从以下的几个方面排查： 1、确定需要管理员权限才能修改配置网络，如下图： 需要点下更改设置，然后出现下面的图片才是正确的： 2、仔细核对你的ifcfg-en333的配置文件的内容 几个关键的单词，比如：IP 阅读全文

摘要： 如何在保证存储量的情况下，又能保证数据的检索速度。 HBase提供了完善的海量数据存储机制，Solr、SolrCloud提供了一整套的数据检索方案。 使用HBase搭建结构数据存储云，用来存储海量数据；使用SolrCloud集群用来搭建搜索引擎，将要查找的结构化数据的ID查找出来，只配置它存储ID。 阅读全文

摘要： 1.操作系统选择 Hadoop产品是由Java语言开发的，所以推荐的是Linux操作系统，理由很简单开源免费，推荐的操作系统CentOS。 CentOS是一个基于Red Hat 企业级 Linux 提供的可自由使用的源代码企业级的 Linux 发行版本。 CentOS两年发行一次新版本，每个版本都会 阅读全文

摘要： 1.Sqoop是什么 Sqoop:SQL-to-Hadoop，传统数据库与Hadoop间数据同步工具。（MySQL、Oracle <==> HDFS、HBase、Hive） Sqoop 的核心设计思想是利用 MapReduce 分布式批处理，加快了数据传输速度，保证了容错性。也就是说 Sqoop 的 阅读全文

摘要： 使用参考：Teradata自定义函数UDF(chs_instr) 源码下载：百度网盘链接 阅读全文

摘要： “下一代大数据处理引擎王者” Apache Flink 它既能保证数据一致性“Exactly Once"，又能实时快速的处理海量数据。与生俱来的 Watermark 功能让它能对复杂数据乱序场景应对自如，它充分体现了“批”、“流”一体的完美结合同时又代表着“流”、“表”二象性的和谐统一。 两种数据集 阅读全文

摘要： MapReduce MapReduce程序从磁盘读取输入数据，把数据分解成键/值对，经过混洗、排序、归并等数据处理后产生输出，并将最终结果保存在磁盘。Map阶段和Reduce阶段的结果均要写磁盘，这大大降低了系统性能。也是由于这个原因，MapReduce大都被用于执行批处理任务。Map阶段和Redu 阅读全文

摘要： 1.gcc安装 2.基本语法 gcc最基本的用法是：gcc [options] [filenames] 说明：如果已经为最新的目标文件，则不重新编译。使用示例test.c源码如下： （1）编译-c （2）链接-o （3）编译链接-o （4）代码优化-O和引用头文件目录-I （5）函数库引用-lnam 阅读全文

摘要： 软件包管理是指系统中一种安装和维护软件的方法。通常软件以包的形式存储在仓库（repository）中，能满足许多人所有需要的软件。 在GNU/Linux(以下简称Linux)操作系统中，RPM和DPKG为最常见的两类软件包管理工具，他们分别应用于基于RPM软件包的Linux发行版本和DEB软件包的L 阅读全文