chenzechao

摘要： git clone git://github.com/mobz/elasticsearch-head.git yum install git npm cd elasticsearch-head npm install -g grunt --registry=https://registry.npm.taobao.org npm config set strict-ssl false ... 阅读全文

摘要： Spark2.3.0依赖的netty-all-4.1.17.Final.jar 与 hbase1.2.0依赖的netty-all-4.0.23.Final.jar 冲突 Ref: https://blog.csdn.net/liumu243/article/details/81111273 阅读全文

摘要： 定位: HIVE：长时间的批处理查询分析 impala:实时交互式SQL查询 impala优缺点优点： 1. 生成执行计划树，不用多次启动job造成多余开销，并且减少中间结果数据写入磁盘，执行速度快 2. 不占用yarn的资源 3. 缺点： 1. 不支持Date类型 2. 与HIVE数据不同步，需要 阅读全文

摘要： return code 2 为SQL报错。 return code 1 一般为权限问题。 具体要看源码。 阅读全文

摘要： -- 重点，目标表无重复数据 从结果可以看出，在无重复数据的情况下，parquet的压缩无用武之地，占用空间比textfile还大，ORC是压缩最强的文件模式。 阅读全文

摘要： Map意为映射，就是将数据映射为其他形式，如转换（加减乘除改格式），拓展（String的split一变多），以及过滤等。输出为KeyValue格式Reduce意为收缩 阅读全文

摘要： sqoop数据校验 阅读全文

摘要： oracle service name connect dest_ip=100.100.100.100 dest_port=1634 dest_dbname=server_name connect="jdbc:oracle:thin:@//${dest_ip}:${dest_port}/${dest_dbname}" 阅读全文

摘要： 1.将报错路径中VanDyke文件夹内的东西删除掉2.运行regedit，在注册表中将HKEY_LOCAL_MACHINA中SOFTWARE里的VanDyke删除3.注册表中打开HKEY_CURRENT_USER,其SOFTWARE里也有VanDyke，将其删除 阅读全文

摘要： CENTOS 7 install mariadb 10.3 cat >/etc/yum.repos.d/MariaDB.repo << 'EOF' [mariadb] name = MariaDB baseurl = http://yum.mariadb.org/10.3/centos7-amd64/ gpgkey=https://yum.mariadb.org/RPM-GPG-KEY-Ma... 阅读全文