摘要：
举例a、b表： bId bNum 1 20 2 30 aId aNum 1 10 2 20 3 30 left join以左表为准 select * from a left join b on a.aId=b.bId; aId aNum bId bNum 1 10 1 20 2 20 2 30 3 阅读全文
posted @ 2020-04-19 22:22
勤奋的园
阅读(329)
评论(0)
推荐(0)
摘要：
1. hive 表及数据准备 建表，并插入初始数据。向表中插入 hive> use test; hive> create table kwang_test (id int, name string); hive> insert into kwang_test values(1,'kwang'); h 阅读全文
posted @ 2020-04-19 22:21
勤奋的园
阅读(53416)
评论(0)
推荐(2)
摘要：
通用参数 import export 通用通用参数选项 含义说明–connect 指定JDBC连接字符串–connection-manager 指定要使用的连接管理器类–driver 指定要使用的JDBC驱动类–hadoop-mapred-home 指定$HADOOP_MAPRED_HOME路径–h 阅读全文
posted @ 2020-04-19 22:19
勤奋的园
阅读(2960)
评论(0)
推荐(0)
摘要：
1、hdfs文件的权限问题 问题分析与解决： 根据报错信息是hdfs文件的权限问题，命令进入集群执行的用户为null，而hdfs文件所有者为hdfs。 要么以用户hdfs执行命令，要么调整hdfs文件的权限，因为我只是使用hdfs文件的其中之一，暂时考虑：以hdfs用户执行命令。 在~/.bash_ 阅读全文
posted @ 2020-04-19 22:12
勤奋的园
阅读(2556)
评论(0)
推荐(0)
摘要：
转载：https://www.cnblogs.com/felixzh/p/9855029.html 前些日子为了搞清楚Kerberos原理，把MIT的Kerberos经典对话看了几遍，终于有了一个稍微清晰的认识，这里稍微记录下，因为Kerberos是使用传统加密技术实现的一个认证机制，所以顺便备忘下 阅读全文
posted @ 2020-04-19 18:09
勤奋的园
阅读(520)
评论(0)
推荐(0)
摘要：
转载：https://www.cnblogs.com/wilburxu/p/9174353.html 相信对于许多的朋友来说，可能听说过LDAP，但是实际中对LDAP的了解和具体的原理可能还比较模糊，今天就从“什么是LDAP”、“LDAP的主要产品”、“LDAP的基本模型”、“LDAP的使用案例”四 阅读全文
posted @ 2020-04-19 18:07
勤奋的园
阅读(216)
评论(0)
推荐(0)
摘要：
查看所有 pod 列表, -n 后跟 namespace, 查看指定的命名空间 kubectl get pod kubectl get pod -n kube kubectl get pod -o wide 查看 RC 和 service 列表， -o wide 查看详细信息 kubectl get 阅读全文
posted @ 2020-04-19 18:05
勤奋的园
阅读(761)
评论(0)
推荐(0)
摘要：
本文来源：鲜枣课堂 2010年，几个搞IT的年轻人，在美国旧金山成立了一家名叫“dotCloud”的公司。 这家公司主要提供基于PaaS的云计算技术服务。具体来说，是和LXC有关的容器技术。 LXC，就是Linux容器虚拟技术（Linux container） 后来，dotCloud公司将自己的容器 阅读全文
posted @ 2020-04-19 18:03
勤奋的园
阅读(781)
评论(0)
推荐(0)
摘要：
原文链接：https://www.cnblogs.com/sammyliu/p/5729026.html 1. Linux 上的设备 （device） Linux 操作系统中，各种设备驱动（device driver）通过设备控制器（device controller）来管理各种设备（device） 阅读全文
posted @ 2020-04-19 18:01
勤奋的园
阅读(1292)
评论(0)
推荐(0)
摘要：
lsblk 查看的是block device,也就是逻辑磁盘大小。 df查看的是file system, 也就是文件系统层的磁盘大小 阅读全文
posted @ 2020-04-19 17:58
勤奋的园
阅读(2951)
评论(0)
推荐(0)
摘要：
Linux的scp命令可以实现两台服务器之间互相拷贝文件，我的测试环境是Centos6.4. 基本的命令格式 scp 拷贝目标文件 远程用户@远程主机地址:远程目录 一、从本机拷贝到目标远程主机 # scp php-7.2.4.tar.gz root@192.168.9.142:/usr/local 阅读全文
posted @ 2020-04-19 17:57
勤奋的园
阅读(212)
评论(0)
推荐(0)
摘要：
随机返回指定行数的样本数据hadoop fs -cat /test/gonganbu/scene_analysis_suggestion/* | shuf -n 5返回前几行的样本数据hadoop fs -cat /test/gonganbu/scene_analysis_suggestion/* 阅读全文
posted @ 2020-04-19 17:56
勤奋的园
阅读(4186)
评论(0)
推荐(0)
摘要：
比较字符串类型的时间大小 数据库中的时间是varchar类型的，MySql使用CURDATE()来获取当前日期，SqlServer通过GETDATE()来获取当前日期 1. 直接使用字符串来比较 注意：要保证两个数据的类型完全相同，否则异常 比如A："2016-09-01"，如果B数据是："2016 阅读全文
posted @ 2020-04-19 17:51
勤奋的园
阅读(8208)
评论(0)
推荐(0)
摘要：
原文链接：http://blog.javachen.com/2014/06/24/tuning-in-mapreduce/ 本文主要记录Hadoop 2.x版本中MapReduce参数调优，不涉及Yarn的调优。 Hadoop的默认配置文件（以cdh5.0.1为例）： core-default.xm 阅读全文
posted @ 2020-04-19 17:48
勤奋的园
阅读(977)
评论(0)
推荐(0)
浙公网安备 33010602011771号