文章分类 - 工作经验总结
工作中遇到的问题和学习笔记
摘要：shell 脚本 中的 函数 #!/bin/bash # 指定了shell脚本解释器的路径，而且这个指定路径只能放在文件的第一行。第一行写错或者不写时，系统会有一个默认的解释器进行解释。 db_cr_hub1_ip="`get_database_info mysql.cr_hub1.ip`" db_
阅读全文
摘要：关于sql中的空值null及处理 一、null的特点 1、null来表示未知和不确定。 null 在计算机和编程世界中表示的是未知,不确定。虽然中文翻译为“空”, 但此空(null)非彼空(empty)。null表示的是一种未知状态，未来状态,比如小明兜里有多少钱我不清楚，但也不能肯定为0，这时在计
阅读全文
摘要：union & union all 的作用 SQL UNION 操作符 UNION 操作符用于合并两个或多个 SELECT 语句的结果集。 请注意，UNION 内部的 SELECT 语句必须拥有相同数量的列。列也必须拥有相似的数据类型。同时，每条 SELECT 语句中的列的顺序必须相同。 SQL U
阅读全文
摘要：按多字段分组、从多表中拿字段 在SQL语句中 : 如果因为业务逻辑的要求，需要按不止一个字段进行group by，或者需要从多个表中拿字段 -- 多个分组字段之间用 , 隔开 -- 例如： select formatted_ent_name,id,ROW_NUMBER() over(PARTITIO
阅读全文
摘要：union 按顺序合并结果集 例如: select 'B701' as intf union all select 'B702' as intf union all select 'B703' as intf union all select 'B704' as intf union all sel
阅读全文
摘要：eclipse安装和jdk安装（windows平台）
阅读全文
摘要：Linux常用高级命令 命令 命令解释 top 查看内存 df -h 查看磁盘的存储情况 du -h 查看目录的存储情况 iotop 查看磁盘IO读写(yum install iotop安装） iotop -o 直接查看比较高的磁盘读写程序 netstat -tunlp | grep 端口号 查看端
阅读全文
摘要：decode()函数的用法、Mod(a,b) 用法 decode 函数在sql中作用相当于case when，意思是根据某一字段的值作为条件，根据这个条件进行输出。 例如 case when 语句： 例如：根据身份证判定该员工是否是男女，从而实现对性别的更新。 身份证号的第17位数字，奇数为男性，偶
阅读全文
摘要：数据同步工具Sqoop--功能例子 数据中心开发过程中主要使用的数据同步工具为Sqoop。Sqoop是一款开源的工具，主要用于在Hadoop(Hive)与传统的数据库(mysql)间进行数据的传递，可以将一个关系型数据库（例如：MySQL ,Oracle等）中的数据导进到Hadoop的HDFS中
阅读全文
摘要：HDFS 中 -test 的用法（判断后面路径的属性） hadoop fs -test -[参数] <path> 参数： -d ：后面路径为目录，返回0 -e ：后面路径存在，返回0 -f ：后面路径为文件，返回0 -s ：若path大小大于0字节，返回0 -z ：若path大小为0字节，返回0，否
阅读全文
浙公网安备 33010602011771号