2017年2月
linux命令
摘要： netstat -tnlp jps -lm 查看所有进程及其对应的进程号 hdfs dfs -cat /test/2016041211 |wc -l 查看hadoop中的文件的条数 查看端口占用：netstat -apn | grep 9527 查看磁盘使用情况 : df -h 查看内存使用情况 : free -m 查看单个文件夹大小： du -bs dir_na... 阅读全文
posted @ 2017-02-24 16:01 zqzdong 阅读(134) 评论(0) 推荐(0)
读取压缩文件下多级目录的文件（按行读取）
摘要： import java.io.BufferedReader; import java.io.IOException; import java.io.InputStreamReader; import java.util.ArrayList; import java.util.Enumeration; import java.util.List; import org.apache.tools.... 阅读全文
posted @ 2017-02-24 16:00 zqzdong 阅读(1016) 评论(0) 推荐(0)
2015年10月
MySql--查询某字段相同数据的条数据
摘要： 1：select sampling,count(*) from aa group by sampling having count(*)>1; 阅读全文
posted @ 2015-10-20 15:26 zqzdong 阅读(553) 评论(0) 推荐(0)
hadoop--环境配置
摘要： 1:修改主机名和IP的映射关系 vim /etc/hosts 192.168.1.101 itcast 2:修改主机名: vi /etc/sysconfig/network (Master ) 3:关闭防火墙 #查看防火墙状态 service iptables status #关闭防火墙 servi 阅读全文
posted @ 2015-10-14 10:55 zqzdong 阅读(214) 评论(0) 推荐(0)
hadoop--时间同步
摘要： 1：要让linux机器连上网： 2：执行 yum install -y ntpdate 3:调整时区为上海，也就是北京时间+8区注：想改其他时区也可以去看看/usr/share/zoneinfo目录# cp /usr/share/zoneinfo/Asia/Shanghai /etc/localti 阅读全文
posted @ 2015-10-14 10:37 zqzdong 阅读(212) 评论(0) 推荐(0)
2015年9月
JAVA--将MongoDB数据写出到CSV
摘要： package com.ReadMongodbToCsv; import java.io.BufferedWriter; import java.io.File; import java.io.FileWriter; import java.io.IOException; import java.net.UnknownHostException; import java.util.ArrayL... 阅读全文
posted @ 2015-09-26 16:10 zqzdong 阅读(734) 评论(0) 推荐(0)
JAVA--读取csv文件并导数
摘要： package com.datahander; import java.io.File; import java.nio.charset.Charset; import java.util.ArrayList; import java.util.List; import com.csvreader.CsvReader; import com.util.Manager; public c... 阅读全文
posted @ 2015-09-26 15:35 zqzdong 阅读(472) 评论(0) 推荐(0)
MongoDB---windows安装
摘要： 1.去mongodb的官网http://www.mongodb.org/downloads下载32bit（64bit）的包。 2.将其解压至固定目录 ：如D:/mondodb。 3.在mongodb目录下新建data、logs、etc文件夹。 4.在etc文件夹下新建mongodb.config文件 阅读全文
posted @ 2015-09-26 14:21 zqzdong 阅读(180) 评论(0) 推荐(0)
JAVA-文件合并
摘要： package com.testSplitByNumber; import java.io.BufferedWriter; import java.io.File; import java.io.FileWriter; import java.io.IOException; import java.nio.charset.Charset; import java.util.ArrayList;... 阅读全文
posted @ 2015-09-26 11:39 zqzdong 阅读(522) 评论(0) 推荐(0)
JAVA-分割大文件（按行分割）
摘要： package com.testSplitByNumber; import java.io.BufferedWriter; import java.io.File; import java.io.FileWriter; import java.io.IOException; import java.nio.charset.Charset; import java.util.HashMap; i... 阅读全文
posted @ 2015-09-26 11:36 zqzdong 阅读(3851) 评论(0) 推荐(0)