2020年5月12日
hadoop常用命令
摘要： 在 hadoop-2.9.2下 权限bin/hdfs dfs -chmod -R 777 / 格式化bin/hdfs namenode -format 启动进程sbin/start-all.sh //上传文件bin/hdfs dfs -put /opt/module/hadoop-2.9.2/REA 阅读全文
posted @ 2020-05-12 21:26 潇洒哥浩浩 阅读(141) 评论(0) 推荐(0)
大数据统计回流用户
摘要： use applogsdb; msck repair table ext_startup_logs; select distinct deviceid from sockinfowhere appid='sdk34734' and concat(ym,day) >= formattime(getwe 阅读全文
posted @ 2020-05-12 21:22 潇洒哥浩浩 阅读(339) 评论(0) 推荐(0)
jdbc上传下载
摘要： package hdfs; import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.*;import org.apache.hadoop.io.IOUtils; import java.io.File;impor 阅读全文
posted @ 2020-05-12 20:19 潇洒哥浩浩 阅读(169) 评论(0) 推荐(0)
大数据mr本地运行需要配置Program arguments
摘要： file:\C:\Users\Administrator\Desktop\新建文件夹\\a.txt,file:\C:\Users\Administrator\Desktop\新建文件夹\\b.txt,file:\C:\Users\Administrator\Desktop\新建文件夹\\c.txtf 阅读全文
posted @ 2020-05-12 14:41 潇洒哥浩浩 阅读(304) 评论(0) 推荐(0)
大数据之倒序输出
摘要： package three;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.FileSystem;import org.apache.hadoop.fs.Path;import org.apache.ha 阅读全文
posted @ 2020-05-12 14:36 潇洒哥浩浩 阅读(263) 评论(0) 推荐(0)
大数据之Uv统计
摘要： package two;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.FileSystem;import org.apache.hadoop.fs.Path;import org.apache.hado 阅读全文
posted @ 2020-05-12 14:34 潇洒哥浩浩 阅读(494) 评论(0) 推荐(0)
order订单关联输出
摘要： package one;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.FileSystem;import org.apache.hadoop.fs.Path;import org.apache.hado 阅读全文
posted @ 2020-05-12 14:30 潇洒哥浩浩 阅读(171) 评论(0) 推荐(0)