上一页 1 ··· 21 22 23 24 25 26 27 28 29 ··· 36 下一页

对result文件进行数据清洗以及进行可视化

摘要: 项目源码地址:https://github.com/gayu121/result(项目里操作的数据都是清洗过后的数据) 测试要求: 1、 数据清洗:按照进行数据清洗,并将清洗后的数据导入hive数据库中。 两阶段数据清洗: (1)第一阶段:把需要的信息从原始日志中提取出来 (2)第二阶段:根据提取出 阅读全文
posted @ 2019-11-13 19:14 一往无前! 阅读(852) 评论(0) 推荐(0)

hive安装启动错误总结

摘要: 错误一: Exception in thread "main" java.lang.NoClassDefFoundError: jline/console/completer/ArgumentCompleter$ArgumentDelimiter at java.lang.Class.forName 阅读全文
posted @ 2019-11-06 12:01 一往无前! 阅读(1385) 评论(0) 推荐(1)

本机链接虚拟机的mapreduce错误解决方法

摘要: hadoop2.7.7的压缩包(已经含有hadoop.dll和winutils.exe路径就在hadoop/bin下)以及令附一个hadoop2x-eclipse-plugin-master文件 链接:https://pan.baidu.com/s/10ZZc6ft-GZAicuncJG_dLg 提 阅读全文
posted @ 2019-10-31 09:56 一往无前! 阅读(488) 评论(0) 推荐(0)

实验6:Mapreduce实例——WordCount

摘要: 启动hadoop。 Start-dfs.sh 创建在系统中创建一个的TXT文件,并将上面的数据包复制到文件中 将写好的文件从本地上传到hadoop上 (1)进入hadoop目录 (2)上传文件 在eclipse中创建MapReduce程序命名为count,然后导入相关的jar包 然后还需要导入三个配 阅读全文
posted @ 2019-10-30 18:48 一往无前! 阅读(325) 评论(0) 推荐(0)

MD5加密解密以及设置salt(盐值)

摘要: MD5算法 package com.oracle.jsp.util; import java.security.MessageDigest; import java.security.NoSuchAlgorithmException; /** * * @author wjxing * */ publ 阅读全文
posted @ 2019-10-23 21:55 一往无前! 阅读(7960) 评论(0) 推荐(0)

session的使用方法

摘要: //session的设置HttpSession session = request.getSession(); session.setAttribute("在传输过程中的名称", 需要传输的字段名); 获取session传来的值 HttpSession session = request.getSe 阅读全文
posted @ 2019-10-23 21:41 一往无前! 阅读(336) 评论(0) 推荐(0)

判断电话号码以及邮箱正确性的正则表达式

摘要: 参考链接: java函数 /** * 验证邮箱地址是否正确 * @param email * @return */ public static boolean checkEmail(String email){ boolean flag = false; try{ String check = "^ 阅读全文
posted @ 2019-10-23 21:29 一往无前! 阅读(1349) 评论(0) 推荐(0)

按照相应的格式获取系统时间并将其转化为SQL中匹配的(date)时间格式

摘要: 在获取时间时需要对时间格式进行设置,此时就需要用到SimpleDateFormat 类 1 SimpleDateFormat df = new SimpleDateFormat("yyyy-MM-dd");//设置日期格式此时表示(年月日),其格式 还可以为yyyy-MM-dd HH:mm:ss精确 阅读全文
posted @ 2019-10-23 20:55 一往无前! 阅读(413) 评论(0) 推荐(0)

暑假第七周总结(安装MongoDB和Tomcat以及MongoDB进行编程实践)

摘要: 本周主要对MongoDB和Tomcat进行了安装,两项安装都遇到了一些问题。其中在对MongoDB安装过程中出现了什么没有秘钥安全证书的,最终找了一堆教程重复了好多遍之后安装成功,虽然在启动和关闭的时候回提示什么mongodb: unrecognized service不过在进行测试的时候并没有问题 阅读全文
posted @ 2019-08-31 16:41 一往无前! 阅读(294) 评论(0) 推荐(0)

暑假第六周总结(对HBASE进行编程实践并且安装Redis)

摘要: 本周主要是根据教程对HBASE进行了编程实践,对于hadoop的编程来说需要用到很多的.jar 包,在进行编程实践的时候需要参照相关的教程将jar包添加至程序当中去。教程上给的代码还是比较详细的,加上之前的学习,对于一些简单代码还是比较容易理解的。另外本周还对典型的NOSQL数据库Redis进行了安 阅读全文
posted @ 2019-08-17 10:14 一往无前! 阅读(151) 评论(0) 推荐(0)
上一页 1 ··· 21 22 23 24 25 26 27 28 29 ··· 36 下一页