会员
周边
新闻
博问
闪存
众包
赞助商
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
liuzijin
博客园
首页
新随笔
联系
订阅
管理
上一页
1
···
47
48
49
50
51
52
53
54
55
···
127
下一页
2023年9月19日
FAILED: HiveException java.lang.RuntimeException: Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient问题的解决
摘要: 问题描述 今天再次打开虚拟机(之前交完作业之后,就不敢再打开了,害怕看到报错信息),打开hive之后,启用hive命令时,发现了这个问题; 问题解决 经查阅资料发现,原来是因为我再使用hive命令之前,没有开启metastore服务和hiveserver2服务,先开启了这两个服务,再进入hive里面
阅读全文
posted @ 2023-09-19 14:54 yesyes1
阅读(1221)
评论(0)
推荐(0)
2023年9月18日
每日总结
摘要: 今日收获 将ppt写完啦!! 背了不少的单词,明天一定要记得报名六级去!!! 学习hadoop的基础知识嘞! 还有,学到了python爬取数据的话,是分为url是否带参数的(params)! 明天预计 报名六级!! 希望开发案例能发挥得好一点! 继续学习大数据的相关知识! 背单词当然少不了啊!
阅读全文
posted @ 2023-09-18 22:30 yesyes1
阅读(12)
评论(0)
推荐(0)
指定请求头部爬取知乎网
摘要: 1、获取知乎网的url 2、检查后台--获取header信息 3、获取json数据 4、输出数据
阅读全文
posted @ 2023-09-18 21:46 yesyes1
阅读(38)
评论(0)
推荐(0)
让python采集的数据存储为json类型
摘要: 发现一个问题,要是想要把网站中的数据提取出来之后, 变成json数据格式存储起来,就需要先把想要查看的关键信息用dict类型封装起来,然后才能转换成格式正确的json文件; 就比如这样: 妥妥的json数据格式欸!!! 一个简单实例:
阅读全文
posted @ 2023-09-18 21:24 yesyes1
阅读(53)
评论(0)
推荐(0)
HttpClient采集页面数据
摘要: 1、导入相关依赖 <!-- https://mvnrepository.com/artifact/org.apache.hadoop/hadoop-client --> <dependency> <groupId>org.apache.hadoop</groupId> <artifactId>had
阅读全文
posted @ 2023-09-18 19:26 yesyes1
阅读(116)
评论(0)
推荐(0)
Python实现数据采集
摘要: 前提是配置好hadoop的相关环境 1、分析网页,确定采集的数据 我们需要获取到该网页的如下几个信息: 请求信息: url——网站页面地址 设置这个请求的请求头: headers——(user-agent/referer/origin/cookie) 设置这个请求的传递数据: data——(firs
阅读全文
posted @ 2023-09-18 18:15 yesyes1
阅读(126)
评论(0)
推荐(0)
2023年9月17日
每日总结
摘要: 今日收获 突然想起来王老师要求下周上交一个文档,然后就查资料/写文档/查资料/写文档......,写完,后续继续修改! 继续做昨天没做完的ppt了; 背单词..背单词! 明天预计 上课啦!--第三周旅程开启! 要开始自己提前学习软件设计啦! 技术也要好好提升去!
阅读全文
posted @ 2023-09-17 22:58 yesyes1
阅读(6)
评论(0)
推荐(0)
2023年9月16日
每日总结
摘要: 今日收获 重新踏上背单词的道路(因为课程耽误了一点)! 准备软考题目!! 将下周要展示的ppt的大纲弄了; 明天预计 继续提升一下自己关于基础的薄弱地方,这周五的情况受不了一点; 接着备考吧! 9.19报名六级,希望一次过嘿!
阅读全文
posted @ 2023-09-16 22:23 yesyes1
阅读(12)
评论(0)
推荐(0)
springboot+html使用sql语句能够在控制台输出相关数据信息list,但是输出的list=null(未解决)
摘要: 问题描述 具体来说,就是,连接上数据库之后,发现查询的sql语句能够正常在控制台输出数据,但是将sql语句的查询结果放到list里面, 在控制台输出的list=[null]; 真的崩溃了!!! 之前从来没有遇到过这种情况; 尝试了网上的各种方法,也都解决不了,麻木ing~ 求解!
阅读全文
posted @ 2023-09-16 21:51 yesyes1
阅读(34)
评论(0)
推荐(0)
不小心把pom.xml文件变成了Ant类型,然后全面爆红问题的解决
摘要: 问题描述 不小心按到了这里: 导入依赖的文件这里就全面爆红了!! 本来都要配置完成了,出现这个误操作,真的很崩心态! 问题解决 这么操作: 文件目录-->Views-->Tool Windows-->Ant; 就能够打开Ant的相关界面; 然后右键选中想要操作的文件,选择Remove,就能解决啦!
阅读全文
posted @ 2023-09-16 21:44 yesyes1
阅读(459)
评论(0)
推荐(0)
上一页
1
···
47
48
49
50
51
52
53
54
55
···
127
下一页
公告