会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
ppjj
博客园
首页
新随笔
联系
管理
上一页
1
2
3
4
5
6
7
···
81
下一页
2023年4月13日
使用go modules目录构成
摘要: 首先在workspace工作空间gocode下面生成一个go.work文件,使用命令:go work init ./a工程 ./b工程,这里面要列出所有的工程 go.work文件内容: go 1.20 use ( ./src/chapter12 ./src/chapter13 ./src/chapt
阅读全文
posted @ 2023-04-13 11:30 ppjj
阅读(82)
评论(0)
推荐(0)
2023年4月12日
使用go语言通过第三方库go-redis操作Redis
摘要: go-redis使用 安装:在GOPATH路径下面执行命令:go get -u github.com/redis/go-redis -u:表示update 文档地址: https://redis.uptrace.dev/zh/ https://pkg.go.dev/github.com/go-red
阅读全文
posted @ 2023-04-12 17:02 ppjj
阅读(821)
评论(0)
推荐(0)
2022年12月2日
使用kafka时踩过的坑
摘要: 1,如何保证消费顺序,比如同一个用户的下单,撤单肯定有先后顺序。 解决方法:把订单号放在topic中指定partition。 2,用户因为网络延迟导致下单失败,后端看不到用户订单消息,但是却撤单了。 解决方法:消费者消费消息的时候,先判断订单号是否属于下单失败,如果是,则把下单失败的消息放到重试表中
阅读全文
posted @ 2022-12-02 15:53 ppjj
阅读(151)
评论(0)
推荐(0)
2022年10月31日
Hadoop错误2_Hadoop伪分布式下,运行WordCount时,Input path does not exist错误原因
摘要: 在伪分布式下,按照下面两个博客,分别以命令行方式和Eclipse执行WordCount程序时,都会出现同样的错误, (Eclipse:http://blog.csdn.net/wang_zhenwei/article/details/47422775) (命令行方式:http://blog.csdn
阅读全文
posted @ 2022-10-31 18:16 ppjj
阅读(813)
评论(0)
推荐(0)
Cannot initialize Cluster. Please check your configuration for mapreduce.framework .name and the cor
摘要: 背景 利用ambari搭建的新环境,跑数据出现了不少问题,但如下问题困扰了很长时间,直到今天才得以解决,每次报错。按照网上的各种方式都不行。我知道问题点肯定在spark2.3.1 集成hive3.1.0的版本问题上,因为hive3.1.0新增了很多功能,如事务等,发布时间没有长时间的积累,出问题很容
阅读全文
posted @ 2022-10-31 18:07 ppjj
阅读(417)
评论(0)
推荐(0)
Exceptioninthread “main“ org.apache.hadoop.mapred.InvalidJobConfException: Output directory not set.
摘要: Driver有七个步骤。今天在写的时候不细心造成一个错误。 这是错误的 //6、设置输入路径和输出路径 FileInputFormat.setInputPaths(job,new Path("D:\\BaiduNetdiskDownload\\Hadoop\\ziliao\\11_input\\in
阅读全文
posted @ 2022-10-31 17:59 ppjj
阅读(212)
评论(0)
推荐(0)
完美解决 java: 无效的目标发行版: 11
摘要: 1、问题描述 经过研究才发现,这是因为作者使用了jdk8进行编译,而试图使用jdk11的功能,这就必然会导致版本问题,因为jdk8支持1-8这个区间的功能,如何解决这个问题呢? image-20220415205000583 2、平台JDK版本 首先介绍如何在IDEA上添加新版本,点击Project
阅读全文
posted @ 2022-10-31 17:55 ppjj
阅读(4521)
评论(0)
推荐(0)
2022年10月20日
org.apache.hadoop.fs.UnsupportedFileSystemException: No FileSystem for scheme “hdfs“
摘要: Configuration configuration = new Configuration(); FileSystem fs = FileSystem.get(new URI("hdfs://172.17.0.123:9000"), configuration, "hadoop"); 可能是没有
阅读全文
posted @ 2022-10-20 14:59 ppjj
阅读(802)
评论(0)
推荐(0)
Hadoop写入时报没有权限org.apache.hadoop.security.AccessControlException): Permission denied: user=root
摘要: Caused by: org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.security.AccessControlException): Permission denied: user=root, access=WRITE, inode
阅读全文
posted @ 2022-10-20 14:55 ppjj
阅读(991)
评论(0)
推荐(0)
2022年9月29日
Linux系统strac命令
摘要: strace :监控程序的执行状况 在linux 空间下,运行一个程序时,操作系统会将应用程序封装一个进程的形式,参与操作系统的调度,可以使用strace 跟踪程序运行的情况。 基本功能 监控用户进程与内核进程的交互 追踪进程的系统调用、信号传递、状态变化 一、系统调用 分类 文件和设备访问:ope
阅读全文
posted @ 2022-09-29 10:29 ppjj
阅读(378)
评论(0)
推荐(0)
上一页
1
2
3
4
5
6
7
···
81
下一页
公告