会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
黎明踏浪
博客园
首页
新随笔
联系
订阅
管理
上一页
1
2
3
4
5
6
下一页
2019年8月1日
Ubuntu18.04 下 Spark 2.4.3 standalone模式集群部署
摘要: 虚拟机操作系统: ubuntu 18.04 server + gnome 桌面 前置环境准备: 1、集群主机名和hosts文件映射:https://www.cnblogs.com/benfly/p/8117996.html 2、集群ssh免密登录:https://www.cnblogs.com/be
阅读全文
posted @ 2019-08-01 17:19 黎明踏浪号
阅读(648)
评论(0)
推荐(1)
2019年7月19日
ubuntu ssh 配置问题的解决
摘要: 在Window10的Hyper-V上安装了ubuntu系统,先配置好了一台虚拟机,在虚拟机上也配置了ssh,为了配置3台虚拟机,在这台机器上又继续设置了免密登陆,详见: Ubuntu SSH安装及配置免密码登录,但克隆创建另外一台新的虚拟机后,发现本来可以ssh的系统,已经无法连接了,ssh ser
阅读全文
posted @ 2019-07-19 16:38 黎明踏浪号
阅读(5507)
评论(0)
推荐(0)
2019年6月18日
window10 WSL子系统上设置redis开发环境
摘要: Redis是常用的缓存,部署在Linux系统中,但日常开发中,使用window系统的较多,如果是在window10系统上,则可以通过应用Window Subsystem for Linux来构建开发环境,WSL是运行在window系统上的一个Linux子系统,有点类似cygwin,这样就可以在win
阅读全文
posted @ 2019-06-18 15:21 黎明踏浪号
阅读(4257)
评论(0)
推荐(0)
2019年5月16日
在window中模拟执行linux 脚本
摘要: 现在后端环境常常是linux系统,但很多情况下,我们的开发环境是Window系统,为了能在window下模拟linux的脚本,而且也能够ssh到linux server,我们可以在window系统中安装这样一个模拟环境 cmder,以下举例说明如何使用cmder 脚本 bash 脚本:test.sh
阅读全文
posted @ 2019-05-16 14:24 黎明踏浪号
阅读(2186)
评论(0)
推荐(0)
2019年1月23日
CentOS在virtual box中启动后网络未连接的解决
摘要: 场景: Virtual Box虚拟机环境,网络连接方式是Internal CentOS7系统,启动为命令行模式,配置静态IP:192.168.3.2 启动后网络显示未连接 解决步骤: 1:查看ip地址,在命令行执行命令:ifconfig 这个网卡设备名是enp0s3,配置的是静态IP,启动后网络未连
阅读全文
posted @ 2019-01-23 16:10 黎明踏浪号
阅读(793)
评论(0)
推荐(0)
CentOS SSH免密登录问题解决
摘要: CentOS中SSH的免密配置基本上和在Ubuntu上配置一样,但在配置过程中遇到一个问题,在配置好后却依旧需要输入密码才可以登录。下面是解决此问题的过程 检查authorized_keys文件权限,并设置为700 chmod 700 authorized_keys 检查/etc/ssh/sshd_
阅读全文
posted @ 2019-01-23 14:07 黎明踏浪号
阅读(1308)
评论(0)
推荐(0)
2019年1月14日
深入图解Kafka producer 发送过程
摘要: 在新版本的kafka中(从0.9开始),其实只有异步方式一种,是批量发送的方式 在producer端,存在2个线程,一个是producer主线程,用户端调用send消息时,是在主线程执行的,数据被缓存到RecordAccumulator中,send方法即刻返回,也就是说此时并不能确定消息是否真正的发
阅读全文
posted @ 2019-01-14 16:14 黎明踏浪号
阅读(3684)
评论(1)
推荐(1)
2018年12月11日
SFTP 协议栈及JSch的应用
摘要: 现在项目中,从安全角度出发,更多的使用SFTP来取代FTP,以保证文件传输的安全性,本文简单的描述了SFTP的重要特性及各协议层次的交互过程,并没有深入到细节,另外也介绍了使用JSch在java应用中的开发过程,在研究过程中,查找学习了相关的技术文章,觉得有些图片能很好的描述SFTP协议,也引用了,
阅读全文
posted @ 2018-12-11 16:30 黎明踏浪号
阅读(1167)
评论(0)
推荐(0)
2018年10月30日
Kafka 消费语义
摘要: 作为一个消息系统,当消息从producer流到consumer,有许多因素都会影响到消息的消费,在kafka中,消息有3种消费语义: 对于这3种语义,我们来看一下可能出现的场景 producer端 发送一条消息后,可能有几种状况和行为 网络可能出错,导致producer端无法收到ack,produc
阅读全文
posted @ 2018-10-30 16:06 黎明踏浪号
阅读(1152)
评论(0)
推荐(0)
2018年10月22日
Kafka consumer代码研究及核心逻辑分析
摘要: Kafka Consumer API是客户端的接口,封装了消息的接收,心跳的检测,consumer的rebalance等,此分析的代码基于kafka-clients-0.10.0.1 java版本 KafkaConsumer.pollOnce 是轮询的入口,完成一次轮询动作,包括consumer相关
阅读全文
posted @ 2018-10-22 17:37 黎明踏浪号
阅读(2541)
评论(0)
推荐(0)
上一页
1
2
3
4
5
6
下一页
公告