Fork me on GitHub
摘要: 这是一篇几年前写下的文档,最近打算根据这篇文档重写一下kettle插件的教程。结果各种理由,一推再推。今天索性将这篇文档发布出来,分享给大家,例子等有空再补上。这是一篇基于kettle3.2基础上完成的kettle插件文档。然而现在最新版的kettle的界面已经完全变了样了,但是那些组件还是那么... 阅读全文
posted @ 2015-06-26 11:52 秋楓 阅读(17221) 评论(0) 推荐(2) 编辑
摘要: mysql主从复制相信已经用得很多了,但是由于工作原因一直没怎么用过。趁着这段时间相对空闲,也就自己实现一遍。尽管互联网上已有大把类似的文章,但是自身实现的仍然值得记录。环境:主服务器:centos 6.0 mysql 5.1.67-log IP:192.168.0.107从服务器:centos... 阅读全文
posted @ 2015-05-31 18:32 秋楓 阅读(68587) 评论(2) 推荐(4) 编辑
摘要: 我常用的那些linux命令 用linux也有些年头了,说来也忏愧,说是有些年头了,其实也还是个不长进的主。记得第一次接触linux是boss跟我说的怎么操作,什么编辑模式,按i,a,o进入编辑模式。在一个黑乎乎的窗口下不知道怎么胡乱编辑一通。那时的我说来也真是初生牛犊不怕虎呀,对linux一窍不通居 阅读全文
posted @ 2015-05-14 11:29 秋楓 阅读(832) 评论(0) 推荐(0) 编辑
摘要: 试想一下,如果每天要收集100页网页数据甚至更多。如果采用人工收集会吐血,用程序去收集也就成为一个不二的选择。首先肯定会想到说用java、php、C#等高级语言,但这偏偏又有个登陆和验证码,搞到无所适从。还在为收集web端的数据感到苦恼吗?你找对地方了。 阅读全文
posted @ 2015-05-09 15:54 秋楓 阅读(48983) 评论(9) 推荐(12) 编辑
摘要: 本文主要总结下重做日志(redo log)、回滚日志(undo log)、二进制日志(binlog)的概念。redo log 是物理日志,undo log 和 binlog 是逻辑日志,物理日志的恢复速度远快于逻辑日志。 1、redo log、undo log innodb 事务日志包括 redo 阅读全文
posted @ 2021-08-11 17:10 秋楓 阅读(374) 评论(0) 推荐(0) 编辑
摘要: 在新版的 Kafka Producer 中,设计了一个消息缓冲池,在创建 Producer 时会默认创建一个大小为 32M 的缓冲池,也可以通过 buffer.memory 参数指定缓冲池的大小,同时缓冲池被切分成多个内存块,内存块的大小就是我们创建 Producer 时传的 batch.size 阅读全文
posted @ 2021-05-11 12:31 秋楓 阅读(441) 评论(0) 推荐(0) 编辑
摘要: 转自:https://shishan100.gitee.io/docs/#/./docs/middleware/page10 目录 1、页缓存技术 + 磁盘顺序写 2、零拷贝技术 3、最后的总结 Kafka 是高吞吐低延迟的高并发、高性能的消息中间件,在大数据领域有极为广泛的运用。配置良好的 Kaf 阅读全文
posted @ 2021-05-11 11:20 秋楓 阅读(330) 评论(0) 推荐(0) 编辑
摘要: 注册中心规则 每一个微服务启动的时候,都需要去注册中心注册(eureka或zookeeper或其他) 同类服务注册的服务名必须相同,不同类服务注册的服务名一定不能相同 (订单服务部署5台服务器,那么这5台微服务在注册中心中注册的服务名必须一致,例如ORDER) (商品服务部署4台服务器,那么这4台微 阅读全文
posted @ 2021-05-11 10:56 秋楓 阅读(331) 评论(0) 推荐(0) 编辑
摘要: 本文转自:https://shishan100.gitee.io/docs/#/./docs/page/page6 这篇文章,我们继续给大家聊聊另外一个线上系统在生产环境遇到的问题。 一、背景介绍 背景情况是这样:线上一个系统,在某次高峰期间 MQ 中间件故障的情况下,触发了降级机制,结果降级机制触 阅读全文
posted @ 2021-05-10 10:28 秋楓 阅读(90) 评论(0) 推荐(0) 编辑
摘要: 分享一个简单粗暴的提升搜索引擎网站排名的思路 此文默认有一定的seo基础 这可以说是提升搜索引擎网站排名的一个猥琐方法,此处仅提供思路和交流之用。提高搜索引擎排名的方法有很多,从经典的“内容为王 外链为皇”说起,由最原始的手写文章,到各个论坛、网站发外链;最原始的seo都是手工每天定时定量发外链、发 阅读全文
posted @ 2020-10-27 17:29 秋楓 阅读(685) 评论(0) 推荐(0) 编辑
摘要: Cefsharp 75 为每个实例单独设置缓存目录 https://www.cnblogs.com/gulangduxiao/p/12257884.html cefsharp winfrom 保存用户登录 https://segmentfault.com/q/1010000020991929 Cef 阅读全文
posted @ 2020-10-23 18:32 秋楓 阅读(484) 评论(0) 推荐(0) 编辑
摘要: 最近通过windows server 2012通过cwRsync做双机互为备份,图片同步成功了,但是iis不管怎么设置权限【NET WORK、IIS_USR、EVERYONE等等的权限都已经设置了】都会报如下异常: System.UnauthorizedAccessException: 对路径的访问 阅读全文
posted @ 2020-10-23 18:30 秋楓 阅读(330) 评论(0) 推荐(0) 编辑
摘要: 本文转自:https://blog.whsir.com/post-1661.html 常见问题:https://blog.whsir.com/post-392.html 阅读全文
posted @ 2020-10-23 14:10 秋楓 阅读(187) 评论(0) 推荐(0) 编辑
摘要: https://blog.whsir.com/post-category/linux/rsync 阅读全文
posted @ 2020-10-23 09:30 秋楓 阅读(105) 评论(0) 推荐(0) 编辑
摘要: windows 2003 server 使用cwrsync 3 同步文件夹后,权限和安全属性不能同步,直接导致无法使用,查阅资料后发现必须在运行命令前使用SET CYGWIN=nontsec参数 将以下内容保存成.bat批处理文件后即可运行。 @ECHO OFF SET CYGWIN=nontsec 阅读全文
posted @ 2020-10-23 09:18 秋楓 阅读(872) 评论(0) 推荐(0) 编辑
摘要: 本文转自:https://www.cnblogs.com/sky6699/p/6183733.html 最大并发连接数 = 队列长度 + 工作线程数 【工作线程数】 IIS实际可以第一时间处理的请求数。比如,工作线程数 = 100,一万个连接请求同时涌过来,那么只有100个可以被处理,其余9900个 阅读全文
posted @ 2020-09-26 15:15 秋楓 阅读(598) 评论(0) 推荐(0) 编辑
摘要: 本文转自: https://segmentfault.com/a/1190000015571891 redis自带的redis-benchmark工具 Redis 自带了一个叫redis-benchmark的工具来模拟 N 个客户端同时发出 M 个请求。 (类似于 Apache ab 程序)。你可以 阅读全文
posted @ 2020-09-26 15:05 秋楓 阅读(344) 评论(0) 推荐(0) 编辑
摘要: 1、查询Redis并发量,连续统计模式redis-cli --stat 2、redis最大连接数config get maxclients 3、redis当前连接数、阻塞客户端数量redis-cli info Clients 4、拒绝连接数redis-cli info stats 5、监视在Redi 阅读全文
posted @ 2020-09-26 15:00 秋楓 阅读(517) 评论(0) 推荐(0) 编辑
摘要: 1 慢查询 默认情况下命令若是执行时间超过10ms就会被记录到日志,slowlog只会记录其命令执行的时间,不包含io往返操作,也不记录单由网络延迟引起的响应慢。如果想修改慢命令的标准可以使用下面的命令 # 超过5毫秒为慢命令 config set slowlog-log-slower-than 5 阅读全文
posted @ 2020-09-26 14:58 秋楓 阅读(462) 评论(0) 推荐(0) 编辑