2018年8月16日
perfmon——使用windows系统自带的性能监视器监控进程信息
摘要： 第一次使用perfmon监控应用进程的信息，步骤总结如下： 第一部分 性能监视器 1.快捷键Win+R打开运行界面，输入“perfmon”命令后回车即可打开windows的性能监视器 2.点击“性能监视器”，可看到默认的监视内容（CPU使用情况） 3.点击“添加”按钮，可添加需要测试的计数器 这里我 阅读全文
posted @ 2018-08-16 14:47 zhengna 阅读(14201) 评论(0) 推荐(1)
2018年8月13日
jmeter测试文件上传接口报错：connection reset by peer: socket write error
摘要： 最近在对文件上传接口性能测试时，设置150线程数并发时，总会出现以下错误：connection reset by peer: socket write error 在网上搜索了一下，得到的原因有这些： 服务器的并发连接数超过了其承载量，服务器会将其中一些连接Down掉；客户关掉了浏览器，而服务器还在 阅读全文
posted @ 2018-08-13 11:10 zhengna 阅读(1586) 评论(0) 推荐(0)
2018年8月10日
kafka4 副本机制
摘要： 概述 每个分区有n个副本，可以承受n-1个节点故障。 每个副本都有自己的leader，其余都是follower。 zk中存放分区的leader和 follower replica的信息。（get /brokers/topics/mytest2/partitions/0/state） 每个副本存储消息 阅读全文
posted @ 2018-08-10 09:57 zhengna 阅读(360) 评论(0) 推荐(0)
2018年8月8日
kafka2 简单介绍
摘要： kafka是JMS的一种实现 JMS（java message service）：middle ware，中间件技术。Queue:队列模式，P2P，点对点。publish-subscribe:主题模式，发布订阅模式。 消息中间件具体了解点这里。 kafka--分布式流计算平台 类似于消息系统发布订阅 阅读全文
posted @ 2018-08-08 11:15 zhengna 阅读(405) 评论(0) 推荐(0)
2018年8月6日
kafka3 本地目录结构以及在在zk上的znode
摘要： 一 kafka本地目录结构 搭建单节点多broker的kafka后，启动zk和kafka。 创建kafka集群时我已经创建了一个主题test02,现在我们再创建一个主题mytest（2个分区） 查看日志目录可以发现，3个日志目录几乎是一致的（__consumer_offsets-0是个什么鬼？） t 阅读全文
posted @ 2018-08-06 15:13 zhengna 阅读(2098) 评论(0) 推荐(0)
2018年8月3日
kafka1 三种模式安装
摘要： 一 搭建单节点单broker的kafka集群 注意：请打开不同的终端分别执行以下步骤 1.复制安装包到/usr/local目录下，解压缩，重命名（或者软链接），配置环境变量 2.启动服务器 启动zookeeper 启动kafka 3.创建topic 可以通过zk的客户端观察zk的数据结构 [root 阅读全文
posted @ 2018-08-03 12:47 zhengna 阅读(2849) 评论(0) 推荐(0)
2018年7月30日
执行hadoop自带的WordCount实例
摘要： hadoop 自带的WordCount实例可以统计一批文本文件中各单词出现的次数。下面介绍如何执行WordCount实例。 1.启动hadoop 2.在本地新建目录及2个文件 3.将本地文件系统上的input目录复制到HDFS根目录下，重命名为in 4.执行以下命令 [root@hadoop ~]# 阅读全文
posted @ 2018-07-30 17:35 zhengna 阅读(1599) 评论(0) 推荐(0)
Python3学习之路~2.10 修改haproxy配置文件
摘要： 需求： 1、查 输入：www.oldboy.org 获取当前backend下的所有记录 2、新建 输入： arg = { 'bakend': 'www.oldboy.org', 'record':{ 'server': '100.1.7.9', 'weight': 20, 'maxconn': 30 阅读全文
posted @ 2018-07-30 16:35 zhengna 阅读(268) 评论(0) 推荐(0)
Python3学习之路~0 目录
摘要： 目录 Python3学习之路~2.1 列表、元组操作 Python3学习之路~2.2 简单的购物车程序 Python3学习之路~2.3 字符串操作 Python3学习之路~2.4 字典操作 Python3学习之路~2.5 简单的三级菜单程序 Python3学习之路~2.6 集合操作 Python3学 阅读全文
posted @ 2018-07-30 14:17 zhengna 阅读(417) 评论(0) 推荐(1)
HIVE简单操作
摘要： 1.hive命令登录HIVE数据库后，执行show databases;命令可以看到hive数据库中有一个默认的default数据库。 [root@hadoop hive]# hive Logging initialized using configuration in file:/usr/loca 阅读全文
posted @ 2018-07-30 10:19 zhengna 阅读(1501) 评论(0) 推荐(0)