随笔分类 -  网络流量分析与监控系统

监控网络流量特征 flume+kafka+storm+redis+mysql
流量分析系统----实现-echarts模拟迁移(bmap.js/china.js)
摘要：china.js: bmap.js： 阅读全文
posted @ 2018-03-14 15:35 透明的红萝卜 阅读(645) 评论(0) 推荐(0)
流量分析系统---echarts模拟迁移中 ，geocoord从后台获取动态数值
摘要：由于在echarts的使用手册中说了 {Object} geoCoord (geoCoord是Object类型) ，所以不能用传统的字符串拼接或数组的方式赋值。在后台的controller中用Map<String, double[]> geocoordMap=new HashMap<String, 阅读全文
posted @ 2018-03-14 15:12 透明的红萝卜 阅读(1367) 评论(1) 推荐(0)
使用idea2016导出web项目war包
摘要：第一步配置Web Application:Exploded（已经配置的可以跳到第二步）： 打开project structure（默认的快捷键是Ctrl+Alt+Shift+S），依次选择Artifacts》+》Web Application:Exploded》From Module选择项目相应的m 阅读全文
posted @ 2018-03-13 15:57 透明的红萝卜 阅读(528) 评论(0) 推荐(0)
通过ip得到所在城市,以及城市所在经纬度坐标（监控系统中用的该代码，小航哥）
摘要：监控系统中就是利用的该段代码，实现通过ip得到所在城市,以及城市所在经纬度坐标，最后得以利用echarts实现模拟迁移的效果 api官方介绍： http://lbsyun.baidu.com/index.php?title=webapi/ip-api ， 阅读全文
posted @ 2018-02-03 13:58 透明的红萝卜 阅读(435) 评论(0) 推荐(0)
echarts3.8.4实现城市空气质量(结合百度地图bmap.js，小航哥)
摘要：（小航哥自己实现的）为了事先地图效果，需要以下准备： 用百度地图作为地图，需要 1、bmap.min.js（下载地址https://github.com/ecomfe/echarts ，GitHub上echarts源代码中路径为 dist/extension/bmap.min.js） 2、百度的ak 阅读全文
posted @ 2018-02-01 17:56 透明的红萝卜 阅读(1131) 评论(0) 推荐(0)
流量分析系统----讲解-echarts模拟迁移(结合china.js)
摘要：百度 Echarts 地图->模拟迁徙，实现自动切换地图 小航哥注释： 1、本文主要是把模拟迁移的流程讲了一遍，讲的很好。具体实现参考航哥这篇随笔“流量分析系统 实现-echarts模拟迁移(bmap.js/china.js)” 2、用了china.js就不需要用百度地图的bmap.js，两者取其一 阅读全文
posted @ 2018-02-01 17:34 透明的红萝卜 阅读(4153) 评论(0) 推荐(0)
echarts3.8.4实现模拟迁移
摘要：动态接受城市的经纬度https://zhidao.baidu.com/question/1384875311724922940.html 调用百度api获得ip对应的城市https://www.cnblogs.com/shylock08/p/6284013.html 调用百度api获得城市对应的经纬 阅读全文
posted @ 2018-01-21 20:52 透明的红萝卜 阅读(192) 评论(0) 推荐(0)
流量分析系统---启动流程
摘要：killall -9 java zookeeper: kafka 创建一个topic(如果直接创建过，可以跳过) kafka-topics.sh --create --zookeeper mini1:2181 --replication-factor 1 --partitions 4 --topic 阅读全文
posted @ 2018-01-08 09:47 透明的红萝卜 阅读(332) 评论(0) 推荐(0)
流量分析系统---redis
摘要：1\启动redis 方法一： 修改了某些配置，具体步骤惨开下面的内容 [root@mini1 ~]# service redis stop/start 方法二： [root@mini1 bin]#cd /usr/local/bin [root@mini1 bin]# redis-server /et 阅读全文
posted @ 2018-01-07 17:59 透明的红萝卜 阅读(751) 评论(0) 推荐(0)
流量分析系统---flume(测试flume+kafka)
摘要：1、在flume官方网站下载最新的flume wget http://124.205.69.169/files/A1540000011ED5DB/mirror.bit.edu.cn/apache/flume/1.6.0/apache-flume-1.6.0-bin.tar.gz 2、解决flume安 阅读全文
posted @ 2018-01-07 16:02 透明的红萝卜 阅读(824) 评论(0) 推荐(0)
流量分析系统---kafka集群部署
摘要：1、集群部署的基本流程 Storm上游数据源之Kakfa 下载安装包、解压安装包、修改配置文件、分发安装包、启动集群 2、基础环境准备 3、集群部署 3.1下载安装包 wget http://mirrors.hust.edu.cn/apache/kafka/0.8.2.2/kafka_2.11-0. 阅读全文
posted @ 2018-01-07 15:45 透明的红萝卜 阅读(400) 评论(0) 推荐(0)
流量监控系统---storm集群配置
摘要：1、集群部署的基本流程 集群部署的流程：下载安装包、解压安装包、修改配置文件、分发安装包、启动集群 注意： 所有的集群上都需要配置hosts vi /etc/hosts 192.168.223.201 storm01 zk01 hadoop01 192.168.223.202 storm02 zk0 阅读全文
posted @ 2018-01-07 14:50 透明的红萝卜 阅读(289) 评论(0) 推荐(0)
流量分析系统--zookeeper集群部署
摘要：安装zookeeper mkdir apps tar -zxvf zookeeper-3.4.5.tar.gz -C apps [root@mini1 zookeeper-3.4.5]# rm -rf src/ *.xml *.txt [root@mini1 zookeeper-3.4.5]# rm 阅读全文
posted @ 2018-01-06 21:49 透明的红萝卜 阅读(167) 评论(0) 推荐(0)
Centos----本地yum源制作
摘要：本地YUM源制作 1. YUM相关概念 1.1. 什么是YUM YUM（全称为 Yellow dog Updater, Modified）是一个在Fedora和RedHat以及CentOS中的Shell前端软件包管理器。基于RPM包管理，能够从指定的服务器自动下载RPM包并且安装，可以自动处理依赖性 阅读全文
posted @ 2018-01-06 17:20 透明的红萝卜 阅读(280) 评论(0) 推荐(0)
Centos---linux配置 集群搭建
摘要：网络配置 1、创建虚拟机mini1： 1.1、网络配置 NAT网络模式模式 直接修改 /etc/sysconfig/network-script/ifcfg-eth0 输入service network restart重启网络服务 1.2关闭防火墙 service iptables stop + c 阅读全文
posted @ 2018-01-06 14:43 透明的红萝卜 阅读(410) 评论(0) 推荐(0)
关于IDEA导出项目jar包/runnable jar
摘要：将项目导出为jar包分为 runnable jar 与 普通jar包 一、导出为普通jar包 该jar包中只有项目源代码， java -cp wordcount.jar 用来运行普通jar包 1、打开 File > Project Structure > Artifacts 2、添加一个 Artif 阅读全文
posted @ 2017-11-28 21:09 透明的红萝卜 阅读(4565) 评论(0) 推荐(0)
最小化CentOS6.7(64bit)---安装mysql5.5、jdk、tomcat
摘要：********mysql******** 所需要的rpm文件： (https://downloads.mysql.com/archives/community) MySQL-client-5.5.48-1.linux2.6.x86_64.rpm MySQL-server-5.5.48-1.linu 阅读全文
posted @ 2017-10-18 14:23 透明的红萝卜 阅读(213) 评论(0) 推荐(0)