摘要: NetFlow学习笔记 随着系统的升级与漏洞的修补,入侵主机进而进行破坏的病毒攻击方式在攻击中所占比例逐渐减少,这些攻击转而改为恶意的消耗网络有限的资源或占用系统,进而破坏系统对外提供服务的能力;但传统的系统升级无法检测并预防此类攻击。1、什么是NetFlow 2、NetFlow版本 3、NetFlow用途 4、NetFlow工作原理 5、NetFlow七元组 6、NetFlow数据格式 7、NetFlow优点 阅读全文
posted @ 2017-10-19 17:36 蛮力之精灵 阅读(6352) 评论(0) 推荐(0) 编辑
 
摘要: 基于Spark和SparkSQL的NetFlow流量的初步分析——scala语言 本文主要是介绍如何使用Spark做一些简单的NetFlow数据的处理,是基于 IntelliJ IDEA开发Spark 的Maven项目,本文会介绍一些简单的NetFlow基础知识,以及如何在 IntelliJ IDEA 上开发Maven项目,用Scala 写的一些简单的NetFlow字段分析统计的代码,包括 SparkCore和SparkSQL两个版本的。 阅读全文
posted @ 2017-10-19 17:33 蛮力之精灵 阅读(580) 评论(0) 推荐(0) 编辑

2017年11月23日

摘要: 为什么需要动态读取配置文件 Spark程序的运行过程 从HDFS中读取配置文件 获取文件的MD5值,如果MD5值发生变化说明文件有改动,如果不变说明文件没有改动 阅读全文
posted @ 2017-11-23 10:05 蛮力之精灵 阅读(2749) 评论(1) 推荐(1) 编辑